k8s中pod的hostport端口突然无法访问故障处理

本文介绍: 既然访问不通那就先给服务做个全面检查，看看哪里出了问题，看下sftp 日志，也没有啥关键报错，接下来查看了下sftp 服务的svc 端口，发现通过 svc 地址和端口是能正常访问的，通过 pod IP去访问也是可以，这就很奇怪了，唯独用主机 ip加hostport 端口就访问不通。租户告知生产环境的sftp突然无法访问了，登录环境查看 sftp服务运行都是正常的，访问 sftp的hostport 端口确实不通。：跟租户沟通，看看能否重启服务试试，发现重启完服务，还是老样子，通过 hostport 访问依然不通。

故障背景：
租户告知生产环境的sftp突然无法访问了，登录环境查看 sftp服务运行都是正常的，访问 sftp的host p o rt 端口确实不通。

故障处理过程
既然访问不通那就先给服务做个全面检查，看看哪里出了问题，看下sftp 日志，也没有啥关键报错，接下来查看了下s ftp服务的svc端口，发现通过 svc地址和端口是能正常访问的，通过pod IP去访问也是可以，这就很奇怪了，唯独用主机 ip加host p o rt端口就访问不通。
尝试手段一：跟租户沟通，看看能否重启服务试试，发现重启完服务，还是老样子，通过host p o rt访问依然不通。
尝试手段二：登录到对应的s ftp 主机，查看 s ftp服务对应的iptables 规则是否有啥限制或者生产的容器服务规则转发有问题，发现iptables的规则没有做啥拦截，唯一的拦截是对icmp 协议的，基本不是这个问题，然后查看到 iptables 规则中关于s ftp host p o rt端口转发到目的服务地址有问题，以前的pod生产转发规则还存在，那就是以前的pod 删除后，ip table s 规则没有及时跟新删除，如下图所示有许多2022的host p o rt端口转发到s ft p 容器的22端口：
在这里插入图片描述然后尝试重启Kub e–proxy使其重新加载规则看看，重启完之后查看规则确实正常了，但是请求 s ft p的host p o r t端口仍然不通。
尝试手段三: 凡是再一再二，不再三，仔细分析下，通过业务主机和hostport访问，还会涉及走PREROUTING链，看下PREROUTING如下：

1）sudo ip table s -t nat -nvL PREROUTING
2）sudo iptable s -t nat -nvL CNI-HOSTPORT-DNAT

在这里插入图片描述

1）su do iptables -t nat -nvL CNI-DN-5312d803d41f87c69f67f
查看对应2022端口号的nat规则
2）su do iptables -t nat -nvL CNI-HOSTPORT-DNAT —line–numbers 查看对应规则的序号
3）sudo iptables -t nat -D CNI-HOSTPORT-DNAT 1 删除对应规则，注：确定这条规则确实以前产生没用的。