Linux网络故障排查流程

Linux网络故障排查：从ping到traceroute的诊断流程

"网络又断了！"作为运维工程师，这句话是不是很熟悉？当用户报告网络问题时，你的第一反应是什么？慌张？还是胸有成竹地打开终端？

今天分享一套系统化的网络故障排查流程，让你从"网络小白"进阶为"网络诊断专家"。

故障现象识别

网络故障通常表现为以下几种症状：

• 网站无法访问

• 应用响应缓慢

• 间歇性连接中断

• 数据传输超时

关键问题：如何快速定位问题根源？

标准化诊断流程

第一步：基础连通性检查（ping命令）

# 检查本地回环
ping 127.0.0.1

# 检查网关连通性 
ping $(ip route | grep default | awk'{print $3}')

# 检查DNS解析
ping baidu.com
ping 8.8.8.8

诊断要点：

• 丢包率超过5%需要关注

• 延迟超过100ms可能存在网络拥塞

• 无法ping通网关说明本地网络配置有问题

第二步：路由路径分析（traceroute）

# Linux系统
traceroute google.com

# 如果traceroute不可用，使用mtr
mtr --report --report-cycles 10 google.com

输出解读技巧：

traceroute to google.com (142.250.191.14), 30 hops max, 60 byte packets
1 192.168.1.1 (192.168.1.1) 1.234 ms 1.123 ms 1.456 ms
2 10.0.0.1 (10.0.0.1) 15.678 ms 16.789 ms 17.234 ms
3 * * * (请求超时)
4 8.8.8.8 (8.8.8.8) 45.123 ms 44.567 ms 43.890 ms

•第3跳出现星号：可能是防火墙阻止ICMP或设备故障

•延迟突然增大：该节点可能存在拥塞

•某一跳持续超时：重点排查该网络设备

第三步：端口连通性测试

# 检查特定端口
telnet target-host 80
nc -zv target-host 443

# 批量端口扫描
nmap -p 80,443,22,3306 target-host

第四步：DNS解析验证

# 查看DNS配置
cat/etc/resolv.conf

# 手动DNS查询
nslookup example.com
dig example.com

# 查看域名解析过程
dig +trace example.com

常见DNS问题：

• 解析超时：DNS服务器响应慢

• NXDOMAIN：域名不存在

• 解析结果错误：DNS污染或配置错误

高级诊断技巧

网络接口状态检查

# 查看网络接口状态
ip addr show
iplinkshow

# 检查网络统计信息
cat/proc/net/dev
ss -tuln # 查看监听端口

防火墙规则排查

# iptables规则检查
iptables -L -n -v

# 查看连接跟踪
cat/proc/net/nf_conntrack | grep target-ip

路由表分析

# 查看路由表
ip route show
route -n

# 添加临时路由测试
ip route add target-network via gateway-ip

实战案例分析

案例1：Web服务访问缓慢

症状：用户反馈网站打开很慢

排查步骤：

1.ping web-server- 延迟正常

2.telnet web-server 80- 连接成功但响应慢

3.ss -tuln | grep :80- 发现大量CLOSE_WAIT状态连接

结论：应用层问题，需要优化Web服务器配置

案例2：间歇性网络中断

症状：每隔几分钟网络就断一次

排查步骤：

1.mtr --report target-host- 发现某一跳丢包率30%

2.traceroute -I target-host- 使用ICMP协议测试

3. 联系ISP确认链路状态

结论：运营商链路不稳定

效率提升工具

自动化诊断脚本

#!/bin/bash
# network-check.sh
TARGET=${1:-"8.8.8.8"}

echo"=== 网络诊断报告 ==="
echo"目标地址:$TARGET"
echo"检查时间:$(date)"
echo

echo"1. 基础连通性测试:"
ping -c 4$TARGET

echo-e"
2. 路由路径分析:"
traceroute$TARGET

echo-e"
3. DNS解析测试:"
nslookup$TARGET

echo-e"
4. 本地网络配置:"
ip addr show | grep -A 2"state UP"

监控告警设置

# 使用watch持续监控
watch -n 5'ping -c 1 critical-server && echo "OK" || echo "FAILED"'

# 结合zabbix或prometheus进行自动化监控

最佳实践建议

1. 建立标准化流程

• 制定详细的故障排查SOP

• 记录常见问题的解决方案

• 建立故障处理知识库

2. 工具箱准备

# 必备网络工具安装
yum install -y net-tools traceroute telnet nmap mtr
# 或者在Ubuntu/Debian上
apt-get install -y net-tools traceroute telnet nmap mtr

3. 日志分析习惯

# 系统日志检查
tail-f /var/log/messages | grep -i network
journalctl -u NetworkManager -f

# 网络相关日志
dmesg | grep -i network

4. 性能基线建立

• 记录正常情况下的网络指标

• 定期进行网络性能测试

• 建立告警阈值

故障预防策略

网络健康检查清单

• 定期检查网络设备状态

• 监控带宽使用率

• 检查DNS解析性能

• 验证备用链路可用性

• 更新网络设备固件

自动化监控脚本

#!/bin/bash
# daily-network-check.sh
HOSTS=("8.8.8.8""114.114.114.114""your-critical-server.com")
LOG_FILE="/var/log/network-health.log"

forhostin"${HOSTS[@]}";do
 ifping -c 3$host> /dev/null 2>&1;then
   echo"$(date):$host- OK">>$LOG_FILE
 else
   echo"$(date):$host- FAILED">>$LOG_FILE
   # 发送告警邮件或短信
   echo"$hostis unreachable"| mail -s"Network Alert"[e-mail]
 fi
done

深入学习资源

推荐工具进阶

•Wireshark：数据包分析神器

•iftop：实时流量监控

•nethogs：按进程显示网络使用情况

•tcpdump：命令行抓包工具

学习路径建议

1. 掌握TCP/IP协议栈基础

2. 熟悉Linux网络配置

3. 学习网络安全基础

4. 实践自动化运维

总结

网络故障排查是运维工程师的核心技能之一。通过标准化的诊断流程：

ping → traceroute → 端口测试 → DNS验证 → 深入分析

你可以快速定位大部分网络问题。记住，工具只是手段，思路才是关键。