背景介绍
在复杂的网络环境中,由于多路径传输、路由策略动态调整或网络设备处理延迟的差异,数据包可能不会按照其发送顺序到达目的地。虽然 TCP 协议设计了重排序机制来处理这种情况,但严重的乱序仍然会增加接收端的CPU开销,导致有效吞吐量下降和应用层延时增加。本演练模拟网络包乱序的场景,帮助您评估应用协议的健壮性和系统在非理想网络条件下的性能表现。
基本原理
预先在探针管理处将内部自研Agent安装至云主机上,使用管控通道下发动作执行命令。
原理是通过增加TC和Netem规则模拟主机内网络包乱序。
注意
只对出方向流量生效,不会影响入流量;如果系统已配置有TC规则,动作执行会失败。
故障注入
1、纳管实例资源
导航至 故障演练 > 目标应用 > 应用资源 页面。
在资源类型页签中选择云主机,然后单击添加资源。
在弹出的对话框中,勾选目标云主机实例,单击确定。
2、编排演练任务
导航至 故障演练 > 目标应用 > 演练管理页面,单击新建演练。
在基本信息页面,按提示填写演练名称和描述,然后单击下一步。
在演练对象配置页面:
配置动作组:为动作组命名,资源类型选择云主机。
添加实例:单击添加实例,勾选上一步中添加的云主机实例。
添加故障动作:单击立即添加,在列表中选择网络包乱序动作。
在弹出的参数配置框中,配置所需参数,然后单击确定。
持续时间:故障动作持续时间。
本地端口:仅对源端口为指定端口的流量生效。例如,可设置为您对外提供服务的端口。可以指定多个,使用逗号分隔或者连接符表示范围,例如 80,8000-8080。
远程端口:仅对目标端口为指定端口的流量生效。例如,可设置为您的应用访问数据库的端口。可以指定多个,使用逗号分隔或者连接符表示范围,例如 80,8000-8080。
排除端口:排除指定端口的流量。可以指定多个,使用逗号分隔或者连接符表示范围,例如 22,8000 或者 8000-8010。 这个参数不能与本地端口或者远程端口参数一起使用。
目标IP: 支持通过子网掩码来指定一个网段的IP地址, 例如 192.168.1.0/24. 则 192.168.1.0~192.168.1.255 都生效。也可以指定固定的 IP,如 192.168.1.1 或者 192.168.1.1/32,还可以通过逗号分隔多个参数,例如 192.168.1.1,192.168.2.1。
网卡设备:指定在哪个网络接口上实施故障,网卡可通过ifconfig命令查询,例如 eth0。
排除IP:排除受影响的 IP,支持通过子网掩码来指定一个网段的IP地址, 例如 192.168.1.0/24. 则 192.168.1.0~192.168.1.255 都生效。也可以指定固定的 IP,如 192.168.1.1 或者 192.168.1.1/32,还可以通过逗号分隔多个参数,例如 192.168.1.1,192.168.2.1。
立即发送百分比:数据包被立即发送的百分比。
和上一包的相关性:控制数据包重排序的随机性和规律性之间的平衡,取值范围 0~100,例如,设置为 50 表示有 50% 的可能性下一个数据包的重排序决策会受到前一个数据包的影响。值越高,乱序模式越规律;值越低,越随机。
包序列大小:定义了重排序数据包之间的距离,即有多少个数据包会按照正常顺序发送后才会出现一个重排序的数据包,例如,当 gap 设置为 2 时,意味着每 2 个正常顺序的数据包之后会有一个数据包被重排序。
网络包延迟时间(毫秒):对被选中的乱序数据包施加的延迟时长。
3、配置全局策略
在全局配置页面,按需添加保护策略和监控指标。
配置完成后,单击完成按钮,创建演练任务。
4、发起故障注入
发起演练:在演练管理列表找到对应演练任务,单击操作列的执行演练,在新页面中点击发起新演练。
进入实验:系统将自动跳转到本次演练的运行详情页,或在演练执行记录列表点击对应执行实例的详情进入。
注入故障:在动作组中,找到网络包乱序动作卡片,单击执行。
查看日志:单击动作卡片本身,在右侧弹出的侧边栏中查看执行详情。
效果验证
在故障注入期间,您可以通过以下方式验证演练效果:
1、观测实例指标:
登录应用性能监控控制台,观测已接入应用的应用提供服务平均响应时间指标。
2、业务应用验证:
观察应用,特别是那些对网络延时和顺序敏感的服务(如视频流、实时通信、大规模数据传输),是否出现性能下降、卡顿或功能异常。
检查应用日志,确认是否有因超时或数据完整性问题而产生的错误。