背景介绍

高并发的日志落盘、数据库批量写入、大数据文件读写或存储介质性能瓶颈，都可能导致云主机的磁盘 IO（输入/输出）饱和，进而造成请求处理延迟、应用假死甚至数据丢失。本演练模拟磁盘 IO 资源被持续占用的高负载场景，帮助您评估应用的容错能力、检验数据写入的可靠性，并验证相关监控告警的有效性。

基本原理

预先在探针管理处将内部自研Agent安装至云主机上，使用管控通道下发动作执行命令。

原理是先通过dd命令将数据写入文件中，然后再通过循环读写文件占用磁盘带宽。

故障注入

1、纳管实例资源

1. 导航至 故障演练 > 目标应用 > 应用资源 页面。

2. 在资源类型页签中选择云主机，然后单击添加资源。

3. 在弹出的对话框中，勾选目标云主机实例，单击确定。

2、编排演练任务

1. 导航至 故障演练 > 目标应用 > 演练管理页面，单击新建演练。

2. 在基本信息页面，按提示填写演练名称和描述，然后单击下一步。

3. 在演练对象配置页面：

   • 配置动作组：为动作组命名，资源类型选择云主机。

   • 添加实例：单击添加实例，勾选上一步中添加的云主机实例。

   • 添加故障动作：单击立即添加，在列表中选择磁盘IO高负载动作。

4. 在弹出的参数配置框中，配置所需参数，然后单击确定。

   • 持续时间：故障动作持续时间。

   • 读负载：勾选将开启读压力模式。探针会创建一个临时文件并对其进行持续的读取操作。

   • 写负载：勾选将开启写压力模式。探针会持续向一个临时文件写入数据。

   • 块大小(MB)：控制单次读写操作的数据块大小，单位为MB。增大此值可以提升单次操作的 IO 压力。通常保持默认值即可。

3、配置全局策略

1. 在全局配置页面，按需添加保护策略和监控指标。

2. 配置完成后，单击完成按钮，创建演练任务。

4、发起故障注入

1. 发起演练：在演练管理列表找到对应演练任务，单击操作列的执行演练，在新页面中点击发起新演练。

2. 进入实验：系统将自动跳转到本次演练的运行详情页，或在演练执行记录列表点击对应执行实例的详情进入。

3. 注入故障：在动作组中，找到磁盘IO高负载动作卡片，单击执行。

4. 查看日志：单击动作卡片本身，在右侧弹出的侧边栏中查看执行详情。

效果验证

在故障注入期间，您可以通过以下方式验证演练效果：

1、观测实例指标：

• 登录弹性云主机控制台，进入目标实例的监控指标页，观测磁盘读速率、磁盘写速率指标。

2、业务应用验证：

• 检查应用日志，确认是否存在文件读写超时、数据库连接异常或请求处理缓慢等错误。