活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 11.11智惠上云月 NEW 爆款云主机2核2G18.8元/3个月起!更有限时续费优惠,最低3.5折!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云AI产品特惠 NEW 人脸识别+文字识别焕新,新用户免费试用
  • 中小企业服务商合作专区 国家云助力中小企业腾飞,高额上云补贴重磅上线
  • 出海产品促销专区 NEW 爆款云主机低至2折,高性价比,不限新老速来抢购!
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
算力互联调度平台
  • 算力市场
  • 裸金属
  • 定制裸金属
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
模型推理服务
  • 模型广场
  • 体验中心
  • 服务接入
应用托管
  • 应用市场
  • 应用实例
科研助手
  • 科研智能体
  • 科研服务
  • 开发机
  • 并行计算
大模型
  • DeepSeek-V3.1
  • DeepSeek-R1-0528
  • DeepSeek-V3-0324
  • Qwen3-235B-A22B
  • Qwen3-32B
  • Qwen2.5-VL-72B-Instruct
  • StableDiffusion-V2.1
智算一体机
  • 智算一体机
模型适配专家服务
  • 模型适配专家服务

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案智云上海应用生态专区
AI应用
  • 泛微合同管理解决方案
  • 泛微数智大脑Xiaoe.AI解决方案
  • MaxKB知识库解决方案
  • 天翼AI文创
AI服务
  • 昆仑AI训推服务解决方案
  • 国信模型服务解决方案
企业应用
  • 翼电子签约解决方案
  • 翼协同解决方案
  • 翼电签-契约锁解决方案
  • 翼视频云归档解决方案
教育应用
  • 翼电子教室
  • 潜在AI教育解决方案
建站工具
  • SSL证书
  • 翼定制建站解决方案
  • 翼多端小程序解决方案
办公协同
  • 天翼云企业云盘
  • 安全邮箱
灾备迁移
  • 云管家2.0
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      文档中心

      多活容灾服务

      多活容灾服务

      • 多活容灾服务

      无数据

        • 产品动态
        • 产品介绍
        • 什么是多活容灾服务
        • 业务流程
        • 名词解释
        • 应用场景
        • 配额说明
        • 性能指标
        • 与其它服务的关系
        • 计费说明
        • 计费概述
        • 计费模式
        • 计费模式概述
        • 包年包月
        • 按需计费
        • 计费项
        • 续费说明
        • 续费概述
        • 手动续费
        • 欠费说明
        • 停止计费
        • 退费说明
        • 快速入门
        • 入门简介
        • 注册账号
        • 开通多活容灾服务
        • 使用多活容灾服务实现MySQL容灾切换
        • 使用多活容灾服务实现Redis容灾切换
        • 入门实践
        • 用户指南
        • 开始使用多活容灾服务
        • 查看监控大盘
        • 命名空间
        • 创建命名空间
        • 查看命名空间详细信息
        • 编辑命名空间
        • 删除命名空间
        • 容灾管理中心
        • 创建容灾管理中心
        • 查看容灾管理中心详情
        • 编辑容灾管理中心
        • 删除/续订/退订/销毁容灾管理中心
        • 应用管理
        • 应用接入
        • 查看应用详情
        • 编辑应用
        • 流量调节/切换/回切
        • 删除应用
        • 预案编排
        • 预案阶段
        • 创建预案阶段
        • 设计预案阶段
        • 查看预案阶段详情信息
        • 启用/停用预案阶段
        • 编辑/删除预案阶段
        • 预案管理
        • 创建预案
        • 设计预案
        • 查看预案详细信息
        • 启用/停用/重新启用预案
        • 编辑/删除预案
        • 容灾切换
        • 容灾演练
        • 创建容灾演练
        • 开始/结束/暂停/恢复/终止演练
        • 编辑/删除演练
        • 演练管理
        • 确认演练结果
        • 查看演练详情
        • 演练大屏
        • 应急切换
        • 创建应急切换
        • 开始/终止/暂停/恢复切换
        • 编辑/删除切换
        • 切换管理
        • 确认切换结果
        • 查看切换详情
        • 资源管理
        • 同步负载均衡资源
        • 同步/删除天翼云负载均衡
        • 同步云主机资源
        • 同步/删除天翼云云主机
        • 新增/测试/编辑/删除/远程连接设置非天翼云云主机
        • 批量新增非天翼云云主机
        • 同步数据库资源
        • 同步/测试/删除/远程连接设置天翼云数据库
        • 新增/测试/编辑/删除非天翼云数据库
        • 同步对象存储资源
        • 同步/删除天翼云对象存储桶
        • 脚本管理
        • 脚本库
        • 创建脚本
        • 查看脚本详情
        • 验证/变更/停用/编辑脚本
        • 发布/修改脚本分组/删除脚本
        • 脚本编写最佳实践
        • 脚本黑名单
        • 创建脚本黑名单
        • 启用/删除/停用脚本黑名单
        • 编辑脚本黑名单
        • 脚本历史
        • 系统环境变量
        • 三方数据中心
        • 新增三方数据中心
        • 编辑三方数据中心
        • 删除三方数据中心
        • 资源同步管理
        • 网络配置与drnode客户端安装
        • 安装部署
        • 主机高可用
        • 高可用
        • 高可用组
        • 持续数据保护
        • 文件复制
        • 恢复管理
        • 比较和同步
        • 数据定时灾备
        • 安装部署
        • 存储管理
        • 文件备份与恢复
        • 整机备份与恢复
        • 文件存储数据灾备
        • 直接同步/同步主机同步
        • 对象存储数据灾备
        • 安装部署
        • 存储管理
        • 数据源管理
        • 本地到对象存储
        • 对象存储到本地
        • 文件比较与同步(对象存储到对象存储)
        • 操作审计
        • 操作日志
        • 常见问题
        • MDR产品相关问题
        • 多活容灾方案相关问题
        • MDR使用相关问题
        • 企业项目使用相关问题
        • 最佳实践
        • 同城容灾(双活模式)最佳实践
        • 文档下载
        • 文档下载
        • 资源下载
        • drnode安装包下载
        • 相关协议
        • 天翼云多活容灾服务平台服务协议
        • 天翼云多活容灾服务平台等级条款
          无相关产品

          本页目录

          帮助中心多活容灾服务用户指南资源同步管理对象存储数据灾备文件比较与同步(对象存储到对象存储)
          文件比较与同步(对象存储到对象存储)
          更新时间 2025-10-22 14:07:56
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          最近更新时间: 2025-10-22 14:07:56
          分享文章
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          本文为您介绍文件比较与同步的相关内容。

          概要

          应用场景:

          • 支持对象存储到对象存储之间的数据比较与同步,并且生成比较报告供一致性检查。此场景支持两种数据捕获方式:

            • 方式1:调用对象存储接口对源、备存储同步路径下的所有对象进行扫描、比对,获得增量对象(新增/差异),并将增量对象同步到目标端对应路径下;在海量对象场景下扫描/比对的对象太多,导致这种方式同步增量数据效率过低;

            • 方式2:通过某些方式获取到增量对象信息(如:对象存储自行监控、通过应用数据库表获取等),并将增量对象的信息以某种类型文件存放;DTO通过读取文件内容来获取增量对象信息,并直接将源端对应的增量对象直接同步到目标端;此方式避免了扫描、比对海量对象的时间,提高海量对象场景的增量数据同步效率。

          要求:要有应用/组件(一般是对象存储)负责实现监控增量对象并将增量对象以固定格式导出成文件的一系列动作。

           

          前置条件

          文件比较与同步的环境要求如下:

          1. DTO主机需要安装dto安装包。详见安装DTO。

          2. 在MDR控制台中添加对象存储。详见资源管理·对象存储。

          3. 在MDR控制台中添加DTO主机并处于在线状态。详见资源管理·DTO主机。

          4. MDR控制台需具备有dto的许可,并且该dto许可剩余允许传输量不为0。

           

          新建文件比较与同步

          1. 点击左侧菜单栏-“资源同步管理”-“对象存储数据灾备”-“文件比较和同步”,进入文件比较和同步列表页,点击“新建”按钮,进入新建页面。

          2. 通用配置页面各配置项如下:

            • 名称:任意指定,便于管理即可。

            • 同步主机:下拉框中会列出已注册至MDR控制台的DTO同步主机供选用;

            • 规则类型:包含三类规则:仅比较/文件比较与同步 / 文件清单同步,下文会分别介绍各类规则的作用和使用场景;

            • 同步策略类型:“手动同步”“定期同步”和“间隔同步”。

              • 手动同步:需手动启动规则。此选项为默认选项。

              • 定期同步:可指定每个月的某几天或者每个星期的某几天中的某几个时间点开始同步,规则会在设置的时间自动开始运行。

              • 间隔同步:指的是从上一次规则完成到下一次规则启动之间的间隔,最小间隔时间单位为秒。

            • 定期同步策略:用户自行添加定期同步策略。可以设定多个不重叠的定时同步策略,彼此独立。

            • 间隔同步策略:用户自行添加时间间隔同步策略。选择此规则开始时间,并设置间隔时间(单位为秒)。

            • 源存储:用户自行选择要源端的存储数据用来做对比。

            • 目标存储:用户自行选择对象存储数据作为目标存储对比。

            • 同步路径映射:用户自行配置需要同步的数据路径。同步路径支持手动输入路径。

            • 排除路径:用户自行选择将同步数据路径中的某些子路径设置为排除路径,排除路径中的数据不进行传输。

            • 文件后缀名过滤:以后缀名为过滤条件,格式为“文件扩展名”,若多个过滤条件则用逗号隔开,如:“.txt”,“.doc”,“.rtf”。

              • 排除:不同步源路径中该过滤项中定义的文件类型。

              • 包含:只同步源路径中该过滤项中定义的文件类型。

            • 文件日期过滤:通过正则表达式对同步路径下文件的日期进行筛选,文件日期符合正则表达式要求的文件被过滤出来。

              • 排除:不同步源路径中符合筛选条件的文件。

              • 包含:只同步源路径中符合筛选条件的文件。

          3. 比较设置页面各配置项如下:

            • 比较类型:重镜像时的校验方式。

              • 文件大小:通过源、目标文件的大小进行比较。

              • 对象智能比对:提交规则时会判断备端存储是否支持自定义META,不支持则不允许规则提交。智能比对即:通过比文件当前的修改时间戳,和上一次同步时文件的修改时间戳(记录在自定义属性META中)来判断文件是否一致(如果修改时间戳一致则认为文件相同,如果修改时间戳不同,则继续对比文件的MD5)。

              • MD5校验:通过源、目标文件的MD5值进行比较(本地需计算md5,对象存储直接采用Etag,对象存储将收到文件的MD5值放在返回结果的ETag中)。

            • 说明:对象存储返回分片上传文件的MD5有可能为空或是最后一个分片的MD5,因此对象存储的MD5并不完全可靠。“文件大小”比对最快;当文件较大时“对象智能比对”比“MD5校验”快(大文件本地计算md5很慢);当文件较小时“MD5校验”比“对象智能比对”快(对象存储的文件修改时间需从META中获取,一个文件就是一次请求)。

              • 忽略目标端存在文件:DTO不再扫描目标端存储,直接拿源端拆解过后的目录进行传输,传输之前check目标端文件是否存在,如果不存在,就同步,否则跳过该文件;这种类型,可以支持对象存储单一目录上千万的文件。

            • 传输线程数量:可以指定线程个数。一个线程处理一个目录。此选项用于提高数据复制的速度,默认为“10”,数值越高,可用于数据复制的线程越多,但会消耗更多的CPU和内存资源,请根据用户环境适当选择。

            • 对象存储扫描线程数量:可根据需要指定1-10个线程数。

            • 备端扫描:默认开启,开启后支持孤儿文件处理。

            • 孤儿文件处理方式:

              • 不处理:不删除孤儿文件,存在在目标端。

              • 确认后删除:将孤儿文件计入孤儿文件列表,可通过规则管理界面的“更多·孤儿文件”按钮来查看,以及选择是否要将目标端的孤儿文件删除。

              • 直接删除:将孤儿文件自动从目标端删除。

            • 说明:定期同步或间隔同步策略时不允许配置“确认后删除”;选择“忽略目标端存在的文件”比较类型时,或者开启归档时不允许配置“直接删除”和“确认后删除”。

            • 对象文件路径名:

              • 和源端保持不变:区分大小写,和源端大小写保持一致。

              • 全部为大写(传输时转换):在传输时,将源路径下的所有目录名、子目录名、文件名、文件后缀名全部转换为大写存储在目标路径下。

              • 全部为小写(传输时转换):在传输时,将源路径下的所有目录名、子目录名、文件名、文件后缀名全部转换为小写存储在目标路径下。

            • 备端文件压缩:指的是在本地将文件进行压缩,压缩完后传输到对象存储。仅限于本地到对象存储的规则才支持压缩,压缩传输后,目标端文件名会被修改为:原文件名.i2.zip。

            • 备端文件加密:将同步到目标端数据加密存储。

              • 标准加密:通过设置的加密密钥对源端文件加密后存放到目标端。

                • 加密密钥:填写加密密钥,密钥要求:32字节的字符串作为密钥,支持数字、字母、字符的组合,不支持中文。

              • COS服务端加密:通过对接COS对象存储API接口,上传到该对象存储桶的文件都自动加密,需额外选择加密密钥类型:

                • 加密密钥类型:支持两种加密密钥类型:

                • SSE-COS:使用SSE-COS加密密钥类型进行加密,无需额外配置;

                • SSE-C:使用SSE-C加密密钥类型进行加密,需要额外填写加密密钥;

                • 加密密钥:填写加密密钥,密钥要求:32字节的字符串作为密钥,支持数字、字母、字符的组合,不支持中文。

            • 保留结果数量:设置“文件比较与同步→报告”中保留的记录条数。

            • 记录流水:默认关闭,开启后会将规则同步的所有文件相关信息(大小、MD5/etag、传输耗时、修改/更新时间)记录在同步主机/usr/drbksoft/dto/data/db/<规则UUID>.db文件中(默认路径),可供审计查看。

          4. 带宽设置页面各配置项如下:

            • 全选:开启后,将会选择一周内的所有时间。此选项默认关闭。

            • 时间范围:用户自行勾选具体的生效日。

            • 选择带宽:根据用户需求选择需要执行限速的时间段,可以设定多个不重叠的限速规则,彼此独立,如果带宽设定为0,表示禁止传输。

          5. 归档设置页面各配置项如下:

            • 启用归档:不勾选的话不启用归档功能。

            • 文件名转换:归档文件的名称转换,支持两种转换方式:

              • 保持不变:归档文件名与原文件名保持一致。

              • 增加时间后缀:在归档文件名后自动添加归档时间后缀。

            • 归档条件:

              • 时间归档:按照填入文件时间类型的时间点与执行本地到对象存储时的时间点的差值(单位天)。这里的时间选项有两个:文件创建时间、文件修改时间,这两种类型可以只选择某一个,也可以多选,并可以选择几种类型间的关系是与还是或。

              • 命名特征:使用正则表达式进行针对文件名的过滤。

              • 文件类型:通过填入文件类型的后缀名进行对文件类型的过滤(如.txt等),可以匹配多个文件类型,文件后缀名与后缀名之间用“逗号隔开”(如.txt,.exe,.zip)。

            • 归档策略:

              • 同步所有文件,并删除本地符合条件的文件:将源目录下的所有文件全部同步到目标存储的目标目录中,并删除本地符合归档条件的文件。

              • 只同步并删除符合条件的文件:只同步源目录中符合归档条件的文件到目标存储的目标目录中去,并删除本地符合归档条件的文件。

              • 只同步但不删除符合条件的文件:只同步源目录中符合归档条件的文件到目标存储的目标目录中去,并且不删除源端本地符合归档条件的文件。

          文档反馈

          建议您登录后反馈,可在建议与反馈里查看问题处理进度

          鼠标选中文档,精准反馈问题

          选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理

          知道了

          上一篇 :  对象存储到本地
          下一篇 :  操作审计
          搜索 关闭
          ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
          公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
          备案 京公网安备11010802043424号 京ICP备 2021034386号
          ©2025天翼云科技有限公司版权所有
          京ICP备 2021034386号
          备案 京公网安备11010802043424号
          增值电信业务经营许可证A2.B1.B2-20090001
          用户协议 隐私政策 法律声明