活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 聚力AI赋能 天翼云大模型专项 大模型特惠专区·Token Plan 轻享包低至9.9元起
  • 青云志云端助力计划 NEW 一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云
  • 企业出海解决方案 NEW 助力您的业务扬帆出海,通达全球!
  • 天翼云信创专区 NEW “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富
  • 中小企业服务商合作专区 国家云助力中小企业腾飞,高额上云补贴重磅上线
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
公共算力服务
  • 裸金属
  • 定制裸金属
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
星辰TokenHub
  • 模型广场
  • 体验中心
  • 服务接入
应用托管
  • 应用实例
科研助手
  • 科研智能体
  • 科研服务
  • 开发机
  • 并行计算
大模型
  • DeepSeek-V4-Flash
  • GLM-5.1
  • Qwen3.5-122B-A10B
  • DeepSeek-V3.2(旗舰版)
  • GLM-5(正式版)
智算一体机
  • 智算一体机
智能体引擎
  • 智能体引擎
可信数据空间
  • 可信数据空间
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场进入AI Store创新解决方案公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 安全邮箱
  • WPS 365 天翼云版
  • 天翼企业云盘(标准服务版)
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2026智能云生态大会
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      文档中心

      数据智能中台

      数据智能中台

      • 数据智能中台

      无数据

        • 产品动态
        • 产品介绍
        • 产品定义
        • 产品优势
        • 功能特性
        • 应用场景
        • 与其他产品关系
        • 术语解释
        • 计费说明
        • 产品规格
        • 产品价格
        • 计费模式
        • 购买
        • 续订
        • 退订
        • 快速入门
        • 准备工作
        • 创建数据智能中台
        • 用户指南
        • 数据中台
        • 引言
        • 操作手册
        • 概述
        • 业务术语
        • 数据中台准备工作
        • 数据架构定义
        • 数据源准备
        • 数据建模
        • 数仓规划
        • 物理建表
        • 数据集成
        • 离线数据集成
        • 整库同步
        • 数据研发
        • 离线开发
        • 脚本开发
        • 作业开发
        • 实时开发
        • IDE查询
        • 数据治理
        • 元数据
        • 元数据总览
        • 元模型管理
        • 采集器管理
        • 元数据采集
        • 数据标准
        • 标准总览
        • 字段标准
        • 命名标准
        • 参考数据管理
        • 字段标准稽核
        • 稽核结果查询
        • 数据质量
        • 数据质量总览
        • 规则模版
        • 任务监控
        • 报告查询
        • 数据资源管理
        • 数据地图
        • 我的数据
        • 配置检索
        • 数据服务
        • 服务开发
        • 服务管理
        • 调度中心
        • 调度总览
        • 任务运维
        • 实例运维
        • 告警管理
        • 平台管理
        • 我的权限
        • 成员管理
        • 高质量数据集平台
        • 功能介绍
        • 数据源管理
        • 数据集管理
        • 数据加工
        • 数据评测
        • 算子广场
        • 算子管理
        • 流程说明
        • 创建数据源
        • 创建Ceph数据源
        • 数据集管理
        • 新建原始数据集
        • 预处理数据集管理
        • 标注数据集管理
        • 创建数据加工任务
        • 数据评测
        • 规则定义
        • 创建评测任务
        • 查看评测报告
        • 新增算子
        • 新增引用内置算法的算子
        • 新增引用内置算法模型的算子
        • 新增引用第三方Http算法的分析类算子
        • 新增引用第三方Http算法的生成类算子
        • 算子前端组件配置
        • AI中台
        • 数据中心
        • 数据资产
        • 数据审批
        • 数据网盘
        • 评测中心
        • 预标注算子管理
        • 标注中心
        • 标注总览
        • 标注场景
        • 标注项目
        • 我的任务
        • 标签模板
        • 数据智能助理
        • 智能对话
        • 通用会话
        • 历史对话
        • 背景信息添加
        • 意图选择
        • 业务助手
        • 数据交换智能助手
        • 数据源智能助手
        • IDE开发智能助手
        • 数据建模智能助手
        • 数据标准智能助手
        • 数据服务智能助手
        • 数据分析智能助手
        • 统计大盘
        • 系统管理
        • 通用设置
        • Prompt管理
        • 我的数据
        • 业务智能助手管理
        • MCP管理
        • 常见问题
        • 计费类
        • 购买类
        • 文档下载
          无相关产品

          本页目录

          帮助中心 数据智能中台 用户指南 数据中台 操作手册 数据集成 整库同步
          整库同步
          更新时间 2026-07-02 09:28:16
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          最近更新时间: 2026-07-02 09:28:16
          分享文章
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          本章节主要介绍整库同步功能。

          前提条件

          • 已拥有数据集成角色权限

          • 完成来源数据源以及目标源源数据源的接入工作。

          • 完成对来源数据源以及目标数据源的元数据采集。

          使用限制

          • 来源数据源以及目标数据源完成授权。

          • 来源数据表以及目标数据表完成授权。

          • 来源数据表以及目标数据表完成建模。

          使用说明

          整库同步任务采用引导式配置方式,一共分为以下5个步骤:

          1.新建整库同步任务

          2.定义来源端与目标端

          3.配置资源队列

          4.配置目标表映射

          5.调度信息配置

          配置过程

          第一步:新建整库同步任务

          在整库同步任务管理页面,点击新建任务按钮,新建任务。

          在弹出的弹窗中,输入任务的基础信息

          第二步:定义来源端与目标端

          来源端配置

          整库同步来源端有两种数据表同步方式

          • 全表同步

          全表同步表示将所选的来源库中的所有表同步至目标库中

          • 部分表同步

          部分表同步表示将来源库中的部分表同步至目标库中,用户可自行选择需要同步的数据表。

          来源配置还包括编码、并发度、每次抽取数据量等。

          目标端配置

          目标端选择需要存放数据表的数据源,并支持配置写入方式为覆盖或追加。支持压缩格式配置与并发度配置。

          第三步:配置资源队列

          资源配置中选择对应的yarn资源、生产队列、测试队列信息,点击“下一步”,进入到字段映射配置中。

          第四步:配置目标表映射

          当目标库中存在与所选数据表名称相同的物理表时,系统会自动匹配并建立字段映射关系。

          若目标库中不存在与所选数据表名称相同的物理表,用户可以进行异名数据表映射并手动建立字段映射关系。

          若目标库中不存在数据表,则需先通过数据建模功能建立数据模型与物化物理表。

          第五步:调度信息配置

          在任务页面右侧悬浮球中,可以进行调度配置。

          调度配置分为以下几个部分:

          • 基本信息

            • 任务名称:默认与任务英文名保持一致,不可更改。

            • 优先级:分为极高、高、中、极低等5个优先级,可根据实际情况配置,默认为中。

            • 运维负责人:可指定该任务的运维负责人。

          • 调度信息

            • 实例化规则:分为1:1及1:N两种情况:

              • 1:1:指一个任务生成1个运行实例。

              • 1:N:指一个任务生成N个运行实例。

            • 生效时间:指当前任务开始生效的时间,默认时间为当天00:00。

            • 失效时间:指该周期任务执行到什么时间失效,默认为2999-12-31.

            • 执行周期:指该周期任务的周期类型,分为月、日、小时、分钟,本案例中配置为日周期任务。

            • 执行时间:指任务实例开始运行的具体时间。根据不同的执行周期,具有不同的含义及填写内容:

              • 若执行周期为月:执行时间配置项为每月X号X时X分,如每月1日12时00分运行实例。

              • 若执行周期为日:执行时间配置项为每日X时X分,如每日00时00分运行实例。

              • 若执行周期为小时:执行时间配置项为每小时X分起,如每小时5分起运行实例,注意此处的范围为0~59.

              • 若执行周期为分钟:执行时间配置项为每分钟X秒起,如每分钟5秒起运行实例,注意此处的范围为0~59.

            • crontab表达式:由上述执行周期与执行时间配置组合出的表达式,不可编辑。

            • 最近执行时间:指预计该任务上线后,各实例运行的时间,不可编辑。

          • 任务信息

            • 标识该任务属于何种业务,每个业务模块默认,不可编辑,用户无需关心此项配置。

          • 运行信息

            • 运行约束:用于定义同一任务中不同实例的依赖情况,默认为并行启动。

              • 自依赖:当前的周期实例的执行,必须要等到上个周期实例执行成功后才能开始执行。

              • 并行启动:任务的多个周期实例,可以一起运行,相互之间没有依赖关系。

              • 串行启动:当前的周期实例的执行,只需要上一个周期实例是运行结束状态即可(不管成功与否)。

            • 实例生成:用于定义任务实例的生成时间,默认为次日生成。

              • 当天生成:任务上线后,实例当天就开始生成。

              • 次日生成:任务上线后,实例第二天才开始生成。

            • 调度集群组:需选择用于调度的调度集群组,默认为default集群组。若有其他集群组也可选择。

            • 业务时间偏移:对于数据的账期偏移量。偏移量的值为0至负数。如当前日期为2025年1月15日,以下对一些数值进行说明:

              • 业务时间偏移填写0:表示该任务采集的是数据日期为当日的数据,即任务实例运行时,采集数据时间为2025年1月15日的数据。

              • 业务时间偏移填写-1:表示该任务采集的是数据日期为前一日的数据,即任务实例运行时,采集数据时间为2025年1月14日的数据。

              • 业务时间偏移填写-2:表示该任务采集的是数据日期为前两日的数据,即任务实例运行时,采集数据时间为2025年1月13日的数据。

              • 依此类推。

          此处需注意,增量同步中,若增量条件也配置了时间相关的变量,此时增量条件中的时间变量受到业务偏移量的影响。

          以本案例为例,增量条件中配置了时间变量${batchNo?calDate(0,'D')},若业务偏移填写为-1,则增量条件中表示为采集前一天的数据。若业务偏移填写为0,则增量条件中表示为采集当天的数据。

          • 重试次数:指当任务实例失败后,需要自动重试的次数。

          • 重试时间间隔:指当任务实例失败后,每次自动重试的时间间隔。

          • 任务超时时长:可设置定义任务超时的时长。默认为7200秒。

          • 任务依赖信息

            • 依赖列表:指不同任务间的依赖关系配置列表。

          • 调度参数信息

          程序参数:用于扩展额外的配置项,以k-v的形式进行录入,如有特殊情况需要可以添加配置项,无额外需求可不配置此项。

          文档反馈

          建议您登录后反馈,可在建议与反馈里查看问题处理进度

          鼠标选中文档,精准反馈问题

          选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理

          知道了

          上一篇 :  离线数据集成
          下一篇 :  数据研发
          搜索 关闭
          ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
          公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
          备案 京公网安备11010802043424号 京ICP备 2021034386号
          ©2026天翼云科技有限公司版权所有
          京ICP备 2021034386号
          备案 京公网安备11010802043424号
          增值电信业务经营许可证A2.B1.B2-20090001
          用户协议 隐私政策 法律声明