删除数据 xstore表更新数据和行存表语法一致，使用delete 命令删除指定条件的行记录数据，操作如下： plaintext teledb delete from xt where b 5 order by b desc limit 2; a b c ++ 1 21 c20 1 20 c19 (2 rows) 多表查询 xstore表多表查询和行存表语法一致，使用select 和 join 命令查询指定条件的行记录数据，查询 xt表和xt1表中b字段值一样的查询如下： plaintext teledb select xt.c,xt1.c from xt join xt1 on xt.bxt1.b limit 10; c c + c4 c5 c5 c6 c7 c8 c8 c9 c11 c12 c12 c13 c14 c15 c16 c17 c18 c19 c2 c3 (10 rows)

Kafka服务端支持版本是多少？ Kafka 1.1.0和2.3.0版本。 创建的Kafka实例是集群模式么？ 创建一个Kafka实例即为一个集群实例。 Kafka实例是否支持修改访问端口？ Kafka实例的访问端口固定，不支持修改。 如果是访问未开启SASL的Kafka专享实例，访问端口为9092。 如果是访问开启SASL的Kafka专享实例，访问端口为9093。 在访问Kafka实例之前，需要确保安全组是否配置正确。 Kafka实例的SSL证书有效期多长？ Kafka实例开启SASL时，需进行单向认证，证书有效期足够长（超过15年），客户端不需要关注证书过期风险。 如何将Kafka实例中的数据同步到另一个Kafka实例中？ Kafka实例之间没有好的实时同步方案，如果需要做实例迁移，可以同时向两个实例生产消息，源实例中的消息可继续消费，待源实例的消息数据全部被消费完或老化后，业务可迁移到新的Kafka实例。 Kafka实例的SASLSSL开关如何修改？ Kafka SASLSSL开关不支持创建实例后修改，在创建时，请慎重选择，如果创建后需要修改，需要重新创建实例。 购买实例时选择的单AZ，怎样可以扩展为多AZ？ 已购买的实例无法扩展AZ，请重新购买多AZ的实例。 Kafka扩容会影响业务吗？ Kafka扩容带宽/存储空间，都不会影响业务的使用。 Kafka实例创建后，能修改VPC和子网吗？ 不能修改VPC和子网。 Kafka实例版本可以升级吗？ Kafka实例创建成功后，实例版本不支持升级。您可以重新创建Kafka实例，实现升级Kafka实例的版本。

名称 描述 说明 ELB 弹性负载均衡（Elastic Load Balance，简称ELB）是将访问流量根据分配策略分发到后端多台服务器的流量分发控制服务。 用户使用客户端连接DWS集群时，如果用户仅连接一个CN节点地址，通过该CN节点内网IP或弹性公网IP连接时，只能连接到固定的CN节点上，存在CN单点问题。如果通过内网域名连接，域名解析服务会对每个客户端随机选择一个内网/公网IP地址，其解析机制并不能保证负载均衡，同样也存在CN单点问题。因此引入了弹性负载均衡服务（Elastic Load Balance，下称ELB）解决集群访问的单点问题。 EIP 弹性公网IP（Elastic IP，简称EIP）提供独立的公网IP资源，包括公网IP地址与公网出口带宽服务。 可以与弹性云服务器、裸金属服务器、虚拟IP、弹性负载均衡、NAT网关等资源灵活地绑定及解绑。 Ring 安全环，集群内部的故障隔离域，主要作用是故障隔离，环内主机出现故障，故障不会扩散到环外。 如果环内某一单节点故障，所有DN节点在环内都有副本，数据不会丢失。 例如Server1发生故障后，DN1的备节点在Server2上，DN2的备节点在Server3上，DN3的备节点在Server3上，每个Server运行4个主DN，环内的各主机性能仍然保证均衡。 整个集群可以承受的主机故障数量范围为1~安全环的数量。 说明 集群按照安全环节点数量的倍数进行扩容，也就是以环为最小单位进行扩容。

常见的功能类问题Q&A。 ECX目前具备哪些能力？ ECX可以提供计算资源虚拟化能力，包括虚拟机（含GPU型虚拟机）、裸金属；网络虚拟化能力，包括弹性IP、VPC、NAT网关、负载均衡、专线接入管理能力；存储虚拟化能力，支持分布式块存储、本地存储。 ECX最大带宽能达到多少？ 不同资源池服务器类型会有差异，可提供的带宽也会有所不同。ECX虚拟机支持直通模式，网络流量可接近物理网卡的90%左右。 节点内/间的EVM实例之间的内网是否互通？ 节点内同一个VPC内的EVM实例之间内网互通，不同VPC内EVM实例内网不互通，同一节点可通过对等连接实现不同VPC互联，不同节点可通过VPN实现不同VPC互联。 虚拟机支持哪些类型的存储？ 虚拟机支持本地盘和云硬盘，本地盘和云硬盘分别包括高IO HDD、通用型SSD、超高IO三种类型，不同节点资源存在差异，本地盘和云硬盘均可作为数据盘和系统盘。 云硬盘可开最大、最小容量是多少？ 单块数据盘容量最小10G，最大32T，最多可自助添加3块数据盘，系统盘最小20G，最大500G，系统盘最小容量必须大于或等于镜像容量要求大小。 本地盘和云硬盘有什么不同？ 本地盘相较于云硬盘，磁盘的IO性能更高，吞吐量也更高。但本地盘不能跨主机，一旦物理机故障将有丢失数据风险。在高可用方面云硬盘支持多副本、快照、异地备份等，因此一般对性能要求高的推荐本地盘，对重要业务数据推荐使用云硬盘。

共享磁盘的主要优势 多挂载点：单个共享磁盘最多可同时挂载给16个云主机。 高性能：多台云主机并发访问超高IO共享磁盘时，随机读写IOPS可高达160000。 高可靠：共享磁盘支持自动和手动备份功能，提供高可靠的数据存储。 应用场景广泛：可应用于只需要VBD类型共享磁盘的Linux RHCS集群系统，同时也可应用于需要支持SCSI指令的共享磁盘的场景，如Windows MSCS集群和Veritas VCS集群应用。 共享磁盘的规格性能 磁盘性能的主要指标有IO读写时延、IOPS和吞吐量。 IOPS：磁盘每秒进行读写的操作次数。 吞吐量：磁盘每秒成功传送的数据量，即读取和写入的数据量。 IO读写时延：磁盘连续两次进行读写操作所需要的最小时间间隔。 不同类型磁盘的单队列访问时延如下： 高IO：1 ms ~ 3 ms 超高IO：1 ms 参数 高IO 超高IO 每GB磁盘的IOPS 3 50 单个磁盘的最大IOPS 3000 20000 单个磁盘的基线IOPS 100 100 单个磁盘的IOPS上限 min (3000, 100 + 3 × 容量) min (20000, 100 + 50 × 容量) 单个磁盘的IOPS突发上限 3000 10000 最大吞吐量 150 MB/s 350MB/s 挂载云主机数量 最大可同时挂载至16台云主机 说明 测试共享云硬盘性能时，必须满足以下要求： 共享云硬盘必须同时挂载至多台云主机（弹性云主机或者物理机）。 当共享云硬盘挂载至多台弹性云主机时，这些弹性云主机必须位于同一个策略为“反亲和性”的云主机组内。 如果弹性云主机不满足反亲和性，则共享云硬盘性能无法达到最大化。

本章节主要介绍 ALM12070 controller资源异常。 告警解释 HA每80秒周期性检测Manager的controller资源。当HA连续2次检测到controller资源异常时，产生该告警。 当HA检测到controller资源正常后，告警恢复。 controller资源为单主资源，一般资源异常会导致主备倒换，看到告警时，基本已经主备倒换，并在新主环境上启动新的controller资源，告警恢复。该告警用于提示用户，Manager主备倒换的原因。 告警属性 告警ID 告警级别 是否自动清除 12070 重要 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 Manager主备倒换。 controller进程持续重启，可能引起无法登录FusionInsight Manager。 可能原因 controller进程异常。 处理步骤 检查controller进程是否异常 1.打开FusionInsight Manager页面，在告警列表中，单击此告警所在行的，查看该告警的主机名称。 2.以root用户登录该告警的主机地址。 3.执行命令 su omm ，执行 sh ${BIGDATAHOME}/omserver/OMS/workspace0/ha/module/hacom/script/statusha.sh ，查询当前HA管理的controller资源状态是否正常（单机模式下面，controller资源为normal状态；双机模式下，controller资源在主节点为normal状态，在备节点为stopped状态。）。 是，执行步骤6。 否，执行步骤4。 4.执行命令 vi $BIGDATALOGHOME/omm/oms/ha/scriptlog/controller.log ，查看ha的controller资源日志，执行命令 vi $BIGDATALOGHOME/controller/controller.log ，查看controller运行日志，是否有关键字“ERROR”，分析日志查看资源异常原因并修复。 5.等待五分钟，查看告警是否恢复。 是，操作结束。 否，执行步骤6。

本章节主要介绍ALM19014 在ZooKeeper上的容量配额使用率严重超过阈值的告警。 告警解释 系统每120秒周期性检测HBase服务的znode使用情况，当检测到HBase服务的znode容量使用率超出紧急告警的阈值（默认90%）时产生该告警。 当znode的容量使用率小于严重告警的阈值时，告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务，请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示“服务名HBase1”，处理步骤中的操作对象也应由HBase调整为HBase1。 告警属性 告警ID 告警级别 是否自动清除 19014 紧急 是 告警参数 参数名称 参数含义 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 Threshold 产生告警的阈值。 对系统的影响 产生该告警表示HBase服务的znode的容量使用率已经严重超过规定的阈值，会导致HBase服务的写入请求失败。 可能原因 HBase配置了容灾并且容灾存在数据同步失败或者同步速度慢。 HBase集群存在大量的WAL文件在进行split。 处理步骤

本章节主要介绍ALM12080 omm密码即将过期。 告警解释 系统每天零点开始，每8小时检测当前系统中omm密码是否即将过期，如果当前时间与密码过期时间剩余不足15天，则发送告警。 当系统中omm密码过期的期限重置，当前状态为正常，告警恢复。 告警属性 告警ID 告警级别 是否自动清除 12080 次要 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 omm密码过期，Manager各节点互信不可用，无法对服务提供管理功能。 可能原因 该主机omm密码即将过期。 处理步骤 检查系统中omm密码是否即将过期 1.以root用户登录集群故障节点。 执行chage l omm命令来查看当前omm用户密码设置信息。 2.查找“Password expires”对应值，查看密码设置是否即将过期。 说明 如果参数值为“never”，则代表永不过期；如果为日期值，则查看是否在15天内过期。 是，执行步骤3。 否，执行步骤4。 3.执行chage M '天数' omm命令设置 omm 密码的有效天数，等待8小时，观察告警是否自动清除。 是，操作结束。 否，执行步骤4。

本章节主要介绍ALM19016 在ZooKeeper上的数量配额使用率严重超过阈值的告警。 告警解释 系统每120秒周期性检测HBase服务的znode使用情况，当检测到HBase服务的znode数量使用率超出紧急告警的阈值（默认90%）时产生该告警。 当znode的数量使用率小于严重告警的阈值时，告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务，请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示服务名HBase1，处理步骤中的操作对象也应由HBase调整为HBase1。 告警属性 告警ID 告警级别 是否自动清除 19016 紧急 是 告警参数 参数名称 参数含义 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 Threshold 产生告警的阈值。 对系统的影响 产生该告警表示HBase服务的znode的数量使用率已经严重超过规定的阈值，会导致HBase服务的写入请求失败。 可能原因 HBase配置了容灾并且容灾存在数据同步失败或者同步速度慢； HBase集群存在大量的WAL文件在进行split。 处理步骤

本节主要介绍迁移用户 操作场景 数据库的迁移过程中，迁移用户需要进行单独处理。 MySQL数据库操作 在MySQL迁移过程中，常见的迁移用户一般分为三类：可完整迁移的用户、需要降权的用户和不可迁移的用户。 可完整迁移的用户：可完整迁移的用户指满足目标数据库权限要求的用户，该类用户在进行迁移时不需要做任何处理，系统默认会将对应的数据库用户权限迁移至目标数据库。 需要降权处理的用户：需要降权的用户指具有不满足目标数据库权限要求的部分高权限的用户，比如具有：super、file、shutdown等高权限的用户。该类用户在进行迁移时需要进行降权处理，否则会导致迁移失败。 对于该类账号不支持的高权限，将会由DRS自动进行降权处理，您可以通过单击备注列的“查看”按钮查看具体的降权处理信息，依据该信息，可以帮助您评估降权是否对其业务程序造成相关影响。 不可迁移的用户：不可迁移的用户指由于某些原因，DRS不支持该类数据库用户的迁移。该类账号将在目标数据库中缺失，请先确保业务不受该类账号影响。同时，任务启动后，所有针对该类账号进行的权限密码操作，将会导致增量迁移失败。 您可以根据业务需求选择“迁移”或者“不迁移”这些用户，当您选择“迁移”数据库用户时。可按照如下操作步骤进行数据库用户、权限和密码的处理，此处以勾选所有可以迁移的数据库用户为例。 迁移用户模块主要由账号名称、账号权限和账号密码三部分构成。 步骤 1 一般账号名称的组成格式为：'账号名'+@+'host'，其中host表示具体允许访问源端数据库的目标库IP地址，您可以根据具体的业务场景选择是否需要修改账号的host地址，对目标库IP进行重规划。 步骤 2 账号权限一般默认不可修改，对于支持迁移的账号（可完整迁移的用户和需要降权的用户），系统也将默认支持对应用户权限的迁移。 迁移成功后，存储在目标数据库中的对应用户（需要降权的用户）是经过降权处理的用户。 步骤 3 DRS支持数据库用户密码的迁移。 数据库用户密码的迁移可通过如下两种方式来处理。 由于DRS在迁移时不会分析您的密码数据和强度，源系统密码复杂度过弱则存在安全风险，为了确保迁移过程中数据的安全性，您可以根据业务需求，选择是否需要重新设置数据库用户密码，通过设置较高的密码复杂度来持续保护数据库。 方式一：密码迁移。 您可以选择在迁移的过程中，直接迁移源数据库系统当前的密码，此时不需要通过勾选“重置密码”来设置新密码。数据库用户密码迁移至目标库后，您如果担心用户密码强度较弱，为了确保数据库的安全性，此时也可以选择在目标库端重新设置强度较高的源系统密码。 方式二：重置密码。 您可以通过勾选“重置密码”选择立即重新设置源系统密码后再继续进行用户密码迁移。 您可以选择某个指定支持迁移的用户，在“输入密码”列直接设置新密码或者选择所有支持迁移的用户，勾选右下角“统一输入密码”，批量将所选用户密码设置为相同的密码，以便快速完成迁移。使用批量方法设置的密码，待迁移成功后，可以在目标数据库端通过执行DDL语句，进行密码重置。 步骤 4 对于需要降权处理的用户和不支持迁移的用户，在备注列的查看详情中会提示具体的原因，您需要单击对应用户备注列的“查看”，确认详情后才可进行下一步操作。如果存在多个需要查看备注详情的用户，您也可以单击“确认所有备注”按钮，一键查看备注信息。 数据库用户已存在是不支持迁移到目标数据库的常见情形，此时您可以根据实际情况，决定是否需要删除目标端已存在的数据库用户，并单击“刷新”按钮，刷新当前数据库迁移用户的分类。 说明 目前仅MySQL支持迁移用户功能。 以上重新设置的密码强度必须满足目标数据库的密码复杂度要求。

本节介绍了登录ECS自建数据库的相关内容。 步骤一：新增数据库实例登录信息 登录ECS自建数据库实例时，您需要先增加一条数据库实例登录信息，方便您登录和管理数据库。数据库实例登录信息创建成功后，还可以修改或删除。 使用须知 当您一年内未通过创建的登录连接登录数据库实例，系统会自动清除此条数据库的所有信息，包括保存的密码。 在DAS登录数据库与在其他客户端软件登录数据库是不同的数据库登录入口，两者互不影响。 新增数据库实例登录信息 步骤 1 登录管理控制台。 步骤 2 单击管理控制台左上角的 ，选择区域和项目。 步骤 3 单击页面左上角的 ，选择“数据库 > 数据管理服务 DAS”，进入数据管理服务页面。 步骤 4 在左侧导航栏中，单击“开发工具”，进入开发工具页面。 步骤 5 单击“新增数据库实例连接”，打开新增数据库连接窗口。 步骤 6 设置数据库实例连接信息。 表 参数说明 参数名称 说明 示例 数据库引擎 选择需要新增登录信息的数据库引擎。 MySQL 数据来源 目前支持如下数据来源： MySQL5.5、5.6、5.7、8.0版本实例。 PostgreSQL9.5、9.6、10、11、12版本实例。 SQL Server 2008、2012、2014、2016、2017版本实例，暂不支持HA集群。 ECS 端口 当数据来源选择ECS的时候，需要输入用户自建实例的端口，请以实际的数据库端口为准。 同时需要确保ECS所对应的安全组允许此端口被访问，为避免与系统保留端口冲突，建议实例端口范围为1024~65535。 3306 登录用户名 登录数据库的用户名。 该用户需要具有允许DAS的IP连接数据库的权限。 root 密码 登录数据库的用户密码。 您可以勾选记住密码，后续登录时不用重复输入密码。 描述 非必填项。 SQL执行记录 开启SQL执行记录后，允许DAS将您在SQL窗口中执行的SQL语句保存下来。 建议您开启SQL执行记录，开启后，便于在“SQL操作 > SQL执行记录”中查看，并可再次执行，无需重复输入。 开启 步骤 7 数据库实例信息设置完成后，单击密码右侧的“测试连接”。 如果测试连接成功，继续进行步骤8。 如果测试连接失败，将提示连接失败原因，您需要根据提示信息修改，修改完成后，继续进行步骤8。 步骤 8 测试连接成功后，单击“确定”。 步骤 9 在“由我创建的数据库实例连接”页面可以查看新建数据库实例连接信息。 您还可以单击操作列的“修改”来修改实例连接信息，或者单击“删除”来删除不需要的实例连接信息。 结束

本章节主要介绍 ALM12079 omm用户即将过期。 告警解释 系统每天零点开始，每8小时检测当前系统中omm用户是否即将过期，如果当前时间与用户过期时间剩余不足15天，则发送告警。 当系统中omm用户过期的期限重置，当前状态为正常，告警恢复。 告警属性 告警ID 告警级别 是否自动清除 12079 次要 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 omm用户过期，Manager各节点互信不可用，无法对服务提供管理功能。 可能原因 该主机omm用户即将过期。 处理步骤 检查系统中omm用户是否即将过期 1.以root用户登录集群故障节点。 执行chage l omm命令来查看当前omm用户密码设置信息。 2.查找“Account expires”对应值，查看用户设置是否即将过期。 说明 如果参数值为“never”，则代表永不过期；如果为日期值，则查看是否在15天内过期。 是，执行步骤3。 否，执行步骤4。 3.执行 chage E 'yyyyMMdd' omm命令设置 omm 用户过期的期限，等待8小时，观察告警是否自动清除。 是，操作结束。 否，执行步骤4。

使用键的集合对象 这些集合对象在存储数据时会使用到键，支持按照插入顺序来迭代元素。 Map Set WeakMap WeakSet 结构化数据 这些对象用来表示和操作结构化的缓冲区数据，或使用JSON（JavaScript Object Notation）编码的数据。 ArrayBuffer DataView JSON 控制抽象对象 控件抽象可以帮助构造代码，尤其是异步代码（例如，不使用深度嵌套的回调）。 Promise Generator AsyncFunction 反射 Reflect Proxy 其他 arguments Web全局API 每个全局对象Worker Global Scope都可以访问这些方法： Base64 atob()，解码已使用BASE64编码的字符串。 javascript atob(data: string): string; btoa()，对二进制数据或字符串进行BASE64编码。 javascript btoa(data: string ArrayBuffer ArrayBufferView): string; Timer（即将支持） setInterval() clearInterval() setInterval() clearTimeout() Fetch Fetch() Encoding TextEncoder 和 TextDecoder 都支持UTF8编码/解码。 URL URL API支持符合HTTP和HTTPS方案的URL。

使用键的集合对象 这些集合对象在存储数据时会使用到键，支持按照插入顺序来迭代元素。 Map Set WeakMap WeakSet 结构化数据 这些对象用来表示和操作结构化的缓冲区数据，或使用JSON（JavaScript Object Notation）编码的数据。 ArrayBuffer DataView JSON 控制抽象对象 控件抽象可以帮助构造代码，尤其是异步代码（例如，不使用深度嵌套的回调）。 Promise Generator AsyncFunction 反射 Reflect Proxy 其他 arguments Web全局API 每个全局对象Worker Global Scope都可以访问这些方法： Base64 atob()，解码已使用BASE64编码的字符串。 javascript atob(data: string): string; btoa()，对二进制数据或字符串进行BASE64编码。 javascript btoa(data: string ArrayBuffer ArrayBufferView): string; Timer（即将支持） setInterval() clearInterval() setInterval() clearTimeout() Fetch Fetch Encoding TextEncoder 和 TextDecoder 都支持UTF8编码/解码。 URL URL API支持符合HTTP和HTTPS方案的URL。

keytab keytab 是一种用于在Kerberos 认证系统中存储主体（principal）的密钥信息的文件，包含principals和加密principal key，用于在不需要用户输入密码的情况下进行身份验证。每个密钥条目在keytab 文件中通常由以下部分组成： 主体名称：明确标识该密钥所属的主体，例如“service/host.example.com@exp.com”。 加密类型：指示用于加密密钥的算法，常见的有 AES、DES 等。 密钥值：实际的加密密钥数据。 keytab文件对于每个host是唯一的，因为key中包含hostname。由于服务器上可以访问Keytab文件即可以用principal的身份通过Kerberos的认证，所以keytab文件应该被妥善保存，确保只有少数必要用户可以访问。 服务实例 在AD域中，服务实例指的是一个特定的服务运行在特定计算机或服务器上的单个实例。服务实例通常与特定的服务账号相关联，用于管理服务的权限和身份验证。服务实例在AD中是通过服务主体名称（Service Principal Name，SPN）来标识的。 服务主体SPN 在AD域中，服务主体（Service Principal Name，SPN）用于标志一个服务实例。SPN的作用在于Kerberos身份验证过程中，将服务实例与服务登录帐户相关联。当客户端需要访问某个服务时，它会使用SPN来查询和验证服务的身份。在AD域中，服务可以运行在不同的主机上，而一个主机上也可以运行多个服务。SPN的格式包括服务类型和主机名或域名，客户端通过SPN访问某个服务实例。 工作原理 天翼云提供基于Kerberos协议的认证鉴权方式，将用户加入到AD域中，域控制器通过秘钥表（keytab）授权成员访问弹性文件服务。用户认证及访问鉴权流程如下： 1. 管理员在域控制器上生成keytab文件，详见 2. 在天翼云控制台为目标文件系统开启AD域功能，并将keytab文件上传，具体操作见加入AD域。 3. 文件服务器保存用户通过控制台上传的keytab文件，用于后续AD域内客户端认证和鉴权。 4. 用户通过AD域内云主机发起访问CIFS文件系统请求。 5. 文件服务器通过查询向云主机返回是否支持Kerberos协议鉴权。 6. 云主机向AD域控制器发起用户认证，Kerberos对用户信息进行加密。 7. 域控制器向云主机返回加密后的用户信息。 8. 云主机将用户加密信息发送给文件服务器。 9. 文件服务器根据用户上传的Keytab文件解密用户信息。 10. 认证通过后，文件服务器根据解密所得的用户权限信息提供访问服务。

代码示例 对Kafka消费者的 poll()方法进行优化时，可以考虑以下几个方面： 1. 批量拉取：通过增加 max.poll.records属性来一次性拉取多个消息，减少与Kafka服务器的网络通信次数。 2. 异步提交偏移量：使用 commitAsync()方法异步提交消费者的偏移量，避免阻塞消费者的消息拉取。 3. 多线程消费：可以使用多个消费者线程并发消费消息，提高消费吞吐量。 下面是一个对Kafka消费者 poll()方法进行优化的代码示例 import org.apache.kafka.clients.consumer.Consumer; import org.apache.kafka.clients.consumer.ConsumerConfig; import org.apache.kafka.clients.consumer.ConsumerRecords; import org.apache.kafka.clients.consumer.KafkaConsumer; import org.apache.kafka.common.serialization.StringDeserializer; import java.time.Duration; import java.util.Collections; import java.util.Properties; import java.util.concurrent.ExecutorService; import java.util.concurrent.Executors; public class KafkaConsumerOptimizedExample { private static final String TOPICNAME "yourtopicname"; private static final String BOOTSTRAPSERVERS "yourbootstrapservers"; private static final int NUMTHREADS 4; public static void main(String[] args) { // 配置消费者属性 Properties props new Properties(); props.put(ConsumerConfig.BOOTSTRAPSERVERSCONFIG, BOOTSTRAPSERVERS); props.put(ConsumerConfig.GROUPIDCONFIG, "yourconsumergroupid"); props.put(ConsumerConfig.KEYDESERIALIZERCLASSCONFIG, StringDeserializer.class.getName()); props.put(ConsumerConfig.VALUEDESERIALIZERCLASSCONFIG, StringDeserializer.class.getName()); props.put(ConsumerConfig.MAXPOLLRECORDSCONFIG, 100); // 创建消费者实例 Consumer consumer new KafkaConsumer<>(props); // 订阅主题 consumer.subscribe(Collections.singletonList(TOPICNAME)); // 创建线程池 ExecutorService executor Executors.newFixedThreadPool(NUMTHREADS); // 启动消费者线程 for (int i 0; i { while (true) { ConsumerRecords records consumer.poll(Duration.ofMillis(100)); // 处理拉取到的消息 records.forEach(record > { System.out.println("Received message: " + record.value()); // 具体的消息处理逻辑 }); // 异步提交偏移量 consumer.commitAsync(); } }); } // 关闭线程池 executor.shutdown(); } } 在上述示例中，我们通过增加 max.poll.records属性来一次性拉取100条消息。然后，我们创建了一个线程池，并通过多个消费者线程并发消费消息。每个消费者线程在循环中使用 poll()方法拉取消息，并对拉取到的消息进行处理。最后，我们使用 commitAsync()方法异步提交消费者的偏移量。 请注意，以上代码示例仅展示了Kafka消费者 poll()方法的一种优化方式，实际应用中可能需要根据具体需求进行更多的优化和配置。同时，为了保证代码的健壮性和可靠性，还需要处理异常、优雅地关闭消费者和线程池等操作。

功能 说明 开启HTTPS协议主要涉及两个步骤：一是打开“Https开关”，二是Https证书上传。第二步客户可参考新增证书的指引完成证书上传。 客户完成证书新增后，可通过边缘安全加速平台控制台界面查看已添加的证书及其详细信息，包括：证书备注名、证书通用名称、证书品牌、颁发时间、到期时间、创建时间等。 当证书过期或者不再使用时，可通过边缘安全加速平台控制台删除证书。 当您需要更新证书时，如果涉及到大量域名需要绑定证书，可以通过批量绑定域名进行快捷操作。 如果您的网站没有购买HTTPS证书，可以通过边缘安全加速平台提供的免费证书来支持HTTPS访问。

本节为您介绍如何删除源端云主机记录。 操作场景 您可根据业务需求，删除源端云主机记录。 前提条件 源端云主机处于离线状态。 说明 您可以通过退出Agent或关闭迁移源端云主机来实现。 操作步骤 1. 使用您的天翼云账号完成登录。 2. 在云迁移服务CMS产品主页，单击“立即开通”按钮进入控制中心。 3. 单击控制中心上方的，选择您目标机资源所在区域。此处示例我们选择的是福州3。 4. 在“服务器迁移服务”工具下，点击“主机管理”界面，可以看到迁移源机。 5. 在源机停止agent服务，等待一段时间，直到主机管理列表显示主机已离线。 6. 单击操作栏的“删除”按钮，阅读提示弹窗信息并单击“确认”后，完成源端云主机记录删除。

云硬盘购买后不使用会计费吗？ 会计费。 云硬盘自创建之后就开始计费，即使不挂载至任何云主机或物理机，也需要为其付费，直至将其退订或删除。因此，为降低资源使用成本，请按照自身实际需求来谨慎开通资源。 回收站中的云硬盘是否收费？ 回收站中的云硬盘会收费。 云硬盘回收站根据放入回收站中的云硬盘类型、容量和保留时长按需计费。 放入回收站的云硬盘收费价格与云硬盘按需价格一致，请参考云硬盘计费。 不再使用云硬盘后，如何停止云硬盘的计费？ 按需计费云硬盘：删除云硬盘后，将不会再对该云硬盘收取费用。具体操作请参见删除按需云硬盘。 包年/包月计费云硬盘：您无法直接删除该云硬盘，但是可以根据需要退订该云硬盘。具体操作请参见退订包年/包月数据盘。

调度算法 权重 算法策略 轮询 调度算法权重算法策略轮询权重取值范围为[1,256] 根据后端主机的权重, 将流量按照顺序逐个分发给后端主机，每台主机依次接收请求，实现流量均衡。相应的权重表示后端主机的处理性能, 常用于短连接服务。 最小连接 权重取值范围为[1,256] 将流量分发给当前连接数最少的主机，以确保负载较小的主机能够处理更多的请求。加权最小连接即根据主机的权重和当前连接数来分发流量，常用于长连接服务。 源算法 在非0的权重下，由于使用了源算法，各个后端主机的权重属性将不再生效 将请求的源IP地址进行Hash运算，得到一个具体的数值，同时对后端主机进行编号，按照运算结果将请求分发到对应编号的主机上。这可以使得对不同源IP的访问进行负载分发,同时使得同一个客户端IP的请求始终被派发至某特定的主机。

跨VPC后端 跨VPC后端支持添加通过以VPC对等连接、VPN连接与专线连接互通的后端云主机。使用跨VPC后端功能时，请注意以下事项： 请前往负载均衡器基本信息页面开启跨VPC后端功能，否则该功能无法正常使用。 添加的跨VPC后端的IP地址只允许为IPv4类型的地址。 若要使用跨VPC后端功能，请先正确配置VPC路由，确保后端可达。 只有TCP，HTTP，HTTPS类型监听器支持跨VPC后端功能。 请确保负载均衡器的后端子网有足够的IP地址（至少有16个可用IP地址），否则该功能无法正常使用。可以通过负载均衡器的“基本信息 > 后端子网”添加多个后端子网来增加后端子网的IP地址。 跨VPC后端的安全组规则必须放通负载均衡器的后端子网网段，否则会导后端业务流量与健康检查异常。 跨VPC后端功能开启后无法关闭。 通过跨VPC后端功能添加的后端云主机，默认的源地址透传功能会失效。

Agent列表用于管理您安装的所有探针,包括“正常上报“和“未上报”的探针,显示各个探针的关键指标信息,提供查看应用详情的快捷入口和升级探针的功能入口。 功能入口 1. 选择目标资源池，并登录APM组件控制台。 2. 在左侧导航栏中选择「 Agent列表 」。 功能说明 关键信息展示与查询 应用名称 ：显示该探针（Agent）接入的应用的名称。 主机IP ：显示该探针（Agent）接入的应用实例所在的主机IP。 Agent运行状态 ：根据ARMS是否获取到探针（Agent）采集数据来判断状态为“正常上报/未上报”。 最近一次启动时间 ：正常上报的探针（Agent），最近一次启动时间。 运行时长 ：探针（Agent）最近一次启动后运行的时长。 Agent版本号 ：显示该探针（Agent）当前版本号。 查看应用详情 点击「应用名称」，可以查看具体的应用信息及监控指标明细等等，详见应用详情。 升级探针 如果当前探针（Agent）的版本不是最新，那么可在操作列点击「升级」按钮，根据升级指引进行探针（Agent）升级。

情况 配置示例 VPC网段和子网网段均不重叠 通过对等连接实现两个VPC全地址段互通。具体请参考 VPC网段重叠且部分子网网段重叠 通过对等连接实现两个VPC中指定子网互通，对等连接两端VPC中需要互通的子网网段不用重叠。具体请参考 VPC网段和全部子网网段均重叠 无法通过创建对等连接来实现VPC之间的通信。具体请参考

名称 功能说明 Where条件 您可通过where查询，快速获取查询信息。 快速生成测试数据 您可快速生成当前表结构的测试数据，并可进一步设置生成规则。 复制行 选择需要复制的行，单击“复制行”，复制所选行数据信息。 复制列 在列下拉框中选择需要复制的列，，单击“复制列”，复制所选列信息。 悬浮复制 当鼠标悬浮至某一数据上方，出现悬浮框，单击“复制”，复制该数据。 列设置 您可通过“列设置”筛选出需显示的列信息。 16进制显示Binary类型 列内容以Binary类型显示时，需要勾选此选项，否则显示乱码。 刷新 支持对表数据进行手动更新。 单行详情 显示指定数据行详细信息。 新增 您可通过新增来添加列表行数。 提交编辑 对编辑的内容进行提交后，在SQL预览弹出框中单击“确定”后保存所编辑的信息。 删除行 您可删除所选的行数据信息。 导出 支持CSV、SQL两种表数据导出类型，最多10000条。

AutoScaler架构 AutoScaler架构如下图所示，主要由以下几个核心模块组成： 图 AutoScaler架构图 说明 Estimator： 负责扩容场景下，评估满足当前不可调度Pod时，每个节点池需要扩容的节点数量。 Simulator： 负责缩容场景下，找到满足缩容条件的节点。 Expander： 负责在扩容场景下，根据用户设置的不同的策略来，从Estimator选出的节点池中，选出一个最佳的选择。当前Expander有多种策略： Random： 随机选择一个节点池，如果用户没有设置的话，默认是Random。 mostPods： 选择此次扩容后能满足调度最多Pod的节点池，如果有相同的，再随机选择一个。 leastwaste： 选择此次扩容完成后，具有最小浪费的CPU或者Mem资源的节点池。 price： 选择此次扩容所需节点金额最小的节点池。 priority： 根据用户自定义的权重，选择权重最高的节点池。 当前CCE提供除Price以外的所有的策略，当前CCE插件默认使用leastwaste策略。

简述应用加速IP黑白名单的配置方法。 功能介绍 IP黑白名单的访问控制策略，主要是通过识别客户端IP来过滤用户请求，拦截特定IP的访问或者允许特定IP的访问，可以用来解决恶意IP盗刷、攻击等问题。 配置说明 新增域名，配置IP黑白名单步骤： 1.登录客户控制台。 2.在域名列表页面，点击右上角“添加域名”。 3.找到访问控制模块，填写IP黑名单或白名单。 编辑域名，修改IP黑白名单步骤： 1.登录客户控制台。 2.在域名列表页面，点击编辑目标域名。 3.找到访问控制模块，修改IP黑白名单。 注意 IP黑白名单是互斥的，不能同时配置，只能配置其一。 配置界面 新增域名，IP黑白名单配置界面： 编辑域名，修改IP黑白名单配置界面：

本文简述如何查询指定IP是否为天翼云IP。 功能介绍 天翼云应用加速产品提供一种IP地址检测工具，您可以使用该工具检测某IP地址是否为天翼云节点IP，同时获取IP所属城市、运营商、机房地址、节点层级等信息。 应用场景 场景一：配置应用加速产品后，可通过该工具验证客户端的请求是否成功到达天翼云节点IP。如果不是天翼云节点IP，则代表应用加速配置未生效；如果是，则可以继续验证请求是否正常。 场景二：当您的应用访问异常时，可通过该工具查询用户访问的IP是否为天翼云节点IP，来排查应用异常的原因。如果IP地址是天翼云IP，您可以继续排查问题原因或者反馈给我们处理。如果IP地址不是天翼云IP，则要查看CNAME是否配置正确，DNS解析是否正常等。 使用方法 您可以使用查询IP所属城市，运营商，机房地址，节点层级接口检测IP是否属于天翼云IP。

精调参数 在SFT中，不同的超参数选择会影响模型的精度以及性能，下面逐一对部分重要参数进行解释并给出一般性推荐。 epoch：模型训练轮数，通常选择2～5，可以根据eval集的loss曲线来判断：如果train集的loss曲线下降，eval集loss曲线上升，则说明模型已经过拟合，此刻考虑到基础模型的通用能力，应该停止训练；如果train集和eval集loss曲线均在缓慢下降，则说明模型还未收敛，可以继续进行训练。按经验来说，一般性的任务，全参微调训练3个epoch以内，LoRA微调应该取35个epoch。而生成类任务的epoch数可以略微设置大一点，如5～10范围内。 learning rate：学习率，设置较大时会加速模型迭代，但是模型可能无法收敛到最优点；设置过小时会使得模型迭代较慢，可能陷入局部最优。按照经验来讲， LORA微调选择 learning rate 在 1e4 ~ 3e4，全参微调选择learning rate在1e6~5e6即可。 global batch size：全局批处理大小，在大模型加速框架Megatron下，该值的增大不会导致显存溢出的问题，但由于梯度累积的存在，其值越大，模型训练性能会降低。一般来说，小模型使用的gbs值可以小一点，大模型的gbs值一般设置成64及以上，gbs的设置一般是2的次幂，比如2，4，8，16，32等。 seq lens：序列长度，其取值应该大于等于训练数据里面最长的那个，以防止数据被截断。一般来说，由于大模型普遍应用旋转位置编码，其已经具备了一定的外推性，8k的序列长度已经可以满足一些简单的、常规的问答任务。如果有特殊需求，比如长文本续写或者特长思维链推理，才会考虑放大序列长度到32k。而且增大序列长度所需的资源数会成倍增长，通常会开启序列并行或者激活值重计算的方式来支持模型的长序列微调能力，会严重影响训练性能。 另外，针对这些参数，有一些额外建议供用户参考： 微调时，learning rate是随着global batch size的增加而单调递增但有上界的。当优化器是Adam或者RMSProp时，learning rate是和global batch size的平方根成正比。但是增大global batch size到一定阈值后，learning rate反而应该减小。 当增大global batch size并相应增大learning rate时，为保证模型训练一定的步数，有时epoch也需要稍微增大一些。 LoRA微调时，最优的learning rate相比于全参微调时最优的learning rate，一般大1～2个数量级。

3. 精调参数 在SFT中，不同的超参数选择会影响模型的精度以及性能，下面逐一对部分重要参数进行解释并给出一般性推荐。 epoch：模型训练轮数，通常选择2～5，可以根据eval集的loss曲线来判断：如果train集的loss曲线下降，eval集loss曲线上升，则说明模型已经过拟合，此刻考虑到基础模型的通用能力，应该停止训练；如果train集和eval集loss曲线均在缓慢下降，则说明模型还未收敛，可以继续进行训练。按经验来说，一般性的任务，全参微调训练3个epoch以内，LoRA微调应该取35个epoch。而生成类任务的epoch数可以略微设置大一点，如5～10范围内。 learning rate：学习率，设置较大时会加速模型迭代，但是模型可能无法收敛到最优点；设置过小时会使得模型迭代较慢，可能陷入局部最优。按照经验来讲， LORA微调选择 learning rate 在 1e4 ~ 3e4，全参微调选择learning rate在1e6~5e6即可。 global batch size：全局批处理大小，在大模型加速框架Megatron下，该值的增大不会导致显存溢出的问题，但由于梯度累积的存在，其值越大，模型训练性能会降低。一般来说，小模型使用的gbs值可以小一点，大模型的gbs值一般设置成64及以上，gbs的设置一般是2的次幂，比如2，4，8，16，32等。 seq lens：序列长度，其取值应该大于等于训练数据里面最长的那个，以防止数据被截断。一般来说，由于大模型普遍应用旋转位置编码，其已经具备了一定的外推性，8k的序列长度已经可以满足一些简单的、常规的问答任务。如果有特殊需求，比如长文本续写或者特长思维链推理，才会考虑放大序列长度到32k。而且增大序列长度所需的资源数会成倍增长，通常会开启序列并行或者激活值重计算的方式来支持模型的长序列微调能力，会严重影响训练性能。 另外，针对这些参数，有一些额外建议供用户参考： 微调时，learning rate是随着global batch size的增加而单调递增但有上界的。当优化器是Adam或者RMSProp时，learning rate是和global batch size的平方根成正比。但是增大global batch size到一定阈值后，learning rate反而应该减小。 当增大global batch size并相应增大learning rate时，为保证模型训练一定的步数，有时epoch也需要稍微增大一些。 LoRA微调时，最优的learning rate相比于全参微调时最优的learning rate，一般大1～2个数量级。

参数名 说明 取值样例 名称 连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 mrshbaselink Manager IP MRS Manager的浮动IP地址，可以单击输入框后的“选择”来选定已创建的MRS集群，CDM会自动填充下面的鉴权参数。 127.0.0.1 用户名 选择KERBEROS鉴权时，需要配置MRS Manager的用户名和密码。从HDFS导出目录时，如果需要创建快照，这里配置的用户需要HDFS系统的管理员权限。 如果要创建MRS安全集群的数据连接，不能使用admin用户。因为admin用户是默认的管理页面用户，这个用户无法作为安全集群的认证用户来使用。您可以创建一个新的MRS用户，然后在创建MRS数据连接时，“用户名”和“密码”填写为新建的MRS用户及其密码。 说明 如果CDM集群为2.9.0版本及之后版本，且MRS集群为3.1.0及之后版本，则所创建的用户至少需具备Managerviewer的角色权限才能在CDM创建连接；如果需要对MRS组件的库、表、列进行操作，还需要参考MRS文档添加对应组件的库、表、列操作权限。 如果CDM集群为2.9.0之前的版本，或MRS集群为3.1.0之前的版本，则所创建的用户需要具备Manageradministrator或Systemadministrator权限，才能在CDM创建连接。 仅具备Managertenant或Managerauditor权限，无法创建连接。 cdm 密码 访问MRS Manager的用户密码。 认证类型 访问MRS的认证类型： SIMPLE：非安全模式选择Simple鉴权。 KERBEROS：安全模式选择Kerberos鉴权。 SIMPLE HBase版本 HBase版本。 HBASE2X 运行模式 “HBASE2X”版本支持该参数。选择HBase连接的运行模式： EMBEDDED：连接实例与CDM运行在一起，该模式性能较好。 STANDALONE：连接实例运行在独立进程。如果CDM需要对接多个Hadoop数据源（MRS、Hadoop或CloudTable），并且既有KERBEROS认证模式又有SIMPLE认证模式，只能使用STANDALONE模式。 说明 ：STANDALONE模式主要是用来解决版本冲突问题的运行模式。当同一种数据连接的源端或者目的端连接器的版本不一致时，存在jar包冲突的情况，这时需要将源端或目的端放在STANDALONE进程里，防止冲突导致迁移失败。 STANDALONE 是否使用集群配置 您可以通过使用集群配置，简化Hadoop连接参数配置。 否 集群配置名 仅当“是否使用集群配置”为“是”时，此参数有效。此参数用于选择用户已经创建好的集群配置。 hbase01

本章节主要介绍 ALM12074 fms资源异常。 告警解释 HA每60秒周期性检测Manager的fms资源。当HA连续2次检测到fms资源异常时，产生该告警。 当HA检测到fms资源正常后，告警恢复。 fms资源为单主资源，一般资源异常会导致主备倒换，看到告警时，基本已经主备倒换，并在新主环境上启动新的fms资源，告警恢复。该告警用于提示用户，Manager主备倒换的原因。 告警属性 告警ID 告警级别 是否自动清除 12074 重要 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 Manager主备倒换。 fms进程持续重启，可能导致告警信息无法正常上报。 可能原因 fms进程异常。 处理步骤 检查fms进程是否异常 1.打开FusionInsight Manager页面，在告警列表中，单击此告警所在行的，查看该告警的主机名称。 2.以root用户登录该告警的主机地址。 3.执行命令 su omm ，执行 sh ${BIGDATAHOME}/omserver/OMS/workspace0/ha/module/hacom/script/statusha.sh ，查询当前HA管理的fms资源状态是否正常（单机模式下面，fms资源为normal状态；双机模式下，fms资源在主节点为normal状态，在备节点为stopped状态。） 是，执行步骤6。 否，执行步骤4。 4.执行命令 vi $BIGDATALOGHOME/omm/oms/fms/fms.log 和vi $BIGDATALOGHOME/omm/oms/fms/scriptlog/fmsha.log查看ha的fms资源日志，是否有关键字“ERROR”，分析日志查看资源异常原因并修复。 5.等待五分钟，查看告警是否恢复。 是，操作结束。 否，执行步骤6。

使用须知 在创建同步任务前，请务必阅读以下使用须知。 说明 建议创建单独用于DRS任务连接的数据库帐号，避免因为数据库帐号密码修改，导致的任务连接失败。 连接源或目标数据库的帐号密码修改后，请尽快修改连接信息，避免任务连接失败后自动重试，导致数据库帐号被锁定影响使用。 表使用须知 类型名称 使用和操作限制 数据库权限设置 l 源数据库端： − 全量同步：需要具有CREATE SESSION，SELECT ANY DICTIONARY，针对单表的SELECT权限（GRANT SELECTto drsUser;）权限。 − 全量+增量同步： 12c及以上版本CDB数据库同步时，需要具有CREATE SESSION，SELECT ANY DICTIONARY，针对单表的SELECT权限（GRANT SELECTto drsUser;），EXECUTECATALOGROLE，SELECT ANY TRANSACTION，LOGMINING，SELECT ON SYS.COL$，SELECT ON SYS.OBJ$，SET CONTAINER（GRANT SET CONTAINER TOCONTAINERALL;）权限。 12c及以上版本PDB数据库同步时，除了需要具有CREATE SESSION，SELECT ANY DICTIONARY，针对单表的SELECT权限（GRANT SELECTto drsUser;），EXECUTECATALOGROLE，SELECT ANY TRANSACTION，LOGMINING，SELECT ON SYS.COL$，SELECT ON SYS.OBJ$权限，还需要具有CDB的CREATE SESSION，SELECT ANY DICTIONARY，EXECUTECATALOGROLE，SELECT ANY TRANSACTION，LOGMINING，SET CONTAINER（GRANT SET CONTAINER TOCONTAINERALL;）权限。 11g及以下版本数据库同步时，需要具有CREATE SESSION，SELECT ANY DICTIONARY，针对单表的SELECT权限（GRANT SELECTto drsUser;），EXECUTECATALOGROLE，SELECT ANY TRANSACTION，SELECT ON SYS.COL$，SELECT ON SYS.OBJ$。 − 增量同步时，源库Oracle需要开启日志归档模式和最小补充日志，所需同步表必须开启PK/UI或以ALL级别的补充日志，不限制库级或表级补充日志方式，若只开启表级补充日志，重建或者RENAME表后需要重新设置；请确保以上配置在同步过程中始终保持开启状态。 − 12c及以上版本不支持使用ORACLEMAINTAINEDY的用户帐号进行增量同步（system/sys除外），因为该属性的帐号无日志解析权限。 l 目标数据库帐号： − 目标数据库不存在DATABASE时需要有建库的权限；不存在SCHEMA时需要有在database中创建schema的权限；不存在表时需要有在对应schema中创建表的权限。 − 对于每张表需要有INSERT、SELECT、UPDATE、DELETE权限。 同步对象约束 l 支持表、索引、约束（主键、空、非空）的同步，不支持视图、外键、存储过程、触发器、函数、事件、虚拟列、唯一约束、唯一索引的同步。 l 全量阶段不支持bfile，xml、sdogeometry、urowid、interval（精度大于6位）和自定义类型。 l 增量阶段不支持bfile，xml、interval、sdogeometry、urowid、timestamp（精度大于6位）和自定义类型。 l 增量阶段源库为Oracle物理备库（PHYSICAL STANDBY）时不支持解析lob类型数据（无法生成数据字典），如果增量同步的表中出现lob类型会导致增量同步异常。 l 对于TIMESTAMP WITH TIME ZONE类型，根据目标库时区做转换后不得大于“99991231 23:59:59.999999”。 l 源库支持todate和sysguid函数做默认值。将其他函数作为default值时，需要目标库也有相同功能的函数。对于目标库不存在对应函数的情况，可能会出现以下结果： − 默认值函数可能会被置空。 − 创建表失败，导致对象对比不一致或者任务失败。 l 如果表中只有LOB字段，可能出现数据不一致性情况。 l 如果Oracle中使用LOB类型各自的empty函数写入数据时，通过JDBC查询出来的值是空字符串，写入到目标库后是空字符串还是NULL取决于目标库对空字符串值的处理。 l 针对无主键且无索引的表，非大字段的列必须大于3列，否则会因为无法全列匹配导致增量异常。 l 不支持默认值含有表达式的函数的表的同步。 l 不支持同步源库中的临时表。 l 选择手动创建表结构时，目标库中的时间类型是否带有时区需要与源库中保持一致，否则可能会因为时区转换导致时间数据不一致。 源数据库要求 l 库名、表名不支持的字符有：非ASCII字符、“. ”、 “>”、 “<”、 “”、 “”、 “”、 “,”、 “? ”、 “! ”、 “"”和 “'”。 l 不支持选择源数据库的空库进行同步。 l 目前仅支持同步如下字符集：ZHS16GBK、AL32UTF8、UTF8、US7ASCII、WE8MSWIN1252、WE8ISO8859P1、WE8ISO8859P2、WE8ISO8859P4、WE8ISO8859P5、WE8ISO8859P7、WE8ISO8859P9、WE8ISO8859P13、WE8ISO8859P15。 目标数据库要求 l 目标数据库实例的运行状态必须正常。 l 目标数据库实例必须有足够的磁盘空间。 l 同步的表要禁用外键，因为DRS并行回放会使得不同表之间的写入顺序和源库不一致，可能会触发外键约束限制，造成同步失败。 操作须知 l 相互关联的数据对象要确保同时同步，避免因关联对象缺失，导致同步失败。 l 表等对象名同步到目标库后会转换成小写，如ABC会转换为abc。因此增量同步阶段，选择的源库的表中不能存在仅大小写不同的表，可能会导致同步失败。 l 当Oracle字符集是WE8MSWIN1252时，CLOB列同步到目标库可能出现乱码，建议先修改源库字符集为AL32UTF8再同步数据。 l 由于无主键表缺乏行的唯一性标志，网络不稳定时涉及少量重试，表数据存在少量不一致的可能性。 l 索引同步只同步普通索引，主键等约束在表结构中进行同步。 l 同步表结构时，如果目标库存在与源库同名约束会导致建表失败。 l 如有特殊字符，业务连接Oracle数据库使用的编码需和Oracle数据库服务端编码一致，否则目标库可能会出现乱码。 l Oracle中表结构长度（所有列长字节数之和，char、varchar2等类型字节长度和编码有关）超过65535时，可能导致同步失败。 l Oracle归档日志文件大小必须大于单条数据最大值，避免单条数据日志跨文件（超过2个日志文件）导致的增量数据解析异常。 l 对于Oracle RAC集群，建议使用SCAN IP+ SERVICENAMES方式创建任务，SCAN IP具有更强的容错性，更好的负载能力，更快的同步体验。 l 源库为Oracle RAC时，如果需要使用SCAN IP配置DRS任务，需要保证SCAN IP、DRS节点的IP同时能与源库的所有VIP互通（Oracle内部机制），否则无法通过连通性检查。若不使用SCAN IP，可以使用某一节点的VIP，这种情况下DRS日志解析只会在VIP指定的RAC节点上进行。 l 若源库为RAC，增量同步首次启动时所有RAC节点必须正常在线，否则增量启动会出现异常。 l 若源库为RAC，增量同步时，不支持增加、减少节点数量，避免导致增量同步异常（为保证数据的强一致性）。 l 使用DRS同步表结构的场景下，同一个schema中，同步的表中，表、约束、索引等不能有忽略大小写后的同名对象，比如表"A"中有索引名"inx1"， 表B中有索引名"a"，表A和索引"a"忽略大小写重名了，会导致结构同步失败。多个schema映射到一个schema的场景，源库的多个schema中也不能包含同名但字母大小写不同的表、约束和索引。 l 支持源端多张表对DWS一张表的映射。详细操作可参考创建Oracle到DWS同步任务 l 同步过程中，不允许删除连接源和目标数据库的用户的用户名、密码、权限，或修改目标数据库的端口号。 l 同步过程中，禁止对Oracle源库做resetlogs操作，否则会导致数据无法同步且任务无法恢复。 l 同步过程中，不支持LOB类型的rollback操作，否则会导致同步任务失败。 l DRS全量同步表结构时，源库中的char、varchar2类型长度在目标库会按照字节长自动扩大（因为目标库为字节长），至少扩大1.5倍。扩大倍数和源库目标库的字符集有关，例如同为UTF8的情况下，默认扩大3倍，同为GBK的情况下，默认扩大2倍。 l 全量同步分区表的结构时会将该对象转为非分区的普通表，增量同步时，源库跟分区表相关的操作，在目标库执行可能会失败。 l 增量同步时，BLOB末尾的0x00、CLOB末尾的空格会被截断。 l 增量同步过程中，支持部分DDL操作。 − 表级同步支持alter table add column、alter table drop column、alter table modify column以及truncate table的基本DDL。 l 库级映射和表级映射均不区分大小写，例如映射为abc与映射为ABC，同步到目标库后均为abc。 l 任务再编辑增加新表时，请确保新增的表的事务都已提交，否则未提交的事务可能无法同步到目标库。建议在业务低峰期做增加表的操作。