活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 618智算钜惠季 爆款云主机2核4G限时秒杀,88元/年起!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云脑AOne NEW 连接、保护、办公,All-in-One!
  • 中小企业应用上云专场 产品组合下单即享折上9折起,助力企业快速上云
  • 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛,数款产品享受线上订购超值特惠
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
科研助手
  • 算力商城
  • 应用商城
  • 开发机
  • 并行计算
算力互联调度平台
  • 应用市场
  • 算力市场
  • 算力调度推荐
一站式智算服务平台
  • 模型广场
  • 体验中心
  • 服务接入
智算一体机
  • 智算一体机
大模型
  • DeepSeek-R1-昇腾版(671B)
  • DeepSeek-R1-英伟达版(671B)
  • DeepSeek-V3-昇腾版(671B)
  • DeepSeek-R1-Distill-Llama-70B
  • DeepSeek-R1-Distill-Qwen-32B
  • Qwen2-72B-Instruct
  • StableDiffusion-V2.1
  • TeleChat-12B

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案
办公协同
  • WPS云文档
  • 安全邮箱
  • EMM手机管家
  • 智能商业平台
财务管理
  • 工资条
  • 税务风控云
企业应用
  • 翼信息化运维服务
  • 翼视频云归档解决方案
工业能源
  • 智慧工厂_生产流程管理解决方案
  • 智慧工地
建站工具
  • SSL证书
  • 新域名服务
网络工具
  • 翼云加速
灾备迁移
  • 云管家2.0
  • 翼备份
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)
行业应用
  • 翼电子教室
  • 翼智慧显示一体化解决方案

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
  • 天翼云EasyCoding平台
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
开放能力
  • EasyCoding敏捷开发平台
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      文档中心

      数据湖探索

      数据湖探索

        • 产品动态
        • 产品简介
        • 产品定义
        • 产品优势
        • 功能特性
        • 应用场景
        • 与其他产品的关系
        • 术语解释
        • 计费说明
        • 资源节点
        • 产品规格
        • 产品价格
        • 计费模式
        • 购买
        • 续订
        • 退订
        • 快速入门
        • 注册天翼云账号
        • 创建并提交Spark SQL作业
        • 使用TPC-H样例模板开发并提交Spark SQL作业
        • 创建并提交Spark Jar作业
        • 用户指南
        • 概述
        • DLI控制台总览
        • SQL编辑器
        • 作业管理
        • SQL作业管理
        • Flink作业管理
        • Flink作业管理概述
        • Flink作业权限管理
        • 准备Flink作业数据
        • 创建Flink SQL作业
        • 创建Flink Jar作业
        • 调试Flink作业
        • 操作Flink作业
        • Flink作业详情
        • 开启Flink作业动态扩缩容
        • Spark作业管理
        • Spark作业管理概述
        • 创建Spark作业
        • 设置作业优先级
        • 队列管理
        • 队列管理概述
        • 队列权限管理
        • 创建队列
        • 删除队列
        • 修改队列网段
        • 队列弹性扩缩容
        • 弹性扩缩容定时任务
        • 测试地址联通性
        • 创建消息通知主题
        • 弹性资源池
        • 使用前必读
        • 弹性资源池概述
        • 使用场景一:创建弹性资源池并运行作业
        • 使用场景二:配置弹性资源池队列扩缩容策略
        • 弹性资源池基本操作
        • 创建弹性资源池
        • 弹性资源池权限管理
        • 弹性资源池添加队列
        • 弹性资源池关联队列
        • 弹性资源池队列管理
        • 弹性资源池CU设置
        • 弹性资源池规格变更
        • 查看弹性资源池扩缩容历史
        • 数据管理
        • 库表管理
        • 库表管理概述
        • 数据库权限管理
        • 表权限管理
        • 创建数据库和表
        • 删除数据库和表
        • 修改数据库和表所有者
        • 导入数据
        • 将DLI数据导出至OBS
        • 查看元数据
        • 预览数据
        • 程序包管理
        • 程序包管理概述
        • 程序包组和程序包权限管理
        • 创建程序包
        • 删除程序包
        • 修改所有者
        • 内置依赖包
        • 作业模板
        • SQL模板管理
        • Flink模板管理
        • Spark模板管理
        • 附录
        • SQL模板下TPC-H样例数据说明
        • 增强型跨源连接
        • 增强型跨源连接概述
        • 跨源分析开发方式
        • 创建增强型跨源连接
        • 删除增强型跨源连接
        • 修改主机信息
        • 绑定/解绑队列
        • 添加路由
        • 删除路由
        • 增强型跨源连接权限管理
        • 跨源认证
        • 跨源认证概述
        • 创建CSS类型跨源认证
        • 创建Kerberos跨源认证
        • 创建Kafka_SSL类型跨源认证
        • 创建Password类型跨源认证
        • 跨源认证权限管理
        • 全局配置
        • 全局变量
        • 全局变量权限管理
        • 服务授权
        • 权限管理
        • 权限管理概述
        • 创建IAM用户并授权使用DLI
        • DLI自定义策略
        • DLI资源
        • DLI请求条件
        • 常用操作与系统权限关系
        • 其他常用操作
        • 导入数据至DLI表的方式
        • 数据湖探索监控指标说明及查看指导
        • 云审计服务支持的DLI操作列表说明
        • 配额管理
        • 常见问题
        • 计费类
        • 购买类
        • 使用咨询
        • 作业管理
        • 隐私安全
        • 操作类
        • Flink作业相关问题
        • 使用咨询
        • Flink SQL作业相关问题
        • Flink Jar作业相关问题
        • 性能调优
        • 运维指导
        • SQL作业相关问题
        • 使用咨询
        • 作业开发
        • 作业运维报错
        • 运维指导
        • Spark作业相关问题
        • 使用咨询
        • 作业开发
        • 作业运维报错
        • 运维指导
        • 配额相关问题
        • 授权相关问题
        • 使用咨询
        • 运维指导
        • 队列相关问题
        • 使用咨询
        • 运维指导
        • 跨源连接相关问题
        • 跨源连接问题
        • 跨源分析问题
        • 跨源连接运维报错
        • 相关协议
        • 数据湖探索产品服务协议
        • 文档下载
        • 数据湖探索服务用户操作手册
        • 数据湖探索SQL语法参考
        • 数据湖探索开发指南
        • 数据湖探索故障排除
          无相关产品

          本页目录

          帮助中心数据湖探索用户指南作业管理Flink作业管理Flink作业详情
          Flink作业详情
          更新时间 2024-02-21 18:16:04
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          最近更新时间: 2024-02-21 18:16:04
          分享文章
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          本章节主要介绍Flink作业详情。

          创建作业后,用户可以通过查看作业详情,了解如下信息。

          • 查看作业详情
          • 查看作业监控
          • 查看作业任务列表
          • 查看作业执行计划
          • 查看提交作业日志
          • 查看作业运行日志

          查看作业详情

          用户作业创建完成并保存后,用户可以单击作业名查看作业的详细信息,包括作业的SQL语句和参数设置信息,如果是jar作业只可以看到参数设置信息。

          1.在DLI管理控制台的左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。

          2.单击需要查看的作业名称,进入“作业详情”页面。

          在“作业详情”页签,用户可以查看作业的SQL语句、参数设置信息。

          以某个Flink SQL作业为例进行说明。

          详见下表:参数说明

          参数名称 参数说明
          类型 作业类型,如Flink SQL作业。
          名称 Flink作业名称。
          描述 Flink作业描述信息。
          状态 Flink作业运行状态。
          运行模式 如果作业所属队列是共享队列,则作业的运行模式是共享模式。
          如果作业所属队列是自定义的独享队列,则作业的运行模式是独享模式。
          Flink版本 作业所选的Flink作业的版本。
          优化参数 作业添加了自定义参数配置时显示该参数。
          CU数量 作业配置的CU数量。
          管理单元 作业配置的管理单元CU数量。
          并行数 作业配置的同时运行Flink作业的任务数。
          单TM所占CU数 作业配置的每个TaskManager所占CU数量。
          单TM Slot数 作业配置的每个TaskManager Slot数量。
          OBS桶 作业配置了OBS桶显示。当勾选“开启Checkpoint”和“保存作业日志”参数后,用于保存Checkpoint和作业运行日志。
          保存作业日志 开启或关闭。
          作业异常告警 开启或关闭。
          SMN主题 作业配置的SMN主题名称。当作业勾选了“作业异常告警”参数时显示。
          异常自动重启 开启或关闭。
          异常重试最大次数 异常重试最大次数为无限时显示为“无限”,其余为设置的具体值。
          保存点路径 保存点的OBS存储路径。
          开启Checkpoint 开启或关闭。
          Checkpoint间隔 将作业运行的中间结果保存到OBS的间隔时间,单位为秒。
          Checkpoint模式 Checkpoint模式:
          at_least_once:事件至少被处理一次
          exactly_once:事件仅被处理一次
          空闲状态保留时长 用于清除GroupBy或Window经过最大保留时间后仍未更新的中间状态。
          脏数据策略 作业出现脏数据时的处理策略。作业配置脏数据策略时显示该参数。
          忽略。
          抛出异常。
          保存。
          脏数据转储地址 “脏数据策略”选择“保存”时,保存脏数据的OBS路径。
          创建时间 作业创建的具体时间。
          更新时间 作业最近一次更新的时间。

          查看作业监控

          用户可以通过云监控服务(CES)查看作业数据输入输出的详细信息。

          1.在DLI管理控制台的左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。

          2.单击需要查看的作业名称,进入“作业详情”页面。

          单击页面右上角的“作业监控”,将跳转至云监控服务(CES)。

          Flink 作业包含如下监控指标。

          指标名称 说明
          Flink作业数据输入速率 展示用户Flink作业的数据输入速率,供监控和调试使用。单位:条/秒。
          Flink作业数据输出速率 展示用户Flink作业的数据输出速率,供监控和调试使用。单位:条/秒。
          Flink作业数据输入总数 展示用户Flink作业的数据输入总数,供监控和调试使用。单位:条。
          Flink作业数据输出总数 展示用户Flink作业的数据输出总数,供监控和调试使用。单位:条。
          Flink作业字节输入速率 展示用户Flink作业每秒输入的字节数。单位:字节/秒。
          Flink作业字节输出速率 展示用户Flink作业每秒输出的字节数。单位:字节/秒。
          Flink作业字节输入总数 展示用户Flink作业字节的输入总数。单位:字节。
          Flink作业字节输出总数 展示用户Flink作业字节的输出总数。单位:字节。
          Flink作业CPU使用率 展示用户Flink作业的CPU使用率。单位:%。
          Flink作业内存使用率 展示用户Flink作业的内存使用率。单位:%。
          Flink作业最大算子延迟 展示用户Flink作业的最大算子延迟时间,单位ms。
          Flink作业最大算子反压 展示用户Flink作业的最大算子反压值,数值越大,反压越严重。
          0:表示OK
          50:表示Low
          100:表示High

          查看作业任务列表

          用户可以查看作业运行时每个任务的详细信息,例如任务的开始时间、收发字节数和运行时长等。

          说明

          如果数据为零,表示没有从数据源接收到数据。

          1.在DLI管理控制台的左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。

          2.单击需要查看的作业名称,进入“作业详情”页面。

          3.在“任务列表”页签,可以查看任务的节点信息。

          查看算子任务列表,具体参见下表:

          参数 说明
          名称 算子名称。
          持续时间 算子运行的持续时间。
          最大并行数 算子中并行的Task的个数。
          任务 算子的任务有以下几种:
          红色数字表示已失败的Task个数。
          浅灰色数字表示已取消的Task个数。
          黄色数字表示取消中的Task个数。
          绿色数字表示已完成的Task个数。
          蓝色数字表示运行中的Task个数。
          天蓝色数字表示部署中的Task个数。
          深灰色数字表示排队中的Task个数。
          状态 算子任务对应的状态。
          反压状态 算子的工作负荷状态。包含如下几种状态:
          OK:表示工作负荷正常。
          LOW:表示工作负荷略高。DLI处理数据的速度比较快。
          HIGH:表示工作负荷高。源端输入数据的速度比较慢。
          时延 指事件从源端算子到达本算子的过程中消耗的时间,单位为毫秒(ms)。
          发送的记录数 算子发送数据的记录。
          发送的字节数 算子发送的字节数。
          接受的字节数 算子接收的字节数。
          接受的记录数 算子收到数据的记录。
          开始时间 算子运行开始时间。
          结束时间 算子运行结束时间。

          查看作业执行计划

          用户通过查看执行计划了解到运行中的作业的算子流向。

          1.在DLI管理控制台的左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。

          2.单击需要查看的作业名称,进入“作业详情”页面。

          3.单击“执行计划”,在“执行计划”页签可以查看作业的算子流向。

          单击对应的节点,在页面右侧显示对应的信息。

          • 滚动鼠标滚轮可对流图进行缩放查看。
          • 流图展示当前运行作业的实时算子流图信息。

          查看提交作业日志

          用户可以通过查看提交日志排查提交作业异常的故障。

          1.在DLI管理控制台的左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。

          2.单击需要查看的作业名称,进入“作业详情”页面。

          3.在“提交日志”页签,可以查看提交作业的过程信息。

          查看作业运行日志

          用户可以通过查看运行日志排查作业运行异常的故障。

          1.在DLI管理控制台的左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。

          2.单击需要查看的作业名称,进入“作业详情”页面。

          3.在“运行日志”页签,可以查看运行中作业的JobManager和TaskManager信息。

          JobManager和TaskManager信息每分钟刷新一次,默认展示最近一分钟的运行日志。

          如果作业配置了保存作业日志的OBS桶,更多历史日志信息可以到保存日志的OBS桶中下载查看。

          如果作业没有运行,则无法查看TaskManager信息。

          文档反馈

          建议您登录后反馈,可在建议与反馈里查看问题处理进度

          鼠标选中文档,精准反馈问题

          选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理

          知道了

          上一篇 :  操作Flink作业
          下一篇 :  开启Flink作业动态扩缩容
          搜索 关闭
          ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
          公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
          备案 京公网安备11010802043424号 京ICP备 2021034386号
          ©2025天翼云科技有限公司版权所有
          京ICP备 2021034386号
          备案 京公网安备11010802043424号
          增值电信业务经营许可证A2.B1.B2-20090001
          用户协议 隐私政策 法律声明