爆款云主机2核4G限时秒杀,88元/年起!
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 618智算钜惠季 爆款云主机2核4G限时秒杀,88元/年起!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云脑AOne NEW 连接、保护、办公,All-in-One!
  • 中小企业应用上云专场 产品组合下单即享折上9折起,助力企业快速上云
  • 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛,数款产品享受线上订购超值特惠
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
科研助手
  • 算力商城
  • 应用商城
  • 开发机
  • 并行计算
算力互联调度平台
  • 应用市场
  • 算力市场
  • 算力调度推荐
一站式智算服务平台
  • 模型广场
  • 体验中心
  • 服务接入
智算一体机
  • 智算一体机
大模型
  • DeepSeek-R1-昇腾版(671B)
  • DeepSeek-R1-英伟达版(671B)
  • DeepSeek-V3-昇腾版(671B)
  • DeepSeek-R1-Distill-Llama-70B
  • DeepSeek-R1-Distill-Qwen-32B
  • Qwen2-72B-Instruct
  • StableDiffusion-V2.1
  • TeleChat-12B

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案
办公协同
  • WPS云文档
  • 安全邮箱
  • EMM手机管家
  • 智能商业平台
财务管理
  • 工资条
  • 税务风控云
企业应用
  • 翼信息化运维服务
  • 翼视频云归档解决方案
工业能源
  • 智慧工厂_生产流程管理解决方案
  • 智慧工地
建站工具
  • SSL证书
  • 新域名服务
网络工具
  • 翼云加速
灾备迁移
  • 云管家2.0
  • 翼备份
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)
行业应用
  • 翼电子教室
  • 翼智慧显示一体化解决方案

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
  • 天翼云EasyCoding平台
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
开放能力
  • EasyCoding敏捷开发平台
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心

      有依赖关系多个任务的并行处理一则

      首页 知识中心 软件开发 文章详情页

      有依赖关系多个任务的并行处理一则

      2024-12-19 08:47:09 阅读次数:53

      async,std,任务,执行,示例,线程

      在多核CPU环境下,实现一个管道过滤器程序,其中任务函数对象间存在依赖关系,可以通过结合拓扑排序和线程池技术来实现高效的任务调度。以下是一个示例代码,演示如何使用C++实现这样一个系统:

      1. 任务和依赖关系

      我们将任务视作一个有向无环图(DAG)的节点,每个节点有可能依赖其他节点。拓扑排序将帮助我们确定任务的执行顺序,以保证所有依赖关系都被满足。

      2. 实现步骤

      1. 定义任务:每个任务函数对象定义了一个任务的执行逻辑。
      2. 构建依赖图:用图结构来表示任务之间的依赖关系。
      3. 拓扑排序:计算任务的执行顺序,保证所有依赖被满足。
      4. 线程池执行:使用线程池并行执行任务。

      示例代码

      以下示例代码展示了如何结合这些技术来实现任务的调度:

      #include <iostream>
      #include <vector>
      #include <queue>
      #include <unordered_map>
      #include <unordered_set>
      #include <thread>
      #include <functional>
      #include <future>
      #include <mutex>
      
      // 任务类,存储任务函数和依赖
      class Task {
      public:
          std::function<void()> func;  // 任务执行函数
          std::vector<int> dependencies;  // 依赖任务的ID
      
          Task(std::function<void()> f, std::vector<int> deps)
              : func(f), dependencies(deps) {}
      };
      
      // 拓扑排序
      std::vector<int> topologicalSort(const std::unordered_map<int, Task>& tasks,
                                       const std::unordered_map<int, std::vector<int>>& graph) {
          std::unordered_map<int, int> inDegree;  // 记录每个节点的入度
          std::queue<int> zeroInDegree;  // 入度为0的节点
          std::vector<int> sortedOrder;
      
          // 初始化入度
          for (const auto& [taskID, task] : tasks) {
              inDegree[taskID] = 0;
          }
          for (const auto& [taskID, dependencies] : graph) {
              for (int dep : dependencies) {
                  inDegree[dep]++;
              }
          }
      
          // 将入度为0的节点加入队列
          for (const auto& [taskID, degree] : inDegree) {
              if (degree == 0) {
                  zeroInDegree.push(taskID);
              }
          }
      
          // 拓扑排序
          while (!zeroInDegree.empty()) {
              int current = zeroInDegree.front();
              zeroInDegree.pop();
              sortedOrder.push_back(current);
      
              for (int neighbor : graph.at(current)) {
                  if (--inDegree[neighbor] == 0) {
                      zeroInDegree.push(neighbor);
                  }
              }
          }
      
          return sortedOrder;
      }
      
      // 执行任务的函数
      void executeTasks(const std::vector<int>& taskOrder,
                        const std::unordered_map<int, Task>& tasks) {
          std::unordered_map<int, std::future<void>> futures;
          std::mutex mtx;
      
          for (int taskID : taskOrder) {
              const Task& task = tasks.at(taskID);
      
              // 使用 std::async 执行任务
              futures[taskID] = std::async(std::launch::async, [task, &mtx]() {
                  // 确保任务函数是线程安全的
                  {
                      std::lock_guard<std::mutex> lock(mtx);
                      std::cout << "Executing task " << taskID << std::endl;
                  }
                  task.func();
              });
          }
      
          // 等待所有任务完成
          for (auto& [taskID, future] : futures) {
              future.get();
          }
      }
      
      int main() {
          // 定义任务
          std::unordered_map<int, Task> tasks = {
              {1, Task([]() { std::this_thread::sleep_for(std::chrono::seconds(1)); std::cout << "Task 1\n"; }, {})},
              {2, Task([]() { std::cout << "Task 2\n"; }, {1})},
              {3, Task([]() { std::cout << "Task 3\n"; }, {1})},
              {4, Task([]() { std::cout << "Task 4\n"; }, {2, 3})}
          };
      
          // 构建依赖图
          std::unordered_map<int, std::vector<int>> graph;
          for (const auto& [taskID, task] : tasks) {
              for (int dep : task.dependencies) {
                  graph[dep].push_back(taskID);
              }
          }
      
          // 执行拓扑排序
          std::vector<int> sortedOrder = topologicalSort(tasks, graph);
      
          // 执行任务
          executeTasks(sortedOrder, tasks);
      
          return 0;
      }

      在前面的示例中,各个任务并不是在同一个线程中执行的,而是使用了 std::async 将任务分派到可能的多个线程中进行异步执行。这样可以充分利用多核CPU的性能,实现并行执行。

      如何实现并行执行:

      1. std::async 的使用:

        • std::async(std::launch::async, ...) 的调用会启动新的线程来执行任务。这使得每个任务可以并行运行,从而在多核CPU上加速任务的执行。
      2. 任务线程的调度:

        • 在executeTasks 函数中,每个任务会被交给 std::async 进行处理。这样,每个任务的执行是独立的,不会阻塞其他任务的执行。
      3. 同步与等待:

        • 在任务执行的最后,使用 future.get() 来等待所有异步任务完成。这保证了主线程在所有任务执行完毕后再继续后续操作。

      举个例子

      假设我们有四个任务:Task 1、Task 2、Task 3 和 Task 4。如果只是在同一个线程中执行这些任务,那么它们将一个接一个地依次执行。而使用 std::async,这些任务可能会被调度到不同的线程中,具体取决于可用的CPU核心数量和操作系统的线程调度策略。

      示例运行时情况

      • 串行执行:

        • 任务1 -> 任务2 -> 任务3 -> 任务4
        • 总时间 = 任务1 + 任务2 + 任务3 + 任务4
      • 并行执行:

        • 任务1(线程1) | 任务2(线程2) | 任务3(线程3) | 任务4(线程4)
        • 总时间 = max(任务1, 任务2, 任务3, 任务4) — 这一般会远小于串行执行的总时间。

      结论

      因此,可以确认,在示例中各个任务并不是在同一个线程中执行的,而是尽可能地并行化执行,以提高性能和效率。这是多核处理器的一个重要优势。

      版权声明:本文内容来自第三方投稿或授权转载,原文地址:https://blog.csdn.net/joshua0137/article/details/140711749,作者:捕鲸叉,版权归原作者所有。本网站转在其作品的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如因作品内容、版权等问题需要同本网站联系,请发邮件至ctyunbbs@chinatelecom.cn沟通。

      上一篇:并行与并发

      下一篇:什么是软件设计模式, 它们⽤于解决什么问题, 它们为什么有效

      相关文章

      2025-05-19 09:05:01

      【手把手带你刷好题】—— 60.第N个泰波那契数(记忆化搜索、简单DP)

      【手把手带你刷好题】—— 60.第N个泰波那契数(记忆化搜索、简单DP)

      2025-05-19 09:05:01
      打卡 , 示例
      2025-05-19 09:05:01

      【手把手带你刷好题】—— 63.杨辉三角(递推)

      【手把手带你刷好题】—— 63.杨辉三角(递推)

      2025-05-19 09:05:01
      打卡 , 杨辉三角 , 示例
      2025-05-19 09:04:44

      js原生写一个小小轮播案例

      js原生写一个小小轮播案例

      2025-05-19 09:04:44
      js , 示例
      2025-05-19 09:04:38

      mysql只有在任务处于完成状态才能运行

      mysql只有在任务处于完成状态才能运行

      2025-05-19 09:04:38
      MySQL , 任务 , 数据库 , 查询 , 状态
      2025-05-19 09:04:22

      如何向ChatGPT提问,才能获取高质量的答案

      如何向ChatGPT提问,才能获取高质量的答案

      2025-05-19 09:04:22
      ChatGPT , Flask , 示例 , 认证
      2025-05-16 09:15:24

      Redis Set集合

      Redis Set集合

      2025-05-16 09:15:24
      set , 个数 , 元素 , 示例 , 集合
      2025-05-16 09:15:17

      Linux系统基础-多线程超详细讲解(5)_单例模式与线程池

      Linux系统基础-多线程超详细讲解(5)_单例模式与线程池

      2025-05-16 09:15:17
      单例 , 线程 , 队列
      2025-05-14 10:33:16

      30天拿下Rust之泛型

      在Rust语言中,泛型是一种强大的工具,它允许我们编写可复用且灵活的代码。通过泛型,我们可以创建适用于多种类型的数据结构和函数,而无需为每种类型都重复编写相同的逻辑。在Rust中,泛型通过指定类型参数来实现,这些类型参数会在编译时被具体类型所替换。

      2025-05-14 10:33:16
      Rust , 参数 , 实例 , 泛型 , 示例 , 类型
      2025-05-14 10:33:16

      C++ 11新特性之unique_ptr

      在C++ 11标准中,智能指针作为一种强大的资源管理工具被引入,极大地提升了代码的健壮性和安全性。其中,std::unique_ptr作为唯一所有权智能指针,以其独特的非拷贝特性及自动内存释放机制,成为现代C++编程中的重要组件。

      2025-05-14 10:33:16
      ptr , std , unique , 指向 , 指针 , 赋值
      2025-05-14 10:33:16

      30天拿下Python之使用网络

      Python网络编程覆盖的范围非常广,包括:套接字编程、socketserver、HTTP和Web开发、异步编程和asyncio等。

      2025-05-14 10:33:16
      Json , TCP , 客户端 , 接字 , 服务器 , 示例 , 连接
      查看更多
      推荐标签

      作者介绍

      天翼云小翼
      天翼云用户

      文章

      33561

      阅读量

      5245684

      查看更多

      最新文章

      js原生写一个小小轮播案例

      2025-05-19 09:04:44

      Redis Set集合

      2025-05-16 09:15:24

      Linux系统基础-多线程超详细讲解(5)_单例模式与线程池

      2025-05-16 09:15:17

      C++ 11新特性之unique_ptr

      2025-05-14 10:33:16

      C++ 11新特性之tuple

      2025-05-14 10:33:16

      C++ 11新特性之shared_ptr

      2025-05-14 10:07:38

      查看更多

      热门文章

      Java线程同步synchronized wait notifyAll

      2023-04-18 14:15:05

      Android Priority Job Queue (Job Manager):线程任务的容错重启机制(二)

      2024-09-25 10:13:46

      操作系统中的线程种类

      2023-04-24 11:27:18

      Android Priority Job Queue (Job Manager):多重不同Job并发执行并在前台获得返回结果(四)

      2023-04-13 09:54:33

      实现远程线程DLL注入

      2023-05-04 08:57:15

      【Java并发编程】之十:使用wait/notify/notifyAll实现线程间通信的几点重要说明

      2023-04-24 11:25:19

      查看更多

      热门标签

      java Java python 编程开发 代码 开发语言 算法 线程 Python html 数组 C++ 元素 javascript c++
      查看更多

      相关产品

      弹性云主机

      随时自助获取、弹性伸缩的云服务器资源

      天翼云电脑(公众版)

      便捷、安全、高效的云电脑服务

      对象存储

      高品质、低成本的云上存储服务

      云硬盘

      为云上计算资源提供持久性块存储

      查看更多

      随机文章

      深入解析 Spring Bean 的生命周期

      面向对象函数设计方法论

      LinkedBlockingDeque 使用笔记

      LeetCode:347.前 K 个高频元素

      Java中的线程调度与性能优化技巧

      驱动开发:内核监控进程与线程回调

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 服务器安全卫士
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号