deepseek学习之python并行编程的封装

昨天的并行思想实现了以下需求:

1、可以手动控制并行调度的数量

2、在并行调度数量内,一个子进程执行成功之后,另一个子进程开始执行

3、最后需要返回执行成功和执行没有成功的进程

现在引入一个新的思想--封装,我们先来看看什么是封装:

上面说到的是有一个子程序需要运行N次,如果有N个子程序需要运行N次呢?这个时候又该怎么处理呢?这个时候用到了封装思想,把这个程序封装起来,如果有多少个子程序就实例化多少个这个程序,此时我们可以向deepseek这样提问:帮我把这个程序封装成一个class类。

下面是源码,可以自行增加子程序进行测试:

from concurrent.futures import ThreadPoolExecutor, as_completed
import timeclass ParallelProcessor:'''并行任务处理器(带完整异常处理) '''def __init__(self, func,params_list,max_workers=4):'''初始化配置:parammax_workers: 最大并行线程数(建议设置为CPU核心数×2)'''self.max_workers = max_workersself.func = funcself.params_list = params_listself.success = []  # 存储成功结果 (参数, 结果)self.failure = []  # 存储失败结果 (参数, 错误信息)def run(self):"""并行调度器:param params_list: 参数列表,每个元素会传给p_w_time:param max_workers: 最大并行数量:return: (成功列表, 失败列表)"""with ThreadPoolExecutor(max_workers= self.max_workers) as executor:# 创建任务映射字典 {future: 参数}future_to_param = {executor.submit(self.func, param): param for param in self.params_list}# 按完成顺序处理结果for future in as_completed(future_to_param):param = future_to_param[future]try:result = future.result()self.success.append((param, result))except Exception as e:self.failure.append((param, str(e)))return self.success, self.failuredef get_results(self):'''获取处理结果统计 '''return {"total": len(self.success) + len(self.failure),"success_count": len(self.success),"failure_count": len(self.failure)}
'''子程序,可以编写多个'''
def p_w_time(passage):time.sleep(2)print(time.strftime("%Y-%m-%d %H:%M:%S")+' : '+str(passage)+'  ')'''子程序,可以编写多个'''
def p_w_time1(passage):time.sleep(2)print(time.strftime("%Y-%m-%d %H:%M:%S")+' : '+str(passage)+'  ')if __name__ == "__main__":#print(range(1, 11))# 初始化处理器(设置并行数为3)processor = ParallelProcessor(p_w_time,[1,2,'3',4,5,6,7],max_workers=3)#processor._task_handler(p_w_time)# 执行任务(参数范围1-10)processor.run()# 获取执行结果results = processor.get_results()print(f'总任务数:{results[ "total"]}')print(f'成功数:{results[ "success_count"]}')print(f'失败数:{results[ "failure_count"]}')processor1 = ParallelProcessor(p_w_time1, [1, 2, 4, 5, 6, 7], max_workers=3)# processor._task_handler(p_w_time)# 执行任务(参数范围1-10)processor1.run()# 获取执行结果results1 = processor1.get_results()print(f'总任务数:{results1["total"]}')print(f'成功数:{results1["success_count"]}')print(f'失败数:{results1["failure_count"]}')

「清华大学第四弹:...一样简单.pdf」,复制整段内容,打开最新版「夸克APP」即可获取。
畅享原画,免费5倍速播放,支持AI字幕和投屏,更有网盘TV版。
/~bea235zB7i~:/
链接:https://pan.quark.cn/s/a39e9d7285ce

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/24624.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

8、HTTP/1.0和HTTP/1.1的区别【高频】

第一个是 长连接: HTTP/1.0 默认 短连接,(它也可以指定 Connection 首部字段的值为 Keep-Alive实现 长连接)而HTTP/1.1 默认支持 长连接,HTTP/1.1是基于 TCP/IP协议的,创建一个TCP连接是需要经过三次握手的…

【爬虫基础】第二部分 爬虫基础理论 P1/3

上节内容回顾:【爬虫基础】第一部分 网络通讯 P1/3-CSDN博客 【爬虫基础】第一部分 网络通讯-Socket套接字 P2/3-CSDN博客 【爬虫基础】第一部分 网络通讯-编程 P3/3-CSDN博客 爬虫相关文档,希望互相学习,共同进步 风123456789&#xff…

nss刷题5(misc)

[HUBUCTF 2022 新生赛]最简单的misc 打开后是一张图片,没有其他东西,分离不出来,看看lsb,红绿蓝都是0,看到头是png,重新保存为png,得到一张二维码 扫码得到flag [羊城杯 2021]签到题 是个动图…

清华大学DeepSeek文档下载,清华大学deepseek下载(完成版下载)

文章目录 前言一、清华大学DeepSeek使用手册下载二、清华大学DeepSeek使用手册思维导图 前言 这是一篇关于清华大学deepseek使用手册pdf的介绍性文章,主要介绍了DeepSeek的定义、功能、使用方法以及如何通过提示语设计优化AI性能。以下是对这些核心内容的简要概述&…

强化学习演进:GRPO 从何而来

强化学习(Reinforcement Learning, RL)是机器学习的一个分支,其核心是让智能体(Agent)通过与环境(Environment)的交互,学习如何采取最优行动(Action)以最大化…

树和二叉树

文章目录 树和二叉树1.树的概念1.1特点1.2基本概念 2.二叉树2.1二叉树的定义2.2特殊的树2.3 二叉树的性质2.4二叉树的存储 二叉树的遍历 树和二叉树 1.树的概念 树是一种非线性的数据结构,它是由n个有限结点组成一个有具体层次关系的集合 1.1特点 没有前驱结点的…

ubuntu离线安装Ollama并部署Llama3.1 70B INT4

文章目录 1.下载Ollama2. 下载安装Ollama的安装命令文件install.sh3.安装并验证Ollama4.下载所需要的大模型文件4.1 加载.GGUF文件(推荐、更容易)4.2 加载.Safetensors文件(不建议使用) 5.配置大模型文件 参考: 1、 如…

15.代码随想录算法训练营第十五天|(递归)110. 平衡二叉树,257. 二叉树的所有路径*,404. 左叶子之和,222.完全二叉树的节点个数[打卡自用]

15.代码随想录算法训练营第十五天|(递归)110. 平衡二叉树,257. 二叉树的所有路径*,404. 左叶子之和,222.完全二叉树的节点个数 给定一个二叉树,判断它是否是 平衡二叉树 示例 1: 输入&#xf…

GateWay

文章目录 创建网关配置路由规则工作原理 断言过滤器默认filter全局跨域 左边的是响应式网关,右边是传统网关(Servlet年代) 推荐左边的 需求 创建网关 在服务模块外 新建一个gateway模块 导入依赖,nacos和gateway和负载均衡 配置一下 这里网关默认占80…

十一、大数据治理平台总体功能架构

大数据治理平台的功能架构图中心主题:数据治理 核心重点是建立健全大数据资产管理框架,确保数据质量、安全性、可访问性和合规性。 大数据治理平台总体功能架构图 关键功能领域 1.数据资产平台(左侧) 此部分主要关注数据资产本身…

网络安全 机器学习算法 计算机网络安全机制

(一)网络操作系统 安全 网络操作系统安全是整个网络系统安全的基础。操作系统安全机制主要包括访问控制和隔离控制。 访问控制系统一般包括主体、客体和安全访问政策 访问控制类型: 自主访问控制强制访问控制 访问控制措施: 入…

PDF扫描档智能方向识别:多模型投票机制的实践测试 救活古典书籍

2025-02-22 20:10物联全栈123 尊敬的诸位!我是一名物联网工程师。关注我,持续分享最新物联网与AI资讯和开发实战。期望与您携手探寻物联网与 AI 的无尽可能 RAG知识库搭建的过程中,扫描档pdf的支持和准确率一直是个大家都不愿主动提起的事情…

初会学习记录

【25初级会计《实务》】第一章:权责发生制举例_哔哩哔哩_bilibili 务实: 第一章 (1)会计概念,职能和目标: 2025年2月25日: (2)会计假设: 2025年2月26日: (3)会计核算基础: 202…

【FL0091】基于SSM和微信小程序的社区二手物品交易小程序

🧑‍💻博主介绍🧑‍💻 全网粉丝10W,CSDN全栈领域优质创作者,博客之星、掘金/知乎/b站/华为云/阿里云等平台优质作者、专注于Java、小程序/APP、python、大数据等技术领域和毕业项目实战,以及程序定制化开发…

【DDD系列-10】一页纸回顾DDD

1. DDD是什么 DDD: 是 Domain-Driven Design 的缩写,是 Eric Evans (埃里克•埃文斯)于 2004 年提出的一种软件设计方法和理念。其主要的思想是,利用确定的业务模型来指导业务与应用的设计和实现。主张开发人员与业务人员持续地沟通和模型的…

【视频2 - 4】初识操作系统,Linux,虚拟机

📝前言说明: ●本专栏主要记录本人的基础算法学习以及LeetCode刷题记录,主要跟随B站博主灵茶山的视频进行学习,专栏中的每一篇文章对应B站博主灵茶山的一个视频 ●题目主要为B站视频内涉及的题目以及B站视频中提到的“课后作业”。…

逆向pyinstaller打包的exe软件,获取python源码(5)

在ailx10:逆向pyinstaller打包的exe软件,获取python源码(2)中,我们已经逆向出了主程序,但是import导入的py文件并没有被逆向出来,今天在知乎网友给的提醒下,说是在 PYZ-00.pyz_extracted 文件夹中&#xff…

快速理解Raft分布式共识算法

目录 拜占庭将军问题 Raft算法是干什么的? 一、领导选举(选老板) 二、日志复制(发通知) 三、安全性(防篡改) 🌰 举个真实例子 ✔️ Raft的优势 基础 状态机 节点类型 任期…

mmdetection框架下使用yolov3训练Seaships数据集

之前复现的yolov3算法采用的是传统的coco数据集,这里我需要在新的数据集上跑,也就是船舶检测方向的SeaShips数据集,这里给出教程。 Seaships论文链接:https://ieeexplore.ieee.org/stamp/stamp.jsp?tp&arnumber8438999 一、…

方法的有关知识(含递归)

方法使用 方法就是一个 代码片段 . 类似于 C 语言中的 " 函数 " 。 方法(代码片段)定义: public class Method{ // 方法的定义public static int add(int x, int y) {return x y;} }修饰符(public static) 返回值类型 方法名称([参数类型 形参]){ 方法体代码;…