当前位置: 首页 > news >正文

Python 多线程详解(概念、初始化方式、线程间变量传递、线程锁以及一些注意事项)

Python 多线程详解

1. 多线程的概念

在 Python 中,多线程是指在一个进程内同时运行多个线程,以便在某些场景下提升程序的响应能力或并发性。
线程是 CPU 调度的最小单位,而进程是系统资源分配的最小单位。一个进程可以包含多个线程,这些线程共享同一进程的资源(包括内存空间)。

注意:Python 的GIL(Global Interpreter Lock,全局解释器锁)限制了同一时刻只能有一个线程执行Python 字节码,所以多线程在计算密集型任务中无法真正实现并行,更多用于I/O 密集型任务(例如网络请求、文件读写)。


2. 多线程的初始化

在 Python 中可以使用threading模块来创建和管理线程。

2.1 使用threading.Thread

importthreadingimporttimedefworker(name):print(f"线程{name}开始工作")time.sleep(1)print(f"线程{name}工作结束")# 创建线程对象t1=threading.Thread(target=worker,args=("A",))t2=threading.Thread(target=worker,args=("B",))# 启动线程t1.start()t2.start()# 等待线程结束t1.join()t2.join()print("所有线程执行完毕")

关键参数

  • target:线程运行的函数。
  • args:传给函数的参数(元组形式)。
  • kwargs:传给函数的关键字参数。

3. 线程之间的变量传递

3.1 共享变量

线程之间可以共享同一个全局变量(因为它们在同一个进程中),但这会引发数据竞争问题。

importthreading counter=0# 全局变量defincrement():globalcounterfor_inrange(100000):counter+=1# 多线程这里可能会出错threads=[]for_inrange(5):t=threading.Thread(target=increment)threads.append(t)t.start()fortinthreads:t.join()print("counter =",counter)

上面的代码可能不会得到想象的结果,因为多个线程同时修改counter会产生竞态条件


4. 线程锁(Lock)

为避免数据竞争,我们需要使用(Lock)来确保某段代码同一时刻只有一个线程能执行。

importthreading counter=0lock=threading.Lock()defsafe_increment():globalcounterfor_inrange(100000):withlock:# 自动 acquire/releasecounter+=1threads=[]for_inrange(5):t=threading.Thread(target=safe_increment)threads.append(t)t.start()fortinthreads:t.join()print("counter =",counter)# 结果正确

4.1Lock的用法

lock=threading.Lock()# 方式1lock.acquire()try:# 临界区代码passfinally:lock.release()# 方式2 (推荐)withlock:# 临界区代码pass

5. 线程间通信

除了共享变量,还可以使用队列(Queue)来安全地进行线程间数据传递。

importthreadingimportqueueimporttime q=queue.Queue()defproducer():foriinrange(5):q.put(i)print(f"生产数据{i}")time.sleep(0.2)defconsumer():whileTrue:item=q.get()ifitemisNone:# 遇到 None 退出breakprint(f"消费数据{item}")time.sleep(0.3)q.task_done()t1=threading.Thread(target=producer)t2=threading.Thread(target=consumer)t1.start()t2.start()t1.join()q.put(None)# 通知消费者退出t2.join()

优点queue.Queue()是线程安全的,内部已经做好了加锁处理,无需手动使用 Lock。


6. 守护线程(Daemon Thread)

守护线程会在主线程结束时自动退出。

t=threading.Thread(target=worker)t.daemon=True# 设为守护线程t.start()

适合做后台任务,例如日志记录或心跳检测。


7. 线程池(ThreadPoolExecutor)

如果需要频繁创建和销毁线程,可以使用线程池来提升性能。

fromconcurrent.futuresimportThreadPoolExecutordeftask(name):print(f"{name}开始")returnf"{name}完成"withThreadPoolExecutor(max_workers=3)asexecutor:futures=[executor.submit(task,f"任务{i}")foriinrange(5)]forfutureinfutures:print(future.result())

8. 总结与建议

  • 计算密集型任务:推荐使用多进程(multiprocessing)而不是多线程,避免 GIL 限制。
  • I/O 密集型任务:推荐使用多线程或异步(asyncio)。
  • 使用LockQueue解决数据竞争和线程安全问题。
  • 合理规划线程数量,不要盲目创建过多线程。
  • 可以用ThreadPoolExecutor简化线程管理。
http://www.jsqmd.com/news/131191/

相关文章:

  • 支持多种格式上传!Anything-LLM助力企业智能化升级
  • 【口碑好的资源对接会】落地实施全流程复盘:构建高效对接模型并
  • 支持多模型切换的Anything-LLM究竟有多强大?
  • 基于Multisim仿真电路图的运算放大器完整指南
  • 传疯Java界,堪称最强!
  • 如何为客户提供定制化AI文档服务?从Anything-LLM开始
  • 博途HSP文件安装失败报错原因
  • 三极管结构与类型:初学者的图解说明
  • 本地运行大模型不再是梦:Anything-LLM部署避坑指南
  • CDN加速静态资源:提升全球访问速度
  • x64dbg用户层调试核心要点一文说清
  • 高效文档处理新方式:集成Anything-LLM与GPU加速推理
  • HBuilderX安装教程:图解说明各组件功能
  • 基于Anything-LLM的多租户系统设计思路探讨
  • 一键启动的知识引擎:Anything-LLM Docker镜像使用教程
  • vault分生产和dev吗?也就是说是否支持在一个azure app中创建vault,但是分为生产和dev,而不是为生产和dev分别创建一个app
  • 云市场镜像上架:AWS/Azure/GCP官方商店入驻
  • mysql.connector.errors.OperationalError: 1040 (08004): Too many connections
  • 基于Anything-LLM的智能客服原型开发全流程
  • 大模型的思想鼻祖——维特根斯坦
  • 通俗解释CCS使用逻辑:IDE各模块功能解析
  • 脑机智能会成为意识迁移的过渡形态吗
  • AI+智慧农业应用解决方案(附下载)
  • 构建行业垂直知识库:基于Anything-LLM的定制方案
  • 【无标题】知识图谱构建
  • 轻量级但全能:Anything-LLM为何适合小团队使用?
  • 德勤集团财务管理标准化项目解决方案(附下载)
  • 这款水洗轻智能马桶,能让「全民洗起来」吗?
  • 从零搭建个人AI助手——基于Anything-LLM镜像的完整指南
  • 在线电路仿真对比:LTspice Web与其他工具优劣比较