当前位置: 首页 > news >正文

Python 多线程详解(概念、初始化方式、线程间变量传递、线程锁以及一些注意事项)

Python 多线程详解

1. 多线程的概念

在 Python 中,多线程是指在一个进程内同时运行多个线程,以便在某些场景下提升程序的响应能力或并发性。
线程是 CPU 调度的最小单位,而进程是系统资源分配的最小单位。一个进程可以包含多个线程,这些线程共享同一进程的资源(包括内存空间)。

注意:Python 的GIL(Global Interpreter Lock,全局解释器锁)限制了同一时刻只能有一个线程执行Python 字节码,所以多线程在计算密集型任务中无法真正实现并行,更多用于I/O 密集型任务(例如网络请求、文件读写)。


2. 多线程的初始化

在 Python 中可以使用threading模块来创建和管理线程。

2.1 使用threading.Thread

importthreadingimporttimedefworker(name):print(f"线程{name}开始工作")time.sleep(1)print(f"线程{name}工作结束")# 创建线程对象t1=threading.Thread(target=worker,args=("A",))t2=threading.Thread(target=worker,args=("B",))# 启动线程t1.start()t2.start()# 等待线程结束t1.join()t2.join()print("所有线程执行完毕")

关键参数

  • target:线程运行的函数。
  • args:传给函数的参数(元组形式)。
  • kwargs:传给函数的关键字参数。

3. 线程之间的变量传递

3.1 共享变量

线程之间可以共享同一个全局变量(因为它们在同一个进程中),但这会引发数据竞争问题。

importthreading counter=0# 全局变量defincrement():globalcounterfor_inrange(100000):counter+=1# 多线程这里可能会出错threads=[]for_inrange(5):t=threading.Thread(target=increment)threads.append(t)t.start()fortinthreads:t.join()print("counter =",counter)

上面的代码可能不会得到想象的结果,因为多个线程同时修改counter会产生竞态条件


4. 线程锁(Lock)

为避免数据竞争,我们需要使用(Lock)来确保某段代码同一时刻只有一个线程能执行。

importthreading counter=0lock=threading.Lock()defsafe_increment():globalcounterfor_inrange(100000):withlock:# 自动 acquire/releasecounter+=1threads=[]for_inrange(5):t=threading.Thread(target=safe_increment)threads.append(t)t.start()fortinthreads:t.join()print("counter =",counter)# 结果正确

4.1Lock的用法

lock=threading.Lock()# 方式1lock.acquire()try:# 临界区代码passfinally:lock.release()# 方式2 (推荐)withlock:# 临界区代码pass

5. 线程间通信

除了共享变量,还可以使用队列(Queue)来安全地进行线程间数据传递。

importthreadingimportqueueimporttime q=queue.Queue()defproducer():foriinrange(5):q.put(i)print(f"生产数据{i}")time.sleep(0.2)defconsumer():whileTrue:item=q.get()ifitemisNone:# 遇到 None 退出breakprint(f"消费数据{item}")time.sleep(0.3)q.task_done()t1=threading.Thread(target=producer)t2=threading.Thread(target=consumer)t1.start()t2.start()t1.join()q.put(None)# 通知消费者退出t2.join()

优点queue.Queue()是线程安全的,内部已经做好了加锁处理,无需手动使用 Lock。


6. 守护线程(Daemon Thread)

守护线程会在主线程结束时自动退出。

t=threading.Thread(target=worker)t.daemon=True# 设为守护线程t.start()

适合做后台任务,例如日志记录或心跳检测。


7. 线程池(ThreadPoolExecutor)

如果需要频繁创建和销毁线程,可以使用线程池来提升性能。

fromconcurrent.futuresimportThreadPoolExecutordeftask(name):print(f"{name}开始")returnf"{name}完成"withThreadPoolExecutor(max_workers=3)asexecutor:futures=[executor.submit(task,f"任务{i}")foriinrange(5)]forfutureinfutures:print(future.result())

8. 总结与建议

  • 计算密集型任务:推荐使用多进程(multiprocessing)而不是多线程,避免 GIL 限制。
  • I/O 密集型任务:推荐使用多线程或异步(asyncio)。
  • 使用LockQueue解决数据竞争和线程安全问题。
  • 合理规划线程数量,不要盲目创建过多线程。
  • 可以用ThreadPoolExecutor简化线程管理。
http://www.gsyq.cn/news/144074.html

相关文章:

  • 轻松实现文档智能检索:Anything-LLM核心功能演示
  • 支持多模型切换的Anything-LLM究竟有多强大?
  • 博途HSP文件安装失败报错原因
  • 三极管结构与类型:初学者的图解说明
  • CDN加速静态资源:提升全球访问速度
  • HBuilderX安装教程:图解说明各组件功能
  • 基于Anything-LLM的多租户系统设计思路探讨
  • 高速PCB中EMI抑制的实用技术:操作指南
  • 云市场镜像上架:AWS/Azure/GCP官方商店入驻
  • vault分生产和dev吗?也就是说是否支持在一个azure app中创建vault,但是分为生产和dev,而不是为生产和dev分别创建一个app
  • mysql.connector.errors.OperationalError: 1040 (08004): Too many connections
  • 通俗解释CCS使用逻辑:IDE各模块功能解析
  • 脑机智能会成为意识迁移的过渡形态吗
  • 这款水洗轻智能马桶,能让「全民洗起来」吗?
  • 轻量级但全能:Anything-LLM为何适合小团队使用?
  • cpu温度过高怎么办?7种有效解决方法分享
  • 面向生产环境的 LLM Prompt 优化:缓存、结构、自动优化与基准测试
  • 【毕业设计】SpringBoot+Vue+MySQL 教学管理系统平台源码+数据库+论文+部署文档
  • Agent工作流设计:构建自动化业务流程
  • RS232电平转换电路设计:超详细版硬件实现指南
  • 大模型训练算法宝典:6种主流算法对比与选择
  • 如何将PDF、Word文档变成可对话的知识源?试试Anything-LLM
  • 合作伙伴计划推出:招募代理商扩大市场覆盖
  • 缓存层引入Redis:减少重复计算开销
  • 一键部署Anything-LLM,快速接入GPU算力与Token服务
  • 碳足迹追踪:计算产品全生命周期排放量
  • 基础设施即代码:Terraform部署anything-llm模板
  • 工厂设备总 “罢工”?有人物联网远程管理方案省一半运维成本
  • 树莓派4b安装系统时如何正确更新VPU固件操作指南
  • SystemVerilog数据类型详解:新手友好型讲解