首页 > Python资料 博客日记
[Python学习篇] Python进程和线程
2024-09-07 09:00:06Python资料围观41次
文章[Python学习篇] Python进程和线程分享给大家,欢迎收藏Python资料网,专注分享技术知识
线程
Python 多线程编程是一种在单个程序中同时执行多个线程的技术,主要用于提高程序的并发性和性能,尤其是在 I/O 操作频繁的场景下。Python 提供了
threading
模块来支持多线程编程。
基本概念
- 线程:线程是一个独立的执行流,可以与其他线程并发运行。
- 主线程:每个 Python 程序都有一个默认的主线程,程序从主线程开始运行。
- 守护线程:守护线程在主线程结束时会自动退出,不会阻止程序终止。
Thread 类
用于创建和管理线程。
创建一个线程
语法:
threading.Thread(target, args=(), kwargs={}, daemon=None)
target
: 线程执行的目标函数。args
: 传递给目标函数的参数(元组)。kwargs
: 传递给目标函数的关键字参数(字典)。daemon
: 设置为守护线程(布尔值)。name
: 设置线程名称。
示例:
import threading
def print_numbers(max_num):
print(f"线程名称:{threading.current_thread().name}")
for i in range(1, max_num):
print(i)
def print_letters():
print(f"线程名称:{threading.current_thread().name}")
for letter in 'ABCDE':
print(letter)
# 创建线程
# thread1 = threading.Thread(target=print_numbers, args=(6,))
thread1 = threading.Thread(target=print_numbers, kwargs={'max_num': 6})
thread2 = threading.Thread(target=print_letters)
# 启动线程
thread1.start()
thread2.start()
# 修改线程名称
# thread2.name = "CustomThread2"
# 等待所有线程完成
thread1.join()
thread2.join()
print("所有线程执行完成")
start()
: 启动线程并调用run()
方法。run()
: 线程执行的代码,可以重写。join(timeout=None)
: 阻塞主线程,直到调用join
的线程结束或超时。
线程之间是共享全局变量的
import threading
list1 = []
def add_data():
for i in range(3):
list1.append(i)
print(f"添加数据:{i}")
def read_data():
print(f"获取数据:{list1}")
thread1 = threading.Thread(target=add_data)
thread2 = threading.Thread(target=read_data)
thread1.start()
thread2.start()
线程互斥 Lock
线程共享数据会造成数据安全性问题。使用互斥锁解决。
Lock 类:用于线程同步,防止多个线程同时访问共享资源。
lock常用函数:
acquire(blocking=True, timeout=-1)
: 请求锁(加锁)。release()
: 释放锁。
import threading
# 多个线程对全局变量进行自增
g_num = 0
# 创建一把互斥锁
lock = threading.Lock()
def task():
global g_num
# 对修改共享变量的代码进行加锁
lock.acquire() # 加锁
for i in range(1000000):
g_num += 1
print(f"task {g_num}, 线程名称-{threading.current_thread().name}")
# 共享变量操作完成后释放锁
lock.release() # 释放锁
thread1 = threading.Thread(target=task)
thread2 = threading.Thread(target=task)
thread1.start()
# thread1.join()
thread2.start()
进程
一个正在运行的程序就是一个进程,它是资源分配和执行的基本单位,每个进程有自己独立的内存空间、系统资源和执行线程。
注意:一个程序运行后至少有一个进程,一个进程默认有一个线程,进程里面可以创建多个线程,线程是依附在进程里面的,没有进程就没有线程。
python对进程的操作
在 Python 中,可以使用
multiprocessing
模块来创建和管理进程。multiprocessing
模块允许你在多个处理器上运行任务,从而提高程序的性能。
Process 类
用于创建和管理进程。
创建一个进程
语法:
multiprocessing.Process(target, args, kwargs, name, daemon)
target
: 进程执行的目标函数。args
: 传递给目标函数的参数(元组)。kwargs
: 传递给目标函数的关键字参数(字典)。daemon
: 设置为守护进程(布尔值)。name
: 设置进程名称。
multiprocessing.Process的常用方法
start()
:启动进程并执行target
函数。join(timeout=None)
:等待进程终止,可选超时时间。is_alive()
:返回进程是否正在运行。terminate()
:立即终止进程。
示例:
import multiprocessing
def department(num, name):
print(f'员工 {num}, Name: {name}')
if __name__ == '__main__':
p = multiprocessing.Process(target=department, args=(5,), kwargs={'name': 'IT部门'})
p.start()
示例:获取进程名称和进程ID
import multiprocessing
import os
import time
def department(num, name):
print(f'员工 {num}, Name: {name}')
print(f"获取进程名称: {multiprocessing.current_process().name}")
print(f"获取当前进程 ID: {os.getpid()}")
print(f"获取父进程 ID: {os.getppid()}")
while True:
time.sleep(30)
if __name__ == '__main__':
p = multiprocessing.Process(target=department, args=(5,), kwargs={'name': 'IT部门'})
p.start()
print(f"获取Main进程名称: {multiprocessing.current_process().name}")
print(f"获取Main进程 ID: {os.getpid()}")
print(f"获取Main父进程 ID: {os.getppid()}")
示例:杀死进程
import multiprocessing
import os
import time
def department(num, name):
print(f'员工 {num}, Name: {name}')
process_pid = os.getpid()
print(f"获取当前进程 ID: {process_pid}")
# 杀死进程,类似linux中的 kill -9 pid
os.kill(process_pid, 9)
while True:
time.sleep(30)
if __name__ == '__main__':
p = multiprocessing.Process(target=department, args=(5,), kwargs={'name': 'IT部门'})
p.start()
注意:
- 进程之间不共享全局变量。
- 主进程会等待所有的子进程执行结束后再结束。
- 进程内的异常无法通过
try-except
捕获到,需要使用multiprocessing.Process
的Process
对象的join()
方法来获取异常
进程之间共享数据
multiprocessing.Queue()
import multiprocessing
# 生产者
def producer(queue):
for i in range(5):
queue.put(i)
# 消费者
def consumer(queue):
while True:
item = queue.get()
if item is None: # 消费者退出循环条件
break
print(f"Got item: {item}")
if __name__ == '__main__':
queue = multiprocessing.Queue()
p1 = multiprocessing.Process(target=producer, args=(queue,))
p2 = multiprocessing.Process(target=consumer, args=(queue,))
p1.start()
p2.start()
p1.join()
queue.put(None) # 设置消费者退出循环条件
p2.join()
进程互斥 Lock
import multiprocessing
import time
# 多个进程调用这个函数,对共享变量数据进行操作
def worker(lock, shared_value):
for _ in range(10):
# 获取锁, with 上下文写法,会自动释放锁资源
with lock:
# 临界区开始-锁开始
temp = shared_value.value
time.sleep(0.1) # 模拟一些计算或操作
shared_value.value = temp + 1
# 临界区结束-锁结束
if __name__ == "__main__":
# 创建一把锁
lock = multiprocessing.Lock()
# 共享的整数变量,初始值为0
shared_value = multiprocessing.Value('i', 0)
processes = []
# 创建多个进程
for _ in range(5):
p = multiprocessing.Process(target=worker, args=(lock, shared_value))
processes.append(p)
p.start()
# 等待所有进程完成
for p in processes:
p.join()
print(f"最终的 shared_counter 值: {shared_value.value}")
版权声明:本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:jacktools123@163.com进行投诉反馈,一经查实,立即删除!
标签:
相关文章
最新发布
- 【Python】selenium安装+Microsoft Edge驱动器下载配置流程
- Python 中自动打开网页并点击[自动化脚本],Selenium
- Anaconda基础使用
- 【Python】成功解决 TypeError: ‘<‘ not supported between instances of ‘str’ and ‘int’
- manim边学边做--三维的点和线
- CPython是最常用的Python解释器之一,也是Python官方实现。它是用C语言编写的,旨在提供一个高效且易于使用的Python解释器。
- Anaconda安装配置Jupyter(2024最新版)
- Python中读取Excel最快的几种方法!
- Python某城市美食商家爬虫数据可视化分析和推荐查询系统毕业设计论文开题报告
- 如何使用 Python 批量检测和转换 JSONL 文件编码为 UTF-8
点击排行
- 版本匹配指南:Numpy版本和Python版本的对应关系
- 版本匹配指南:PyTorch版本、torchvision 版本和Python版本的对应关系
- Python 可视化 web 神器:streamlit、Gradio、dash、nicegui;低代码 Python Web 框架:PyWebIO
- 相关性分析——Pearson相关系数+热力图(附data和Python完整代码)
- Python与PyTorch的版本对应
- Anaconda版本和Python版本对应关系(持续更新...)
- Python pyinstaller打包exe最完整教程
- Could not build wheels for llama-cpp-python, which is required to install pyproject.toml-based proj