No.1 线程 什么是多任务 就是操作系统可以同时运行多个任务，就是可以一边用浏览器上网，同时又可以听歌，还能再撩个姐，这就是多任务，操作系统会轮流把系统调度到每个核心上去执行 并发和并行 并发是指任务数多余cpu核数，通过操作系统的各种任务调度算法，实现多个任务 并行是指任务数小于cpu核数，即任务同时执行 单线程 import timedef say_hello(i):print('hello ', i)if __name__ == '__main__':for i in range(5):say_hell...
Server.pyimport socketsk = socket.socket() sk.bind(('127.0.0.1',8080)) sk.setblocking(False) #设为非阻塞IO sk.listen() conn_l = [] del_conn = [] while True:try:conn,addr = sk.accept() #不阻塞,但没人连我会报错print('连接建立了',addr)conn_l.append(conn)except BlockingIOError:for con in conn_l:try:msg = con.recv(1024) #不阻塞,但是没有消息会报错if msg == b'': #如果msg为空, 把相应的连接加入del_conn,然...
一、threading 模块 multiprocess模块的完全模仿了threading模块的接口，二者在使用层面，有很大的相似性 二、开启线程的两种方式 from threading import Thread import time def hello(name):time.sleep(2)print(%s say hello %name)if __name__ == __main__:t=Thread(target=hello,args=(xiaomao,))t.start()print(主线程)方式一 from threading import Thread import time class Hello(Thread):def __init__(self,name):super()...
一，池：concurrent 并发编程中，池的概念concurrent.futures中的进程池 和 线程池：1.实例化线程池 ThreadPoolExcutor 一般线程池内线程数为5*cpu核心数实例化进程池 ProcessPoolExcutor 一般进程池内进程数为cpu核心数的1倍或2倍2.异步提交任务 submit/map 对应进程池Pool：apply，apply_async3.阻塞直到任务完成 shutdown 对应进程池Pool：close：关闭进程池，不能再提交任务，join：阻塞直到...
运行中的程序就是一个进程。所有的进程都是通过它的父进程来创建的。因此，运行起来的python程序也是一个进程，那么我们也可以在程序中再创建进程。多个进程可以实现并发效果。 1.multiprocessing模块介绍 python中的多线程无法利用多核优势，如果想要充分地使用多核CPU的资源（os.cpu_count()查看），在python中大部分情况需要使用多进程。Python提供了multiprocessing。 multiprocessing模块用来开启子进程，并在子进程中执行我...
十二.生产者消费者模型 1.什么是生产者消费者模型 生产者 : 程序中负责产生数据的一方消费者 : 程序中负责处理数据的一方 2.为什么引入生产者消费者模型 在并发编程中, 生产者消费者模式通过一个容器来解决生产者和消费者之间的强耦合性, 两者之间不再是直接通信, 而是通过堵塞队列来进行通信, 生产者(生产速度快)不必再等待消费者是否处理完数据, 消费者直接从队列中取, 该队列就相当于一个缓冲区, 平衡了生产者和消费者的工作能力...
一 multiprocessing模块介绍 python中的多线程无法利用多核优势，如果想要充分地使用多核CPU的资源，在python中大部分情况需要使用多进程。Python提供了multiprocessing。 multiprocessing模块用来开启子进程，并在子进程中执行我们定制的任务（比如函数），multiprocessing模块的功能众多：支持子进程、通信和共享数据、执行不同形式的同步，提供了Process、Queue、Pipe、Lock等组件。 二 Process类的介绍与使用 通过创建一个 Pro...
目录一、进程的概念及定义1.1 进程的定义 一、进程的概念及定义 进程的概念起源于操作系统，是操作系统最核心的概念，也是操作系统提供的最古老也是最重要的抽象概念之一。操作系统的其他所有内容都是围绕进程的概念展开的。 **相关概念 #一 操作系统的作用：1：隐藏丑陋复杂的硬件接口，提供良好的抽象接口2：管理、调度进程，并且将多个进程对硬件的竞争变得有序#二 多道技术：1.产生背景：针对单核，实现并发ps：现在的主机一般...
1、进程池的作用进程池来控制进程数目，比如httpd的进程模式，规定最小进程数和最大进程数 2、创建进程池的类Pool 如果指定numprocess为3，则进程池会从无到有创建三个进程，然后自始至终使用这三个进程去执行所有任务，不会开启其他进程Pool([numprocess [,initializer [, initargs]]]):创建进程池 参数介绍：numprocess:要创建的进程数，如果省略，将默认使用cpu_count()的值 initializer：是每个工作进程启动时要执行的可调...
day31 一丶进程基础知识 什么是程序:程序就是一堆文件 什么是进程:进程就是一个正在执行的文件/程序,是对各种资源管理的集合,进程不具有执行的能力 每个应用是以一个整体的形式暴露给操作系统去管理,里面包含对各种资源的调用,内存的管理,网络接口的调用等等 进程被谁执行:CPU最终运行你的程序,操作系统调用作用,将磁盘上的程序读取到内存中,然后交由CPU处理CPU正在运行的一个程序,即:开启了一个进程 二丶操作系统 定义: 操作系统是...
1.多进程的第二种启动方式import os from multiprocessing import Process # 创建一个自定义类，继承Process类 class MyProcess(Process):# 必须实现一个run方法，run方法中是子进程中执行的代码def run(self):print(子进程：,os.getpid())if __name__ == __main__:print(主进程,os.getpid())p1 = MyProcess()p1.start()p2 = MyProcess()p2.start()结果： 2.进程号和进程名import os from multiprocessing import Processclas...
目录 Python并发编程03/僵尸孤儿进程,互斥锁,进程之间的通信 1.昨日回顾 2.僵尸进程和孤儿进程 2.1僵尸进程 2.2孤儿进程 2.3僵尸进程如何解决?3.互斥锁,锁 3.1互斥锁的应用 3.2Lock与join的区别4.进程之间的通信 进程在内存级别是隔离的 4.1基于文件通信 (抢票系统) 4.2基于队列通信Python并发编程03/僵尸孤儿进程,互斥锁,进程之间的通信 1.昨日回顾 1.创建进程的两种方式: 函数, 类. 2.pid: os.getpid() os.getppid()tasklist ta...
目录 python并发编程02/多进程 1.进程创建的两种方式 1.1开启进程的第一种方式 1.2开启进程的第二种方式 1.3简单应用2.进程pid 2.1命令行获取所有的进程的pid tasklist 2.2代码级别如何获取一个进程的pid 2.3获取父进程(主进程)的pid3.验证进程之间的空间隔离 4.进程对象join方法 5.进程对象其他属性 6.守护进程python并发编程02/多进程 1.进程创建的两种方式 1.1开启进程的第一种方式 from multiProcessing import Process import...
一.更新版进程池与进程池比较 from concurrent.futures import ProcessPoolExecutor, ThreadPoolExecutor import os, timedef func(i):print(Process, i, os.getpid())time.sleep(0.1)print("Process..end")return 88899 # (1)ProcessPoolExcutor 进程池的基本使用(改良版) 相对于旧版的进程池, 一定会等待子进程全部执行完毕之后,再终止程序,相当于过去的Process流程 shutdown 相当于Process里面的join if __name__ == "__mai...
多进程VS多线程GIL锁. GIL锁: 全局解释器锁. 就是一个加在解释器上的互斥锁,将并发变成串行,同一时刻只能有一个线程使用共享资源,牺牲效率,保证数据安全. 在了解GIL锁之前,我们先来了解一下,代码运行的时候发生了什么? 我们在运行一段代码,不仅需要将代码加载到内存,还需要将解释器加载到内存,我们以Cpython解释器来举例,解释器先将你的py文件翻译成C语言的字节码,然后交由虚拟机,虚拟机再将其翻译成计算机能理解的机器码,再交给CP...