queue介绍queue是python的标准库，俗称队列.可以直接import引用,在python2.x中,模块名为Queue。python3直接queue即可在python中，多个线程之间的数据是共享的，多个线程进行数据交换的时候，不能够保证数据的安全性和一致性，所以当多个线程需要进行数据交换的时候，队列就出现了，队列可以完美解决线程间的数据交换，保证线程间数据的安全性和一致性。#多线程实战栗子（糗百）
#用一个队列Queue对象，
#先产生所有url，put进队列；...
前言当小伙伴a在往火锅里面添加鱼丸，这个就是生产者行为；另外一个小伙伴b在吃掉鱼丸就是消费者行为。当火锅里面鱼丸达到一定数量加满后b才能吃，这就是一种条件判断了。
这就是本篇要讲的Condition（条件变量）ConditionCondition（条件变量）通常与一个锁关联。需要在多个Contidion中共享一个锁时，可以传递一个Lock/RLock实例给构造方法，否则它将自己生成一个RLock实例。可以认为，除了Lock带有的锁定池外，Condition还包含一...
Python中的threading模块提供了对用线程的相关操作，线程是应用程序中工作的最小单元。1.Thread类Thread是线程类，有两种使用方法，从Thread类继承并覆盖run方法，或者直接传入要运行的方法。 1 # -*- coding:utf-8 -*-2 3import threading4import time5 6def func():7 time.sleep(2)8 print("func")910def main():
11 t = threading.Thread(target=func) # 将要执行的方法作为参数传递给Thread类的构造方法
12 t....
import time
from threading import Threaddef sleep_task(sleep_time): # 定义单线程函数，用于多线程中执行print("sleep {} seconds start!".format(sleep_time))time.sleep(sleep_time)print("sleep {} seconds end!".format(sleep_time))if__name__ == "__main__":start_time = time.time()t1 = Thread(target=sleep_task, args=(2,)) # 创建线程对象，调用函数，并传入参数t1.setDaemon(True) # 开启守护线程，当主线程结束...
一、小知识点（作用域） 进入主题之前先分享一个有关某公司一道python自动化的面试题：首先说一下作用域的关系，如以下案例：if 1==1:name="tom"print(name)看以上代码你觉得会打印出来"tom"吗？答案是：会的。这个地方需要了解的是，在Java、c#是有块级作用域的，不会打印出来。在python中无块级作用域可以会被执行既然已经了解python中无块级作用域，就要了解变量执行的优先级，先从自己本身作用域找，找不到往上一级找，以此类推...
mutex = threading.Lock() mutex.acquire()--锁住mutex.release() --解锁 # coding:utf-8import threading
import time
mutex = threading.Lock()
def write(scan_type, host, port, info):mutex.acquire()port = int(port)try:time_str = time.strftime(‘%X‘, time.localtime(time.time()))if scan_type == ‘portscan‘:print"[%s] %s:%d open" % (time_str, host, port)elif scan_type == ‘server‘:print"[%s] %s:%d is %...
?? 引言/动机?? 线程和进程?? 线程和 Python?? thread 模块?? threading 模块?? 生产者-消费者问题和 Queue 模块?? 相关模块18.1 引言/动机 18.2 线程和进程什么是进程？ 计算机程序只不过是磁盘中可执行的，二进制（或其它类型）的数据。它们只有在被读取到内 存中，被操作系统调用的时候才开始它们的生命期。进程（有时被称为重量级进程）是程序的一次 执行。每个进程都有自己的地址空间，内存，数据栈以及其它记...
一.重写父类方法、经典类和新式类在python2中的区别：#两种情况：
#1.父类的方法子类中完全不需要，子类重新写
#2.父类有这个方法，但功能不够完善，子类想要在父类这个方法的基础上再添加一些新功能class ZLL():def smile(self):print(‘哈哈哈‘)class Xz(ZLL): #继承这个父类def smile(self): #重写父类的方法 #如果想要在子类中执行父类的smile方法# ZLL().smile() #调用父类 ，注意ZLL后面有（），因为调用的是实...
No1：多进程from multiprocessing import Process
import os# 子进程要执行的代码def run_proc(name):print(‘Run child process %s (%s)...‘ % (name, os.getpid()))if__name__==‘__main__‘:print(‘Parent process %s.‘ % os.getpid())p = Process(target=run_proc, args=(‘test‘,))print(‘Child process will start.‘)p.start()p.join()print(‘Child process end.‘)运行结果创建一个Process实例，用start()方法启动，...
Python多线程与多进程中join()方法的效果是相同的。下面仅以多线程为例：首先需要明确几个概念：知识点一：当一个进程启动之后，会默认产生一个主线程，因为线程是程序执行流的最小单元，当设置多线程时，主线程会创建多个子线程，在python中，默认情况下（其实就是setDaemon(False)），主线程执行完自己的任务以后，就退出了，此时子线程会继续执行自己的任务，直到自己的任务结束，例子见下面一。知识点二：当我们使用setDaemon(...
本文转载地址: http://cenalulu.github.io/python/gil-in-python/GIL是什么首先需要明确的一点是GIL并不是Python的特性，它是在实现Python解析器(CPython)时所引入的一个概念。就好比C++是一套语言（语法）标准，但是可以用不同的编译器来编译成可执行代码。有名的编译器例如GCC，INTEL C++，Visual C++等。Python也一样，同样一段代码可以通过CPython，PyPy，Psyco等不同的Python执行环境来执行。像其中的JPython 就没有GIL。然而...
例一：不使用多线程#-*-coding:utf-8-*-
#compare for multi threadsafety
import timedef worker():print "worker"time.sleep(1)returnif __name__=="__main__":for i in xrange(5):worker()例二：使用多线程#-*-coding:utf-8-*-
import threading
import timedef worker():print "worker"time.sleep(1)returnfor i in xrange(5):t=threading.Thread(target=worker)t.start()例三：返回线程和主线程#-*-coding:utf-8-*-
import th...
# Author: yeshengbao
# -- coding： utf-8 --
# @Time : 2018/5/24 21:38
＃ 进程:如一个人拥有分身(分数数最好为cpu核心数)几乎同时进行做工＃ 线程:如这个人正在烧开水，但同时又可以在烧水时间内去吃饭，和扫地，这时线程就会对其随机选择，可能还会出现地还没扫完，水就开了，但他还会扫地{这就可能出现数据丢失}。。＃ 协程：这个一个比线程更小的线程非常相似，但他在执行任务时，已经被规划好了，不会就行额外的...
1. GIL是什么？ 首先需要明确的一点是GIL并不是python的特性， 它是在实现python解析器(Cpython)时所引入的一个概念。而Cpython是大部分环境下默认的python执行环境，要明确一点：GIL并不是python的特性，python完全可以不依赖于GIL。2. 为什么会有GIL？ 为了更有效的利用多核处理器的性能，就出现了多线程的编程方式，而随之带来的就是线程间数据的一致性和状态同步的完整性（例如：线程2需要线程1执行完成的结果，然而线程...
python多线程爬虫一、进程与线程的定义进程：进程就是一个程序在一个数据集上的一次动态执行过程。进程一般由程序、数据集、进程控制块三部分组成。我们编写的程序用来描述进程要完成哪些功能以及如何完成；数据集则是程序在执行过程中所需要使用的资源；进程控制块用来记录进程的外部特征，描述进程的执行变化过程，系统可以利用它来控制和管理进程，它是系统感知进程存在的唯一标志。线程：线程也叫轻量级进程，它是一个基本的CP...
