生成项目scrapy提供一个工具来生成项目，生成的项目中预置了一些文件，用户需要在这些文件中添加自己的代码。打开命令行，执行：scrapy startproject tutorial，生成的项目类似下面的结构tutorial/ scrapy.cfg tutorial/ __init__.py items.py pipelines.py settings.py spiders/ __init__.py ...scrapy.cfg是项目的配置文件用户自己写的spider要放在spiders目录下面，一个...
字典是python中唯一内建的映射类型。字典中的值并没有特殊的顺序，但是都存储在一个特定的键（key）里。键可以是数字，字符串甚至是元组。1. 创建和使用字典字典可以通过下面的方式创建： 代码如下:phonebook = {Alice:2341,Beth:9102,Ceil:3258}字典由多个键及与其对应的值构成的对组成。每个键和它的值之间用冒号（:）隔开，项之间用逗号（,）隔开，而整个字典是由一对大括号括起来。空字典：{}1.1 dict函数可以用dict函数通过映...
一、python中对文件、文件夹操作时经常用到的os模块和shutil模块常用方法。1.得到当前工作目录，即当前Python脚本工作的目录路径: os.getcwd()2.返回指定目录下的所有文件和目录名:os.listdir()3.函数用来删除一个文件:os.remove()4.删除多个目录：os.removedirs(r"c：\python")5.检验给出的路径是否是一个文件：os.path.isfile()6.检验给出的路径是否是一个目录：os.path.isdir()7.判断是否是绝对路径：os.path.isabs()8.检验给出...
一、什么是异常？异常即是一个事件，该事件会在程序执行过程中发生，影响了程序的正常执行。一般情况下，在Python无法正常处理程序时就会发生一个异常。异常是Python对象，表示一个错误。当Python脚本发生异常时我们需要捕获处理它，否则程序会终止执行。二、异常处理捕捉异常可以使用try/except语句。try/except语句用来检测try语句块中的错误，从而让except语句捕获异常信息并处理。如果你不想在异常发生时结束你的程序，只需在t...
本文讲述了Python文件操作类的操作实例，详细代码如下：#!/usr/bin/env python #!/usr/bin/env python #coding:utf-8 # Purpose: 文件操作类#声明一个字符串文本 poem= Programming is fun测试 When the work is done if you wanna make your work also fun: use Python! #创建一个file类的实例，模式可以为：只读模式(r)、写模式(w)、追加模式(a) f=file(poem.txt,a) #open for writing f.write(poem) #写入文本到文件...
通常在我们进行多进程应用开发的过程中，不可避免的会遇到多个进程访问同一个资源（临界资源）的状况，这时候必须通过加一个全局性的锁，来实现资源的同步访问（即：同一时间里只能有一个进程访问资源）。 举个例子如下： 假设我们用mysql来实现一个任务队列，实现的过程如下： 1. 在Mysql中创建Job表，用于储存队列任务，如下：create table jobs(id auto_increment not null primary key,message text not null,job_status not n...
一般来说闭包这个概念在很多语言中都有涉及，本文主要谈谈python中的闭包定义及相关用法。Python中使用闭包主要是在进行函数式开发时使用。详情分析如下： 一、定义 python中的闭包从表现形式上定义（解释）为：如果在一个内部函数里，对在外部作用域（但不是在全局作用域）的变量进行引用，那么内部函数就被认为是闭包(closure).这个定义是相对直白的，好理解的，不像其他定义那样学究味道十足（那些学究味道重的解释，在对一个名...
本文详细讲述了python的内嵌time模块的用法。分享给大家供大家参考之用。具体分析如下： 一、简介 time模块提供各种操作时间的函数 说明：一般有两种表示时间的方式: 第一种是时间戳的方式(相对于1970.1.1 00:00:00以秒计算的偏移量),时间戳是惟一的 第二种以数组的形式表示即(struct_time),共有九个元素，分别表示，同一个时间戳的struct_time会因为时区不同而不同 year (four digits, e.g. 1998) month (1-12) day (1-31) hours ...
本文实例讲述了python中urllib模块用法。分享给大家供大家参考。具体分析如下： 一、问题： 近期公司项目的需求是根据客户提供的api，我们定时去获取数据， 之前的方案是用php收集任务存入到redis队列，然后在linux下做一个常驻进程跑某一个php文件， 该php文件就一个无限循环，判断redis队列，有就执行，没有就break. 二、解决方法： 最近刚好学了一下python, python的urllib模块或许比php的curl更快，而且简单. 贴一下代码代码如...
实例的背景说明 假定一个个人信息系统，需要记录系统中各个人的故乡、居住地、以及到过的城市。数据库设计如下：Models.py 内容如下：from django.db import modelsclass Province(models.Model):name = models.CharField(max_length=10)def __unicode__(self):return self.nameclass City(models.Model):name = models.CharField(max_length=5)province = models.ForeignKey(Province)def __unicode__(self):return self.nameclas...
本文实例讲述了Python中类的定义、继承及使用对象的方法。分享给大家供大家参考。具体分析如下： Python编程中类的概念可以比作是某种类型集合的描述，如“人类”可以被看作一个类，然后用人类这个类定义出每个具体的人——你、我、他等作为其对象。类还拥有属性和功能，属性即类本身的一些特性，如人类有名字、身高和体重等属性，而具体值则会根据每个人的不同；功能则是类所能实现的行为，如人类拥有吃饭、走路和睡觉等功能。具体...
本文实例讲述了python中的闭包用法。分享给大家供大家参考。具体分析如下： 什么是闭包? 简单说,闭包就是根据不同的配置信息得到不同的结果 再来看看专业的解释:闭包（Closure）是词法闭包（Lexical Closure）的简称，是引用了自由变量的函数。这个被引用的自由变量将和这个函数一同存在，即使已经离开了创造它的环境也不例外。所以，有另一种说法认为闭包是由函数和与其相关的引用环境组合而成的实体。 python实例： 看概念总是让...
本文实例讲述了python单元测试unittest用法。分享给大家供大家参考。具体分析如下： 单元测试作为任何语言的开发者都应该是必要的，因为时隔数月后再回来调试自己的复杂程序时，其实也是很崩溃的事情。虽然会很快熟悉内容，但是修改和调试将是一件痛苦的事情，如果你在修改了代码后出现问题的话，而单元测试可以帮助我们很快准确的定位到问题的位置，出现问题的模块和单元。所以这是一件很愉快的事情，因为我们知道其它修改或没有修...
本文实例讲述了Python编程中属性和方法使用技巧。分享给大家供大家参考。具体分析如下： 一、属性在python中，属性分为公有属性和私有属性，公有属性可以在类的外部调用，私有属性不能在类的外部调用。公有属性可以是任意变量，私有属性是以双下划线开头的变量。 下面我们定义一个People类，它有一个公有属性name,和一个私有属性__age。class People(): def __init(self): self.name=张珊 self.__age=24我们创建一个People类的实例...
本文实例分析了python字典排序的方法。分享给大家供大家参考。具体如下： 1、 准备知识： 在python里，字典dictionary是内置的数据类型，是个无序的存储结构，每一元素是key-value对： 如：dict = {username：password，database：master}，其中username和database是key，而password和master是value，可以通过d[key]获得对应值value的引用，但是不能通过value得到key。 对于dictionnary，需知道以下几点注意事项： a、 dictionary ...