上一篇文章，我们详细介绍了http请求的常用方法以及细节，大家可以点击：https://blog.51cto.com/u_13025170/2961690进行观看，这一篇文章让你对整个http请求有更详细的认识，两篇结合看，掌握自动化和爬虫不再是难事话不多说，我们直奔主题，上代码一、post请求及响应详解# -*- coding: utf-8 -*- #引入requests库 import requests#设置函数，抿成send_requests def send_requests():#请求地址url = ‘http://httpbin.org/post‘#...
os.path模块主要用于文件的属性获取，在编程中经常用到，以下是该模块的几种常用方法。更多的方法可以去查看官方文档：http://docs.python.org/library/os.path.html1.os.path.abspath(path)返回path规范化的绝对路径。 >>> os.path.abspath(‘test.csv‘) ‘C:\\Python25\\test.csv‘>>> os.path.abspath(‘c:\\test.csv‘) ‘c:\\test.csv‘>>> os.path.abspath(‘../csv\\test.csv‘) ‘C:\\csv\\test.csv‘2.os.path.split(pa...
今天跟大家分享下selenium中根据父子、兄弟、相邻节点定位的方法，很多人在实际应用中会遇到想定位的节点无法直接定位，需要通过附近节点来相对定位的问题，但从父节点定位子节点容易，从子节点定位父节点、定位一个节点的哥哥节点就一筹莫展了，别急，且看博主一步步讲解。1. 由父节点定位子节点最简单的肯定就是由父节点定位子节点了，我们有很多方法可以定位，下面上个例子：对以下代码：<html> <body> <div id="A"><!--父节点定...
最近在学习python网络编程这一块，在写简单的socket通信代码时，遇到了struct这个模块的使用，当时不太清楚这到底有和作用，后来查阅了相关资料大概了解了，在这里做一下简单的总结。 了解c语言的人，一定会知道struct结构体在c语言中的作用，它定义了一种结构，里面包含不同类型的数据(int,char,bool等等)，方便对某一结构对象进行处理。而在网络通信当中，大多传递的数据是以二进制流（binary data）存在的。当传递字符串时，...
选择了脚本语言就要忍受其速度，这句话在某种程度上说明了 python 作为脚本的一个不足之处，那就是执行效率和性能不够理想，特别是在 performance 较差的机器上，因此有必要进行一定的代码优化来提高程序的执行效率。如何进行 Python 性能优化，是本文探讨的主要问题。本文会涉及常见的代码优化方法，性能优化工具的使用以及如何诊断代码的性能瓶颈等内容，希望可以给 Python 开发人员一定的参考。 代码优化能够让程序运行更快，...
urllib2是Python的一个获取URLs(Uniform Resource Locators)的组件。他以urlopen函数的形式提供了一个非常简单的接口，这是具有利用不同协议获取URLs的能力，他同样提供了一个比较复杂的接口来处理一般情况，例如：基础验证，cookies,代理和其他。它们通过handlers和openers的对象提供。urllib2支持获取不同格式的URLs(在URL的":"前定义的字串,例如："ftp"是"ftp:python.ort/"的前缀),它们利用它们相关网络协议(例如FTP,HTTP)进行获...
方法说明requests库的7个主要方法方法说明说明requests.request()构造一个请求，支撑以下各方法的基础方法 requests.get(url, params=None, **kwargs)获取HTML网页的主要方法，对应于HTTP的GET. params : url中的额外参数，字典或字节流格式，可选? **kwargs: 12个控制访问的参数requests.head()获取HTML网页头信息的方法，对应于HTTP的HEAD requests.post()向HTML网页提交POST请求的方法，对应于HTTP的POST requests.put()向HTML网...
列表(list)：python五大数据类型之一,可变类型列表的定义：列表一般是以[]定义的,[]里面是列表存储的数据,列表里面可以包含其他数据类型,也能包含列表本身 In [24]: L1 = [‘a‘,‘b‘,‘c‘,1,2,3] In [24]: L2 = [[1, 2, 3,],[‘a‘, ‘b‘, ‘c‘]]python的列表是有序列表,以索引表示数据所在位置 例： In [24]: L1 = [‘a‘,‘b‘,‘c‘,1,2,3] In [26]: L1[0] Out[26]: ‘a‘ ...
Python open函数的模式详解在Python中使用open()函数打开文件，并返回一个文件对象，然后通过文件对象对文件进行读写操作。不同类型的文件需要采用不同的模式来打开，并且采用不同模式打开文件，我们可以进行的操作以及程序运行的结果也是不同的。打开模式open()函数完整的语法格式为：open(file, mode=‘r’, buffering=None, encoding=None, errors=None, newline=None, closefd=True)函数定义的参数挺多，这里我们着重讲解mode—...
先来介绍一把最基本的用法import argparseparser = argparse.ArgumentParser() parser.parse_args()在执行 parse_args() 之前，所有追加到命令行的参数都不会生效，生效了之后的默认情况类似于这样： Reference:https://www.jianshu.com/p/fef2d215b91d python argparse用法总结原文：https://www.cnblogs.com/piperck/p/8446580.html
原文地址https://www.cnblogs.com/zhaof/p/7183220.html这篇文章主要是对的scrapy命令行使用的一个介绍创建爬虫项目scrapy startproject 项目名例子如下：localhost:spider zhaofan$ scrapy startproject test1 New Scrapy project ‘test1‘, using template directory ‘/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/site-packages/scrapy/templates/project‘, created in:/Users/zhaofan/Documents/pytho...
os.sep:取代操作系统特定的路径分隔符 os.name:指示你正在使用的工作平台。比如对于Windows，它是‘nt‘，而对于Linux/Unix用户，它是‘posix‘。 os.getcwd:得到当前工作目录，即当前python脚本工作的目录路径。 os.getenv()和os.putenv:分别用来读取和设置环境变量 os.listdir():返回指定目录下的所有文件和目录名 os.remove(file):删除一个文件 os.stat（file）:获得文件属性 os.chmod(file):修改文件权限和时间戳 os.mkdir(nam...
基础知识实际上，“运算符重载”只是意味着在类方法中拦截内置的操作……当类的实例出现在内置操作中，Python自动调用你的方法，并且你的方法的返回值变成了相应操作的结果。以下是对重载的关键概念的复习：运算符重载让类拦截常规的Python运算。类可重载所有Python表达式运算符类可以重载打印、函数调用、属性点号运算等内置运算重载使类实例的行为像内置类型。重载是通过特殊名称的类方法来实现的。换句话说，当类中提供了某个特...
如果你听说过“测试驱动开发”（TDD：Test-Driven Development），单元测试就不陌生。单元测试是用来对一个模块、一个函数或者一个类来进行正确性检验的测试工作。比如对函数abs()，我们可以编写出以下几个测试用例： 输入正数，比如1、1.2、0.99，期待返回值与输入相同； 输入负数，比如-1、-1.2、-0.99，期待返回值与输入相反； 输入0，期待返回0； 输入非数值类型，比如None、[]、{}，期待抛出TypeError。把上面的测...
二、应用实例解析2.1 subprocess模块的使用1. subprocess.call>>> subprocess.call(["ls", "-l"]) 0 >>> subprocess.call("exit 1", shell=True) 1 2. 调用系统中cmd命令,显示命令执行的结果: x=subprocess.check_output(["echo", "Hello World!"],shell=True) print(x) "Hello World!" 3. 在python中显示文件内容: y=subprocess.check_output(["type", "app2.cpp"],shell=True) print(y) #include using namespac...