首页 / PYTHON / python 模块 chardet下载及介绍

python 模块 chardet下载及介绍

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了python 模块 chardet下载及介绍，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1162字，纯文字阅读大概需要2分钟。

内容图文

在处理字符串时，常常会遇到不知道字符串是何种编码，如果不知道字符串的编码就不能将字符串转换成需要的编码。面对多种不同编码的输入方式，是否会有一种有效的编码方式？chardet是一个非常优秀的编码识别模块。
chardet 是python的第三方库，需要下载和安装。下载的地址有：
 
如果采用源代码安装方法，有可能会提示缺少setuptools这个模块。因此这里我们采用另外一种更为方便的安装方法，不论你选择哪种安装包，将它解压得到其中的文件夹【chardet】将这个文件夹复制到【python安装根目录\Lib\site-packages】下，确保这个位置可以被python引用到。如果不能被引用到请加入环境变量。
 
在安装完chardet模块，我就可以使用它了，来看一段示例代码。 
import chardet  
import urllib  
  
#可根据需要，选择不同的数据  
TestData = urllib.urlopen(‘http://www.baidu.com/‘).read()  
print chardet.detect(TestData)  
  
运行结果：  
{‘confidence‘: 0.99, ‘encoding‘: ‘GB2312‘}  　
运行结果表示有99%的概率认为这段代码是GB2312编码方式。
 
另外一个相对高级的应用。
import urllib  
from chardet.universaldetector import UniversalDetector  
usock = urllib.urlopen(‘http://www.baidu.com/‘)  
#创建一个检测对象  
detector = UniversalDetector()  
for line in usock.readlines():  
    #分块进行测试，直到达到阈值      detector.feed(line)  
    if detector.done: break#关闭检测对象  detector.close()  
usock.close()  
#输出检测结果  print detector.result  
  
运行结果：  
{‘confidence‘: 0.99, ‘encoding‘: ‘GB2312‘}

应用背景，如果要对一个大文件进行编码识别，使用这种高级的方法，可以只读一部，去判别编码方式从而提高检测速度。

原文：http://www.cnblogs.com/zhaobang/p/7402388.html

内容总结

以上是互联网集市为您收集整理的python 模块 chardet下载及介绍全部内容，希望文章能够帮你解决python 模块 chardet下载及介绍所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1173130.html

来源：【匿名】