python（数据分析与可视化）一 本地文件读写 1.读纯文本文件 重点： （1）相对路径 ： 同级./ 父级…/ （2）绝对路径 file = open('./chinase_utf8.txt',mode='r',encoding='utf-8') content = file.read() print(content) file.close()2.文本编码历史 print(‘中’.encode(encoding=‘gbk’)) -> b’\xd6\xd0’ gbk编码 ：一个汉字两个字节 为了节省流量 国内有人仍坚持gbk ‘中’.encode(encoding=‘utf-8’) 对于中文，gbk比utf...
08 数据采集：如何自动化采集数据？ 重点介绍爬虫做抓取 1.Python 爬虫 1）使用 Requests 爬取内容。我们可以使用 Requests 库来抓取网页信息。Requests 库可以说是 Python 爬虫的利器，也就是 Python 的 HTTP 库，通过这个库爬取网页中的数据，非常方便，可以帮我们节约大量的时间。 2）使用 XPath 解析内容。XPath 是 XML Path 的缩写，也就是 XML 路径语言。它是一种用来确定 XML 文档中某部分位置的语言，在开发中经常...
Ruby和Python同属于编程语言，这两大编程语言之间有很多相似之处，因此很多人在学习编程语言的时候经常会纠结选择Python还是Ruby，那么Ruby和Python哪个更强大?我们一起往下看。Python：Python采用的是直接编程方法，Python的核心理念包含三大关键原则：显式优于隐式、简单比复杂好、复合胜于复杂。正因为这三大原理，让Python更加易于学习和阅读，同时这也是Python受到编程初学者青睐的原因;Python在编程课程中占据十分重要的地位...
前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。 Python分析抖音用户行为数据视频讲解地址 https://www.bilibili.com/video/BV1yp4y1q7ZC/ 复制代码 随着短视频的APP兴起，在短视频社交市场，抖音短视频异常火爆表现突出，希望通过本次的分析，给到用户发布视频的几点建议。 数据分析 1 平台 日播放量，日用户量，日作者量，日作品量 日播放量，日用户量，日作者量，...
??这篇博文主要讲述主成分分析的原理并用该方法来实现MNIST数据集的降维。 一、引言 ??主成分分析是一种降维和主成分解释的方法。举一个比较容易理解的例子，如果将三维世界的可乐罐子踩一脚变成二维的，踩的过程就是降维。可以有很多种方法，比如将可乐罐子立起来从上向下踩，或者是将罐子平躺后再踩，甚至我们可以斜着踩或是选择不同的角度。那么如何踩这个可乐罐子可以保存更多的信息呢？显然不是竖着踩，而是平躺着踩下去才会保...
目录 1.读取数据 2.分析哪些类别的商品比较畅销 3.分析哪些商品比较畅销 4.分析不同门店的销售额占比 5.分析超市客流高分高峰时间段1.读取数据 数据存放在表格中，我们用pandas将其读出来 import?pandas?as?pd data=pd.read_csv('超市运营数据.csv',encoding='gbk',parse_dates=["成交时间"]) data2.分析哪些类别的商品比较畅销 首先将数据按照类别ID进行分组，然后对分组后的销量进行求和，最后用reset_index重置索引 data_group=...
切片cc=[1,2,3,4,5,6,7,8,9,10]，从这个列表中，获得[2,4,6,8,10]，并将其逆序输出cc=[1,2,3,4,5,6,7,8,9,10]a=cc[1:10:2]print(a[::-1])使用while或for 计算1~1000 奇数和 偶数和，并分别输出我的答案：i=1a=0s=0y=0while i<=1000:i=i+2使用while画以下图形 * ** *** **** ***** ?我的答案：i=0 j=0 while i<5: while j<i+1: print("*",end="") j=j+1 j=0 i=i+1 print()s=s+ia=a+2y=y+apr...
numpy矩阵操作[ 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 1819 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 3637 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 5455 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 7273 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 9091 92 93 94 95 96 97 98 99 ...
下载09-18年度数据.csv文件，放置.py作业目录，绘制09-18年的 国民总收入 条形图。注意年份顺序。 09-18年度数据.csv 注： 1、图中显示中文在import matplotlib.pyplot as plt 后加入 plt.rcParams[font.family] = [sans-serif] plt.rcParams[font.sans-serif] = [SimHei] 效果如下图所示 ?我的答案：import numpy as np import pandas as pd import matplotlib.pyplot as plt plt.rcParams[font.family] = [sans-serif] ...
通过读取数据covid_19_data.csv的，统计确诊、死亡、治愈人数，并绘制成饼图 covid_19_data.csv ?我的答案：import matplotlib.pyplot as plt import numpy as np import pandas as pd plt.rcParams[font.family] = [sans-serif] plt.rcParams[font.sans-serif] = [SimHei] date=pd.read_csv("D:\\Project\\covid_19_data.csv",usecols=(5,6,7),) val=date.values[0:,0] val2=date.values[0:,1] val3=date.values[0:,2] add=0 add...
根据颜色代码： https://m.wang1314.com/doc/webapp/topic/21084865.html 绘制多条线 y=sin（x）+1 y=sin（x）+2 y=sin（x）+3 ……y=sin（x）+7 ，每个颜色不同，点样式不同，线类型循环重复。 ‘.’：点(point marker) ‘,’：像素点(pixel marker) ‘o’：圆形(circle marker) ‘v’：朝下三角形(triangle_down marker) ‘^’：朝上三角形(triangle_up marker) ‘...
文章目录 3.3.4 Python 数据降维3.3.7 Python 处理共线性问题4.1.6 Python 聚类分析4.3.6 Python 分类分析4.5.5 Python 异常检测分析 3.3.4 Python 数据降维 《data1.txt》有10个特征，最后一列是标签 导入库 import numpy as np from sklearn.tree import DecisionTreeClassifier from sklearn.decomposition import PCA数据准备 #读取数据 data=np.loadtxt('chapter3/data1.txt') X=data[:,:-1]#二维矩阵 y=data[:,-1]#目标数组 ...
数据：https://pan.baidu.com/s/1BId0_x14AKhUxRo6xCL7iA 提取码：t0ch import pandas as pd #读取文件 data= pd.read_csv('./dataset.csv')########################### 查看数据概览 ########################### data.head() # data.info() # data.shape # #非空统计 # data.count() # data.isnull().sum() # # 拓展,获取含有空值的行 # data[data.isnull().T.any()] ########################### 查看数据概览 ##########...
当我们开始精通编程语言时，我们不仅希望实现最终的编程目标，而且还希望可以使我们的程序更高效。在本文中，我们将学习一些Ipython的命令，这些命令可以帮助我们对Python代码进行时间分析。注意，在本教程中，我建议使用Anaconda。1.分析一行代码要检查一行python代码的执行时间，请使用%timeit。下面是一个简单的例子来了解它的工作原理：#### magics命令%timeit的简单用法 %timeit [num for num in range(20)]#### 输出 1.08 μ...
当共享带宽包具有非常多的ip时，倘若带宽异常爆满，这时候依靠阿里云监控去排查是非常繁琐不直观的。 通过调用ip带宽的监控，可以分析出当带宽包爆满时的所有IP流量大小，从而快速定位问题。 代码如下（代码有很大改进空间，是本人刚接触python写的脚本，没有花很多时间优化，使用pyhton3，请见谅）： #!/usr/bin/env python#coding=utf-8import reimport jsonimport csvimport datetimeimport timefrom aliyunsdkcore.client impo...