#-*- coding: utf-8 -*- #餐饮销量数据统计量分析from__future__import print_function import pandas as pdcatering_sale = ‘../data/catering_sale.xls‘#餐饮数据 data = pd.read_excel(catering_sale, index_col = u‘日期‘) #读取数据，指定“日期”列为索引列 data = data[(data[u‘销量‘] > 400)&(data[u‘销量‘] < 5000)] #过滤异常数据 statistics = data.describe() #保存基本统计量 statistics.loc[‘range‘] = st...
python Django教程 之 模型(数据库)、自定义Field、数据表更改、QuerySet API 一、Django 模型（数据库）Django 模型是与数据库相关的，与数据库相关的代码一般写在 models.py 中，Django 支持 sqlite3, MySQL, PostgreSQL等数据库，只需要在settings.py中配置即可，不用更改models.py中的代码，丰富的API极大的方便了使用。本节的代码：（Django 1.6, Python 2.7 测试环境）大家按照我步骤来开始做：django-admin.py startproj...
本文参考原文-http://bjbsair.com/2020-03-22/tech-info/2135/本文介绍Peter Nistrup 根据自身经验列出了 7 个有用工具来提升数据分析能力。 本文列举了一些提升或加速日常数据分析工作的技巧，包括：Pandas Profiling使用 Cufflinks 和 Plotly 绘制 Pandas 数据IPython 魔术命令Jupyter 中的格式编排Jupyter 快捷键在 Jupyter（或 IPython）中使一个单元同时有多个输出为 Jupyter Notebook 即时创建幻灯片1. Pandas Profiling该工...
“总是向你索取却不曾说谢谢你～～～～”，在博客园和知乎上面吸收了很多知识，以后也会在这里成长，这里挺好，谢谢博客园和知乎，所以今天也把自己在项目期间做的东西分享一下，希望对朋友们有所帮助。。。。 废话少说，let‘s go～～～～！ 需求： 项目需要做一个婚恋网站，主要技术有nginx，服务器集群，redis缓存，mysql主从复制，amoeba读写分离等等，我主要用rabbitMQ+python完成并实现了数据爬取工作（数据库写入及图片...
import tensorflow as tf# 输入数据from tensorflow.examples.tutorials.mnist import input_datamnist = input_data.read_data_sets("E:\\MNIST_data", one_hot=True)# 定义网络的超参数 learning_rate = 0.001 training_iters = 200000 batch_size = 128 display_step = 5# 定义网络的参数 # 输入的维度 (img shape: 28*28) n_input = 784 # 标记的维度 (0-9 digits) n_classes = 10 # Dropout的概率，输出的可能性 dropout = ...
本文实例讲述了Python3实现连接SQLite数据库的方法，对于Python的学习有不错的参考借鉴价值。分享给大家供大家参考之用。具体方法如下：实例代码如下： import sqlite3db = r"D:\pyWork\test.db" #pyWork目录下test.db数据库文件 drp_tb_sql = "drop table if exists staff" crt_tb_sql = """ create table if not exists staff(id integer primary key autoincrement unique not null,name varchar(100),city varchar(100) ); ""...
问题出现于我试图向自建网页中加入实时时间开始。我之前已经知道python中有有关事件和日期的模块datetime。以下导入datetime并作实验。>>> import datetime>>> type(datetime) <class‘module‘>可知datetime属于module（模块）类。此外，类似的时间相关模块还有time和calendar。There are two kinds of date and time objects: “naive” and “aware”.——这里有两种类型于日期和时间有关的对象：自然对象 和 意识对象。datetim...
最近学习python网络爬虫，所以自己写了一个简单的程序练练手（呵呵。。）。我使用的环境是python3.6和mysql8.0，抓取目标网站为百度热点（http://top.baidu.com/）。我只抓取了实时热点内容，其他栏目应该类似。代码中有两个变量SECONDS_PER_CRAWL和CRAWL_PER_UPDATE_TO_DB，前者为抓取频率，后者为抓取多少次写一次数据库，可自由设置。我抓取的数据内容是热点信息，链接，关注人数和时间。其在内存中存放的结构为dict{tuple(热点...
在经常性读取大量的数值文件时(比如深度学习训练数据),可以考虑现将数据存储为Numpy格式,然后直接使用Numpy去读取,速度相比为转化前快很多.下面就常用的保存数据到二进制文件和保存数据到文本文件进行介绍:1.保存为二进制文件(.npy/.npz)numpy.save保存一个数组到一个二进制的文件中,保存格式是.npy参数介绍numpy.save(file, arr, allow_pickle=True, fix_imports=True)file:文件名/文件路径 arr:要存储的数组 allow_pickle:布尔值...
目录[TOC]一、数据驱动介绍 数据驱动，我的理解，说的简单一点，就是数据测试数据的参数化。二、DDT基本使用介绍2.0 测试基类class Test:def__init__(self, a, b):self.a = aself.b = bdef add(self):returnself.a +self.bdef sub(self):returnself.a -self.bdef multi(self):returnself.a *self.bdef div(self):returnself.a /self.b2.1 使用步骤导包from ddt import ddt, data, unpack使用ddt2.1 ddt读取单个数据 ...
前言在这一节中，我们主要介绍如何使用python操作MySQL数据库。 准备MySQL数据库使用的是上一节中的docker容器 “test-mysql”. Python 操作 MySQL我们使用的IDE是 “神奇” 的 pycharm：1. 首先新建一个python的项目，并且安装 “mysql-connector-python”。 “mysql-connector-python” 是MySQL官方对于python的数据驱动，感兴趣的童鞋可以移步这里： https://dev.mysql.com/doc/connector-python/en/ 2. 创建 MySQLUtil.py基于...
python 数据类型 一，整数，可以出来任意大小的整数。 如 1, 100, -8080,0 等等。 二，浮点数，浮点数也可以被成为小数。 三，字符串，字符串是以‘‘ 或"". 四，布尔值，布尔值和布尔代数的表示完全一致，一个布尔值只有 True ，False. 五，空值，空值是Python 里一个特殊的值，用None 表示，None 不能理解为0， 因为0 是有意义的，而不是None是一个特殊的...
简单的介绍 SQLite数据库是一款非常小巧的嵌入式开源数据库软件，也就是说没有独立的维护进程，所有的维护都来自于程序本身。它是遵守ACID的关联式数据库管理系统，它的设计目标是嵌入式的，而且目前已经在很多嵌入式产品中使用了它，它占用资源非常的低，在嵌入式设备中，可能只需要几百K的内存就够了。它能够支持Windows/Linux/Unix等等主流的操作系统，同时能够跟很多程序语言相结合，比如 Tcl、C#、PHP、Java等，还有ODBC...
PythonTuple 是不可变 list。 一旦创建了一个 tuple 就不能以任何方式改变它。Tuple是用()包括起来的。Tuple与List都是按照定义的顺序进行排序的，索引从0开始，与 list 一样切片 (slice) 也可以使用。注意当分割一个 list 时, 会得到一个新的 list ；当分割一个 tuple 时, 会得到一个新的 tuple。Tuple对象没有方法。Tuple 本身是不可变的，但是tuple内部的可变对象元素是可变的：>>> t = (1,2,[3,4],5) >>> t[2][0] = 6 >>> t (...
序列化：#!usr/bin/env python# -*- coding:utf-8 -*-__author__ = "Samson"import json,pickle#json能用于其他语言中，只能序列化一些简单的数据类型，比如字典之类；而pickle只能用于python中，能序列化所有的数据类型def sayhi(name):#程序运行结束时会释放掉该内存 print("name, ",name)info = { "name":"alex", "age":22, "func":sayhi#使用json序列化不行，而用pickle序列化是可以的}f = open("test.text","wb")...