首页 / 爬虫 / 每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作）

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作）

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作），小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7296字，纯文字阅读大概需要11分钟。

内容图文

MySQL

什么是MySQL

MySQL 的一些特性

安装Mysql

windows 安装
数据库的启动

基础操作

数据库操作
表操作
数据操作
查询操作

什么是MySQL

MySQL是一个关系型数据库管理系统，在 WEB 应用方面，MySQL是一个好的 RDBMS (Relational Database Management System，关系数据库管理系统) 应用软件之一。
MySQL是一种关系型数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。
MySQL所使用的 SQL 语言是用于访问数据库的最常用标准化语言。

我们一直说安装数据库，但是其实我们安装的是数据库管理系统，由于习惯，所以就简称数据库了

MySQL 的一些特性

E_R模型：
E：实体（表）
R: 关系（）

表表的关系：
1对1，1对多，多对多

三范式：
列不可拆分
唯一标识
引用主键不重复

数据的完整性：
字段类型：int decimal,char,varchar,text,datetime,bit
约束：主键，非空，唯一，默认，外键
逻辑删除：物理删除：从硬盘真的删除，软删除：删除标识，1，0

安装Mysql

windows 安装

我用的是windows，所以这里看一下windows 的安装过程，

官网安装

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

之后就下一步，然后第一次使用安装就按照默认的来就好了。需要什么就点击执行让他下载

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

这之后有一个要设置用户和密码的过程

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

这个自己要记住，不然就很麻烦，最后安装好后，文件夹里就会有MySql Server 这个东东，我们打开它，把bin目录添加到环境变量里面

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片
这样就安装好了

数据库的启动

启动服务 mysql.server start
关闭服务 mysql.server stop
现在这个版本，按照默认安装完后，服务就自己起来了，已经添加好了，不像MongDB 要操作一波，所以上面这一步可以省略，一般直接开客户端就好了

客户端启动：
mysql -u root -p( 然后回让输入密码，u是user 的意思，p是password)

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

查看当前安装的数据库版本：select version();
显示当前有哪些数据库 show databases;
显示当前时间： select now();

注意： mysql啥都要加个封号，有点讨厌

基础操作

数据库操作

创建数据库：create database animal charset=utf8; 这里我们要告诉它使用什么编码格式
切换数据库 use <库名>;
查看当前在哪个数据库select database();
删除数据库：drop database <库名>；

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

表操作

建表：

create table dog(
id int auto_increment primary key, #设置第一个字段为id 自动编号，设为主键）
name varchar(10) not null # 设置第二的字段为name ，字符类型，长度可变，最长10 不能为空
);

修改表:

desc <表名>; desc dog; 查看表的结构

alter table <表名> add <字段> <字段类型>;
alter table dog add birthday datetime;给 dog 这个表添加一个 birthday的字段，是日期类型

alter table <表名> add <字段><字段类型> after <字段>; alter table dog add gender int after name; 在某个字段后添加

lter table <表名> add <字段><字段类型> first
alter table dog add age int first ;添加到第一个

alter table <表名> change <要修改的字段名> <改后的字段名> <字段类型>;alter table dog change gender sex int ; 修改表的字段

alter table <表名> drop <字段>,alter table dog drop age;删除age 这个字段

rename table <表名> to <表名>;rename table dog to cat; 修改表的名字从 dog 改为 cat

show create table <表名>; show create table cat; 显示建表时候的设置，

drop table <表名>; drop table cat;删表后，库还在

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

数据操作

刚才把表删了，先建回来

 create table dog(
   id int auto_increment primary key,
   name varchar(20) not null,
   age int ,
   gender int );

插入数据

全列插入
insert into <表名> values(<传入的值>);insert into dog values(1,"lala",12, 1);向 dog中插入了一个 lala age 12 ，id 1，gender 0，这个要按顺序传入，
·
缺省插入
insert into <表名>（<传入的字段>） values(<传入的值>); insert into dog(age,name) values(14,"kuku");只插入对应的字段，没穿值的按照默认的显示，比如id 我原来设置的自增，gender 默认没有默认，显示NULL；
·
一次插入多个
insert into <表名> values(<传入的值>),(<传入的值>); insert into dog values(0,"lachang",10,1),(0,"yuekex",6,0);如果id 有自增，自己记不住，可以用0占位
·
一次缺省插入多个
insert into dog(<传入的字段>) values(<传入的值>),(<传入的值>); insert into dog(name) values("taishi"),("shizi"); 注意，如果id 不是自增的必须写，不然就完了，其他没有设置默认值的是空。
·
查看表里的数据
select * from <表名>; select * from dog;

每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作） - 文章图片

修改数据

update <表名> set <修改的字段>=<修改的值> where <筛选条件>; update dog set name="lllll" where id=6; 把id为6 的名字改为llllll

删除数据：

delete from <表名> where <筛选条件>;delete from dog where id=3;注意删除后，其他的id不变，物理删除，
逻辑删除是修改标记字段，alter table dog add isdeletebit dsfault 0;默认是 0，没删除，改为1 是删除

查询操作

新建一个表，刚才的数据不好

 create table stu(
    id int auto_increment primary key,
    name varchar(10) not null,
    birthday datetime,
    gender bit default 0,
    isdelete bit default 0,
    address varchar(100),
    score int
    );

insert into stu values(1,“小明”,“2008-01-01”,0,0,“北京”,90),
(2,“小红”,“2007-01-01”,1,0,“上海”,80),
(3,“小兰”,“2006-01-01”,1,0,“广州”,100),
(4,“小王”,“2005-01-01”,0,0,“深圳”,20),
(5,“老王”,“2009-01-01”,0,0,null,30),
(6,“老刘”,“2004-01-01”,0,0,null,40),
(7,“小丽”,“2003-01-01”,1,0,“东莞”,50),
(8,“小芳”,“2002-01-01”,1,0,“福建”,60),
(9,“小粒”,“2001-01-01”,0,0,“福州”,70);

条件查询：
这个就不截图了，截图太长放不下

select <查询的字段>,<查询条件> from <表名> where <查询的条件>
* 就是所有字段，也可以传入自己想看的字段，where 后面就是查询条件，> < = != >= <=
.
select name address from stu where id!=6
select * from stu where id>6;
select * from stu where id=7;
select id,name from stu where name!="老王";

逻辑运算

select <查询的字段> from <表名> where <查询条件> <and / or / not > <查询条件>
and / or / not
.
select name from stu where id>6 and gender=1;
select name from stu where id<4 or gender =0;
select name from stu where not id=4;

模糊查询；

like 后接条件 % 匹配多个 _ 匹配一个
.
select * from stu where name like '小%';名字里小这个字开头的
select * from stu where name like "%王";名字里王这个字结尾的
select * from stu where name like "%王" or name like "%丽";

范围查询；

用 in / not in / between / and 来描述范围
.
select * from stu where id in(1, 3, 5 ,6);
select * from stu where id not in(1, 3, 5 ,6);
select * from stu where id between 1 and 5;
select * from stu where id between 1 and 5 and gender=1;

判断是否为空

is null
.
select * from stu where address is null;

符合的优先级

()

not

条件运算

and

or

聚合查询

统计个数：
select count(*) from stu; 所有学生的个数
select count(id) from stu where gender=0; 看男生几个
select max(score) from stu; 成绩最大是多少
select min(score) from stu; 成绩最小是多少
select sum(score) from stu; 总成绩
select sum(score) from stu where gender=1; 男生的成绩和

分组查询

select <分的组名>,count(*) from <表名> group by <分组依据>;

select gender,count(*) from stu group by gender;按性别分组，看有男男女分别多少
.
select <分的组名> as <分组的别名>,count(*) from <表名> group by <分组依据>
select gender as gend,avg(score) from stu group by gender having gender=0; 这个分组完是男女两组，但只想显示男生的平均，所以我们加一个 having <对应的组>
.
select <分的组名> ,max(score) from <表名> group by <分组依据>;
select gender ,max(score) from stu group by gender;
注意：分的组名一定要是已有的字段，group by 后面应该写对应的分组依据

排序

order by <字段> <升序or降序>
asc 升序
select * from stu where gender =0 order by id asc;
desc 降序
select * from stu where isdelete=0 order by score desc;

分页

limit ,
select * from stu limit 0,3;从第 0 条开始，每页 3个数据

去重

distinct <去重的字段>
select distinct <去重的字段> from <表的名字>; 对哪个字段取重就写哪个
select distinct name from stu;

今天就简单讲解一些 MySql 的增删查改操作，明天继续了解 MySql 的 E_R 模型，表与表的关系，

我又来要赞了，还是希望各位路过的朋友，如果觉得可以学到些什么的话，点个赞再走吧，欢迎各位路过的大佬评论，指正错误，也欢迎有问题的小伙伴评论留言，私信。每个小伙伴的关注都是我更博的动力》》》》奥里给

内容总结

以上是互联网集市为您收集整理的每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作）全部内容，希望文章能够帮你解决每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作）所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/874586.html

来源：【匿名】

【上一篇】[python爬虫之路day12]:基于爬虫的mongodb数据库的基本操作【下一篇】PHP使用swoole实现多线程爬虫

更多 ►

【每天30分钟一起来学习爬虫——day16（数据存储之 MySQL 简单操作）】教程文章相关的互联网学习教程文章

【Python学习】爬虫源码【代码】

1、在巨人的肩膀上，结合网上的资源，梳理出来的。2、其中应用了几个常用的包，requests、re等，3、注意创建多级文件夹要用--makesdir，创建单级文件用--mkdir 1# 导入相应的包 2# 请求网页 3import requests4# 正则解析网页 5import re6# 告诉服务，自己的身份， 7import time8 9import os10 11# 函数请求的头部信息 12 headers = {13"user-agent": ‘Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML...

python学习之爬虫：安装requests模块【图】

终端输入命令：pip install requests 如果报错：p.p1 { margin: 0.0px 0.0px 0.0px 0.0px; font: 11.0px Menlo; color: #000000; background-color: #ffffff } p.p2 { margin: 0.0px 0.0px 0.0px 0.0px; font: 11.0px Menlo; color: #c33720; background-color: #ffffff } span.s1 { }Installing collected packages: idna, urllib3, certifi, chardet, requestsException:Traceback (most recent call last): File "/Library/Pyt...

python学习之爬虫(一) ——————爬取网易云歌词【代码】【图】

接触python也有一段时间了，一提到python，可能大部分pythoner都会想到爬虫，没错，今天我们的话题就是爬虫！作为一个小学生，关于爬虫其实本人也只是略懂，怀着”Done is better than perfect”的态度硬着头皮开始了这篇文章的撰写！好了，废话不多说！　　先说一下今天我们的目的，作为一个音痴但不影响我对于音乐的执着，所以今天我们爬取的是网易云音乐，我们将会通过代码爬取歌词并写入到本地。　　作为新手，我很本能就打开页...

学习爬虫:《Python网络数据采集》中英文PDF+代码【图】

适合爬虫入门的书籍《Python网络数据采集》，采用简洁强大的Python语言，介绍了网络数据采集，并为采集新式网络中的各种数据类型提供了全面的指导。第一部分重点介绍网络数据采集的基本原理：如何用Python从网络服务器请求信息，如何对服务器的响应进行基本处理，以及如何以自动化手段与网站进行交互。第二部分介绍如何用网络爬虫测试网站，自动化处理，以及如何通过更多的方式接入网络。《Python网络数据采集》高清中文PDF，224页...

最全Python培训课程，基础班+高级就业班+课件(数据分析、深度学习、爬虫、人工智能等) 精品课程

最新版Python全套培训课程视频，绝对零基础到Python大牛。包括：零基础得python基础班，高阶进阶就业篇完整版(含：数据分析、机器学习、网络爬虫、数据挖掘、深度学习、人工智能等)课程共108.9G。本套课程价值2万元以上。文章底部附加全套课程下载地址，由于文件较大，保存时可选择分卷保存。全套课程文件目录：Python全套一、python基础班 1-1 Linux基础01-课程简介 02-操作系统简介 03-linux命令简介 04-目录相关命令 05-文件相...

分享！该怎么学习爬虫python【图】

学电脑语言，首先要了解它的底层实现机制和程序处理的过程，即它的设计思路。当然，一开始接触一门语言，并不需要对它进行深入的研究，但是也要在心中有一个Python的知识框架，在接下来的学习过程中，不断地填充和完善它，就像建造一座建筑，除了使用极光爬虫代理，还要特别注意以下几点。 1.网页基础知识: 基础HTML语言知识(了解href等大学计算机级内容) 理解网站分包概念(POSTGET) 稍微了解一下js知识，用来理解动态网页(当然，如...

《假期Python学习》爬虫基础知识【代码】【图】

1.爬虫可分为 ——通用爬虫（搜索引擎） ——聚焦爬虫（特定网页） ——增量式爬虫（只爬更新的内容）等本文主要总结通用网络和聚焦网络爬虫的知识。 2.爬虫的组成有 ——控制节点 ——爬虫节点 ——资源库个人简单理解就是 ——控制节点相当CPU，根据url分配线程 ——爬虫节点相当于CPU负责进行具体的爬取数据 3.爬虫实现原理4.实际爬虫举例疫情相关数据爬取 import hashlib,json,random,requests,urllib.parse import urllib....

从学习爬虫开始，零基础高效入门Python3【图】

在我们现在的生活中，大数据这个词出现的频率越来越高，数据也越来越影响我们生活中的方方面面，同时，在工作中数据也在影响着我们的创造和决策，那么，我们应该如何将产生的数据发挥它最大的价值，以帮助我们更好的工作和生活呢？首先先让我们应用爬虫进行数据分析后能干些什么吧？淘宝、京东：抓取商品、销售量和商品评论，对各种商品和用户进行详细分析，了解商品真实情况；豆瓣、知乎：抓取优质影评及高质量回答，筛选高质...

python学习之爬虫二【代码】

1.requests模块中部分函数的介绍正则表达式的书写，同步处理，异步处理，带参数的处理import requests # 乌龙事件，没有来联网就去运行整个程序，肯定会报错啊 # 没有联网，该台电脑怎么向目的主机发送请求呢 # from urllib.parse import urlencode # # 在requests模块还为出现前使用的方法 # url=https://www.baidu.com/s?+urlencode({"wd":"牛超"}) # headers = { # user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64...

Python 3 Anaconda 下爬虫学习与爬虫实践（2）

下面研究如何让<html>内容更加“友好”的显示之前略微接触的prettify能为显示增加换行符，提高可阅读性，用法如下：import requests from bs4 import BeautifulSoupr=requests.get("https://www.baidu.com/") r.encoding=r.apparent_encoding demo=r.text soup=BeautifulSoup(demo,"html.parser") print(soup.prettify()) 同样，它也可以为其中的个别标签做专门的处理，比如对a标签进行处理代码如下：import requests from bs4 i...