在开发及项目运维中，对数据库的操作大家目前都是使用客户端工具进行操作，例如MySQL的客户端工具navicat；Oracle的客户端工具PL/SQL Developer；MSSQL的客户端工具查询分析器等。目前大家使用的大都是C/S单机版的客户端工具，要连数据库的电脑都要安装客户端工具，navicat还比较好安装，而Oracle客户端工具安装就比较麻烦了。 python对接常用数据库，快速上手！ 很多同学在使用python进行自动化测试的时候，会涉及到数据库数...
简介 MongoDB更类似Mysql，支持字段索引、游标操作，其优势在于查询功能比较强大，擅长查询JSON数据，能存储海量数据，但是不支持事务。 Mysql在大数据量时效率显著下降，MongoDB更多时候作为关系数据库的一种替代。 内存管理机制 Redis数据全部存在内存，定期写入磁盘，当内存不够时，可以选择指定的LRU算法删除数据。 MongoDB数据存在内存，由linux系统mmap实现，当内存不够时，只将热点数据放入内存，其他数据存在磁盘。 支持的...
python连接mysql 安装pymysql 导包： import pymysql建立数据库的连接 参数：主机名、用户名、密码、数据库名 conn = pymysql.connect('localhost','root','root','database')获取游标 cursor = conn.cursor()所有的增删改查都写在sql中 编写sql语句 sql = ' '#动态查询 sql = 'select * form stu where id = %d'%(d)#sql语句过多是比如建表，嵌套查询可以用如下写法 sql = """#sql语句可回车 """执行sql语句 cursor.execute(sql)开...
mongodb 概念解析SQL术语/概念 MongoDB术语/概念 解释说明database database 数据库table collection 数据库表/集合row document 数据记录行/文档column field 数据字段/域index index 索引table joins表连接,MongoDB不支持primary key primary key 主键,MongoDB自动将_id字段设置为主键主要操作 登录数据库(root账号)mongo -u "root" -authenticationDatabase admin -p创建数据库与用户 # 切换数据库 > use test use test# 创建用...
NoSQL 的全称是 Not Only SQL，也可以理解非关系型的数据库，是一种新型的革命式的数据库设计方式，不过它不是为了取代传统的关系型数据库而被设计的，它们分别代表了不同的数据库设计思路。 MongoDB：它是一个内存数据库，数据都是放在内存里面的。对数据的操作大部分都在内存中，但 MongoDB 并不是单纯的内存数据库。MongoDB 是由 C++ 语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，...
MySQL、MongoDB、Redis 数据库之间的区别与使用 MySQL、MongoDB、Redis 数据库之间的区别与使用（本章迭代更新） update：2019年2月20日 15:21:19（本章迭代更新）一.数据库之间的区别 MySQL MySQL概述 关系型数据库。无论数据还是索引都存放在硬盘中。到要使用的时候才交换到内存中。能够处理远超过内存总量的数据。 在不同的引擎上有不同 的存储方式。 查询语句是使用传统的 SQL 语句，拥有较为成熟的体系，成熟度很高。 开源数据...
安装anaconda? ? ? ? 安装 pycharm? 版本冲突 多版本兼容?? ? ??? ? BeautifulSoup这个库的安装? ? 忽略大小写? ? mongodb安装 ? 新建? 文件夹 /data/db ? 开启服务端? mongod --dbpath??D:\install\mongodb\data\db 查看是否开启 localhost:27017启动客户端? cmd mongo? ? 配置系统服务中启动? 可视化 robomongo ? 安装各种库 pip3 install? requests conda? install requests? requests selenium? ?----js渲染 ? chromedriver?...
作为数据存储的总要组成部分，数据库是必不可少的，数据库可以分为关系型数据库和非关系型数据库。 关系型数据库有 Mysql、Oracle、DB2、SQLite等，数据库是以表的方式存储，非关系型数据库如：MongoDB、Redis，它们存储形式是键值对，存储心事更灵活。 MySQL的安装 windows下的安装 直接访问官方网站下载https://dev.mysql.com/downloads/mysql/，需要注册登陆才可以下载。下载完成之后直接双击安装包即可安装，直接选择默认选项点...
HDFS： Hadoop 的分布式文件系统称为 HDFS，它是为以流式数据访问模式存储超大文件而设计的文件系统。 HDFS适合： 存储并管理PB级数据 处理非结构化数据 注重数据处理的吞吐量 应用模式为：一次写多次读 不适合： 存储小文件 大量的随机度 需要修改文件 Hive： Hive是一个构建与Hadoop顶层的数据仓库工具，可以查询和管理PB级的分布式数据，适用于大规模数据的批量处理，Hive本身不存储数据，依赖于HDFS和Mapr...
Python网络爬虫Scrapy+MongoDB +Redis实战爬取腾讯视频动态评论教学视频课程简介 学习Python爬虫开发数据采集程序啦！网络编程，数据采集、提取、存储，陷阱处理……一站式全精通！！！目标人群掌握Python编程语言基础，有志从事网络爬虫开发及数据采集程序开发的人群。学习目标了解Web前端，熟悉HTTP，系统学习Python urllib库HTTP编程模块，requests网络编程库，BeautifulSoup4 HTML转换解析，并发数据采集、提取、存储，熟悉Sel...