一、简述Hadoop平台的起源、发展历史与应用现状。 Hadoop平台的起源 Hadoop由 Apache Software Foundation 公司于 2005 年秋天作为Lucene的子项目Nutch的一部分正式引入。它受到最先由 Google Lab 开发的 Map/Reduce 和 Google FileSystem(GFS) 的启发。 2006 年 3 月份，Map/Reduce 和 Nutch Distributed File System (NDFS) 分别被纳入称为 Hadoop 的项目中。 Hadoop 是最受欢迎的在 Internet 上对搜索关键字进行内容分类的工具，...
4. 简述Hadoop平台的起源、发展历史与应用现状。 Hadoop平台的起源： 2003-2004年，Google公布了部分GFS和MapReduce思想的细节，受此启发的Doug Cutting等人用2年的业余时间实现了DFS和MapReduce机制，使Nutch性能飙升。然后Yahoo招安Doug Gutting及其项目。2005年，Hadoop作为Lucene的子项目Nutch的一部分正式引入Apache基金会。2006年2月被分离出来，成为一套完整独立的软件，起名为HadoopHadoop名字不是一个缩写，而是一个生造出...
Hadoop的起源 2003-2004年，Google公布了部分GFS和MapReduce思想的细节，受此启发的Doug Cutting等人用2年的业余时间实现了DFS和MapReduce机制，使Nutch性能飙升。然后Yahoo招安Doug Gutting及其项目。 2005年，Hadoop作为Lucene的子项目Nutch的一部分正式引入Apache基金会。 2006年2月被分离出来，成为一套完整独立的软件，起名为Hadoop Hadoop名字不是一个缩写，而是一个生造出来的词。是Hadoop之父Doug Cutting儿子毛绒玩具象命...
客户端A:对student表施加读锁mysql> LOCK TABLES student READ; mysql> UNLOCK TABLES;客户端B:对student表执行编辑操作，可以看到是无法正常执行的，查询操作没有问题:mysql> select * from student; mysql> update student set Class = 1 where Age = ‘18‘;下图为解锁后执行的语句结果:案例演示之写锁：客户端A:对student表施加写锁mysql> LOCK TABLES student WRITE; mysql> UNLOCK TABLES;客户端B:对student表执行编辑操作，...
）1.它包含的内容及作用如下：包含了所有更新了数据或者已经潜在更新了数据(比如没有匹配任何行的一个DELETE)包含关于每个更新数据库(DML)的语句的执行时间信息不包含没有修改任何数据的语句，如果需要启用该选项，需要开启通用日志功能主要目的是尽可能的将数据库恢复到数据库故障点，因为二进制日志包含备份后进行的所有更新用于在主复制服务器上记录所有将发送给从服务器的语句启用该选项数据库性能降低1%，但保障数据库完整性，...
一、宏观上: 1、Oracle是大型的数据库而Mysql是中小型数据库；Mysql是开源的，Oracle是收费的，且价格昂贵。 2、Oracle支持大并发，大访问量，是OLTP的最好的工具。 3、安装占用的内存也是有差别，Mysql安装完成之后占用的内存远远小于Oracle所占用的内存，并且Oracle越用所占内存也会变多。 二、微观上: 1、对于事务的支持 Mysql对于事务默认是不支持的，只是有某些存储引擎中如：innodb可以支持；而Oracle对于事物是完全支持的。...
PostgreSQL安装 第一步安装Docker 详情可参考博客： win10系统下把玩折腾DockerToolBox以及更换国内镜像源(各种神坑)。 安装Docker成功之后我们可以拉取镜像了 拉取镜像 docker pull postgres:11.1 #我们拉取的镜像是11.1版本的拉取成功后，输入命令查看镜像 docker images启动命令： docker run -d --name dev-postgres -e POSTGRES_PASSWORD=root -p 6432:5432 postgres:11.1解释：run，创建并运行一个容器； --name，指定创建的...
start MySQL Net stop MySQL3、直接运行mysqld服务器程序数据库操作基本流程 步骤： 1，连接，认证。 2，客户端发送操作指令到服务器端。 3，服务器端处理请求指令。 4，服务器端将处理结果返回给客户端。 5，客户端显示得到的结果。操作MySQL通过MySQL客户端，操作MySQL。 连接：mysql(mysql.exe) –hlocalhost –P3306 –uroot –pliguodong 退出：exit quit \q关系型数据库基本概念及MySQL简述标签：mysql 数据库 ...
RDBMS(Relational DataBase Management System) 关系型数据库管理系统 数据的组织结构： 层次型 网状型 关系型（二维关系表） 注：一张表可能在系统中以多个文件存在。 关系：关系代数运算 投影：只输出指定属性 选择：只输出符合条件的行 自然连接 笛卡尔集 交集 并集 差集 全集 补集 在mysql定义中，定义了一些维护数据库完整的...
)、数据字典、按需要配置服务器(服务器变量（必须掌握）:MyISAM,InnoDB,缓存，日志)下面我们一步一步深入走向MySQL的世界:SQL语言组成部分:(1)DDL：数据定义语言(2)DML：数据操作语言(3)完整性定义语言:DDL的部分功能 如:(约束)主键、外键、唯一键、条件、非空、事务(4)视图定义:虚表或临时表，存储下来是SELECT语句(5)事务控制(6)嵌入式SQL和动态SQL(DCL)控制语言数据类型的作用:(1)存储的值类型(比如:类型为字段 则无法存储数据...
二进制日志通常作为备份的重要资源，所以再说备份之前我们来回顾下前面专题讲过的二进制日志内容。1.二进制日志内容引起mysql服务器改变的任何操作。复制功能依赖于此日志。从服务器通过主服务器的二进制日志完成主从复制，在执行之前保存于中继日志中。从服务器通常可以关闭二进制日志以提升性能。2.二进制文件的格式表现形式:默认在安装目录下，存在mysql-bin.000001,mysql-bin.00002的二进制文件另外还有mysql-bin.index用来记录...
1.系统环境：Centos6.52.数据库版本：5.5.36-MariaDB-log MariaDB Server3.Host:Master主机: master.samlee.com 172.16.100.7Slave主机: slave.samlee.com 172.16.100.8Public主机: public.samlee.com 172.16.100.9----------------------------------------------------------------------------------------------------------实现过程如下:Public主机上操作：1.创建证书中心:--在public主机上创建证书中心 # cd /etc/pki/CA/ --...
mysql-proxy作为mysql测试项目，可以实现读写分离架构，具有开发能力的公司通过二次开发的方式去完善bug应用在生产环境中，下面我们通过案例使用mysql-proxy实现读写分离。准备环境:1.系统环境：Centos6.52.数据库版本：10.0.10-MariaDB-log MariaDB Server3.Host:Master主机: master.samlee.com 172.16.100.7Slave主机: slave.samlee.com 172.16.100.8Proxy主机:proxy.samlee.com 172.16.100.9架构图如下:-----------------------...
PhxSQL是一个兼容MySQL、服务高可用、数据强一致的关系型数据库集群。PhxSQL以单Master多Slave方式部署，在集群内超过一半机器存活的情况下，可自身实现自动Master切换，且保证数据一致性。 PhxSQL 架构：PhxSQL基于Percona 5.6开发。Percona是MySQL的一个分支，功能和实现与MySQL基本一致（基础教程qkxue.net）。因此本文后续直接把MySQL作为讨论对象。总览： PhxSQL具有服务高可用、数据强一致、高性能、运维简单、和MySQL完...
1.姓名（name）：字符串：varchar；字符串长度：常见的为20位和50位；允许空值； 2.性别（sex）：bit，一般用布尔型数据，常用代码1=男，0=女； 3.年龄（age）:整形int; 4.地址（address）：字符串varchar，常用长度为50位； 5.班级（class）：字符串varchar， 6.text：没有长度限制，可存图片（将图片转换为二进制流） 7.主键pk（Primary Key）：一张数据表里必须要有一个主键，表示一条数据，标识为钥匙； 8.自增长列：为了避免重...