数据库基本概念">关系型数据库基本概念 数据库： 对大量信息进行管理的高效解决方案。 按照数据结构来组织、存储和管理数据的库。 数据库系统（DBS,DATABASE SYSTEM）： 数据库（DB,DATABASE） + 数据库管理系统（DBMS,DATABASE MANAGEMENT SYSTEM) 关系型数据库 建立在关系模型上的数据库系统。 关系模型： 将日常生活中的实体（学生）和实体的属性（学生的学号，姓名等）保存到数据库中时，应该如何处理该实体结构。 1、数...
第二项是utf 编码格式 第三项可以自己选择GBKEnable root access from remote machins 选中是可以远程访问mysql服务端安装结束。 关系型数据库--mysql 5.5.20 32位 数据库的安装标签：编码格式 自己 nbsp gbk ima blog enable sql 选中 本文系统来源：http://www.cnblogs.com/ou-pc/p/8098760.html
什么是关系型数据库？ 数据库就是用来存储数据的仓库，是一种特殊的文件。 根据存储的数据不同，划分为关系型数据库和非关系型数据库。 关系型数据库就是指 建立在关系模型基础上的数据库，通俗来讲这种数据库就是由多张表组成，并且这些表之间存在一定的关系。 关系型数据库的核心元素：记录： 数据行字段 ： 数据列数据表 ： 数据行的集合数据库 ： 数据表的集合主键 ： 特殊的字段， 用来唯一标识记录的唯一性。 了解关系数...
MySql数据库 ：数据类型与约束 注意 ： 在创建数据表的时候，需要对数据表中的字段设置 数据类型和约束， 便于检测用户输入的数据是否正确有效。 1 数据类型 数据类型的选用原则 ： 够用就行，尽量使用取值范围小的， 而不选用大的，这样可以更多的节省存储空间。 常用数据类型如下：整数：int，bit小数：decimal字符串：varchar,char日期时间: date, time, datetime枚举类型(enum) 特别说明的类型如下：decimal表示浮点数，如...
1. 写在前面 Flink被誉为第四代大数据计算引擎组件，即可以用作基于离线分布式计算，也可以应用于实时计算。Flink的核心是转化为流进行计算。Flink三个核心：Source,Transformation,Sink。其中Source即为Flink计算的数据源，Transformation即为进行分布式流式计算的算子，也是计算的核心，Sink即为计算后的数据输出端。Flink Source原生支持包括Kafka,ES,RabbitMQ等一些通用的消息队列组件或基于文本的高性能非关系型数据库。而Fli...
关系型数据库遵循ACID规则 事务在英文中是transaction，和现实世界中的交易很类似，它有如下四个特性： 1、A (Atomicity) 原子性 原子性很容易理解，也就是说事务里的所有操作要么全部做完，要么都不做，事务成功的条件是事务里的所有操作都成功，只要有一个操作失败，整个事务就失败，需要回滚。 比如银行转账，从A账户转100元至B账户，分为两个步骤：1）从A账户取100元；2）存入100元至B账户。这两步要么一起完成，要么一起不完成...
mysql -u root -p 以root权限登录，默认密码为空2 show databases; 列出所有数据库3 drop table if exists hst; 如果存在表hst则先删除4 create database hst; 创建数据库5 use hst; 进入数据库6 create table student(7 id int auto_increment primary key,8 name varchar(50),9 sex varchar(20), 10 date varchar(50), 1...
MYSQL ：目录SQL语句事务，隔离，并发控制，锁用户和权限监控STATUS索引类型 ：查询VARIABLES备份和恢复复制功能集群 60-70年代，数据使用文件存放数据冗余和不一致性数据访问困难数据孤立完整性问题原子性问题并发访问异常安全性问题 DBMS层次模型网状模型关系模型 RDBMS关系模型 ：（结构化数据模型）关系模型E-R：实体-关系模型对象关系模型 ：基于对象的数据模型半结构化数据模型 XML （扩展标记语言） 文件 ：抽象结构表示层...
1.5 索引失效1.6 服务器参数（缓存、线程数）设置不合理1.7 项目需求不合理......程序员关注的主要是SQL、索引 2、MySQL执行过程2.1 前言：MySQL服务器在接收到客户端发来的SQL语句，是不能够马上执行该SQL语句；该SQL需要进行一系列复杂的过程，最终转变为二进制的机器码，才能被执行；2.2 SQL执行流程 2.3 SQL执行顺序 2.4 SQL优化的目标主要是对索引的有效使用 3、数据库索引3.13.2 案例 索引...
【MySQL架构图】 MySQL简要架构图如下图所示，引擎层以插件方式集成了不同的存储引擎，它们共用Server层对外提供服务。 连接器：用于连接管理，进行身份认证及权限相关的管理。（登录MySQL） 查询缓存区：执行查询语句时，先从缓存区查询。（该功能V8.0之后移除） 分析器：未命中缓存时，对SQL进行词法分析、语法分析。 优化器：按照MySQL认为的最优方案，生成执行计划。 执行器：执行SQL，并从存储引擎返回数据。 存储引擎：...
什么是数据库？ 数据库（Database）：存储数据的仓库 高效地存储和处理数据的介质（介质主要是两种：磁盘和内存） 数据库系统：DBS（Database System）：是一种虚拟系统，将多种内容关联起来的称呼 DBS = DBMS + DB DBMS：Database Management System，数据库管理系统，专门管理数据库 DBA：Database Administrator，数据库管理员 行/记录：row/record 列/字段：column/field 数据库的分类 基于存储介质的不同：分为关系型数据库（...
目前mysql与elasticsearch常用的同步机制大多是基于插件实现的，常用的插件包括：elasticsearch-jdbc,elasticsearch-river-MySQL,go-mysql-elasticsearch,logstash-input-jdbc。本文对四种插件的优缺点进行了图表对比。|序号|插件名称|地址|——:————————:————————————————-|1|elasticsearch-jdbc|https://github.com/jprante/elasticsearch-jdbc|——:————————:————————————————...
本文主要是对目前工作中使用到的DB相关知识点的总结，应用开发了解到以下深度基本足以应对日常需求，再深入下去更偏向于DB本身的理论、调优和运维实践。 不在本文重点关注讨论的内容（可能会提到一些）：具体的DQL、DML、DDL、DCL等语法 基础性的概念，如主键、索引、存储过程（注：阿里巴巴规范中禁止使用存储过程）等 联合查询，我个人不太喜欢在应用中写过于复杂的SQL，性能和后续维护容易出现问题 可能会用到的具体DB特性，如o...
区别：关系型数据天然就是表格式的，因此存储在数据表的行和列中；数据表可以彼此关联协作存储，也很容易提取数据。而非关系型数据不适合存储在数据表的行和列中，而是大块组合在一起；非关系型数据通常存储在数据集中，就像文档、键值对或者图结构。关系型数据库和非关系型数据库的区别关系型和非关系型数据库的主要差异是数据存储的方式。关系型数据天然就是表格式的，因此存储在数据表的行和列中。数据表可以彼此关联协作存储，...
由于工作的需求，需要把HDFS中处理之后的数据转移至关系型数据库中成为对应的Table，在网上寻找有关的资料良久，发现各个说法不一，下面是本人自身测试过程： 使用Sqoop来实现这一需求，首先要明白Sqoop是什么？ Sqoop是一个用来将Hadoop和关系型数据库中的由于工作的需求，需要把HDFS中处理之后的数据转移至关系型数据库中成为对应的Table，在网上寻找有关的资料良久，发现各个说法不一，下面是本人自身测试过程： 使用Sqoop来实现...