ApacheHadoop-2.2.0 与之前的 hadoop-1.x 相比出现了一些新的特性，具体如下： 一．资源统一管理系统 YARN YARN 是 ”YetAnotherResourceNegotiator”的简称。由于 MRv1 存在扩展性，资源利用率，可靠性和只能单一框架作业的问题， apache 对 MRv1 进行改造Apache Hadoop-2.2.0与之前的hadoop-1.x相比出现了一些新的特性，具体如下： 一．资源统一管理系统YARN YARN 是”Yet Another Resource Negotiator”的简称。由于MRv1存在扩...
SQL 查询结果高速缓存可在数据库内存中对查询结果集和查询碎片启用显式高速缓存。存储在共享池（Share Pool）中的专用内存缓冲区 一．Result Set Caching 说明Oracle 官网的说明，参考： 7.6 Managing the Server and ClientResult Caches 1.1 概述 SQL 查询结果高速缓存可在数据库内存中对查询结果集和查询碎片启用显式高速缓存。存储在共享池（Share Pool）中的专用内存缓冲区可用于存储和检索高速缓存的结果。对查询访问的数据...
对于MySQL，很多印象其实都是来自比较老的4.x版本，实际上MySQL在后续的5.0，5.1和6.0版本中还是做出了很多的改进，特别是原来一些动不动要重启的操作，慢慢的都可以在线做了，如果要做企业级数据库，在线操作的支持是必不可少的。由于我们在产品库中大量开始使用5.1，所以打算写一个系列短文，介绍一些个人觉得比较实用的新特性。因为MySQL这样的开源软件，版本分支比较多，所以每篇文章涉及的一些小版本可能不太一样。 MySQL有...
在MySQL5.6/5.7之前的版本中，如MySQL5.5，如果要修改ib_logfile（redo log）大小，步骤如下：1）执行set global innodb_fast_shutdown=0命令，把所有脏数据写入磁盘；2）执行mysqladmin shutdown命令关闭数据库；3）在my.cnf文件里修改innodb_lof_file_size参数值；4）执行mv ib_logfile* ***bak命令，将redo log移动到其他目录5）执行mysqld_safe --defaults-file=/etc/my.cnf --user=mysql &命令，最后启动MySQL服务。在MySQL5....
通常，MySQL将错误日志输出在hostname.err文件中，但MySQL5.7可以将错误日志打印到操作系统日志中，具体操作如下： MySQL服务器启动的时候，mysqld_safe加 --syslog参数，如下： 启动MySQL服务：[root@mysql log]# /usr/local/mysql/bin/mysqld_safe --defaults-file=/etc/my.cnf --syslog --user=mysql &[1] 17994[root@mysql log]# 2017-07-21T04:05:12.802731Z mysqld_safe Logging to syslog.2017-07-21T04:05:12.807548Z mysq...
MySQL 开发团队宣布 MySQL 8.0.0 开发里程碑版本（DMR）发布！之后，可能有人会惊奇 MySQL 为何从 5.x 一下跳跃到了 8.0。事实上，MySQL 5.x 系列已经延续了很多年，从被 Oracle 收购之前就是 5.1，而收购之后一直维持在 5.x，比如 5.5，5.6，5.7 等等。其实，如果按照原本的发布节奏，可以把 5.6.x 当成 6.x，5.7.x 当成 7.x。所以，只是换了版本命名方式而已。MySQL是众多网站技术栈中的标准配置，是广受欢迎的开源数据库，已经推...
MySQL新特性之mysql_config_editor源码解析从mysql5.6开始，mysql推出了加密工具mysql_config_editor。在此之前我们通过将账号和密码明文放入my.cnf，从而使用mysql客户端登录时，无需指定账号密码就可以登录数据库。而有了mysql_config_editor工具之后，我们将加密后的账号密码放入二进制文件。在登录时，客户端通过解密该文件来登录数据库。由于加密解密都在内存中进行，所以无法明文的显示文件内容。只要我们将文件权限保存好，...
MySQL5.6在5.5的基础上增加了一些改进，本文章先对其中一个一个比较大的改进"GTID"进行说明。 概念： GTID即全局事务ID（global transaction identifier），GTID实际上是由UUID+TID组成的。其中UUID是一个MySQL实例的唯一标识。TID代表了该实例上已经提交的事务数量，并且随着事务提交单调递增。下面是一个GTID的具体形式：4e659069-3cd8-11e5-9a49-001c4270714e:1-77更具体的说明见官方说明。 GTID意义： 引入GTID的意...
Mysql在被sun，继而被oracle收购之后，并没有被oracle这个巨人雪藏，反而近几年的发展速度极为之快，谁都知道，你oracle做不好mysql，开源的市场就会被别人取代，pg，MariaDB，percona server，如果说开源又不挣钱，我就只能呵呵了。这里我选的版本是最新的开发版，5.7.8.只为了看一下最新最近的技术，当然，这个版本是不可能被用到生产中去的，因为还不够成熟，还需要在实验室呆上很久，如果说mysql5.6已经做的够好了，那么mysql5...
摘要：美图公司数据库高级 DBA，负责美图后端数据存储平台建设和架构设计。前新浪高级数据库工程师，负责新浪微博核心数据库架构改造优化，以及数据库相关的服务器存储选型设计。之前在「高可用架构」发表的《单表 60 亿记录等大数据场景的 MySQL 优化和运维之道》广受好评。本文转自微信公众号： 高可用架构 作者：杨尚刚 引用 美图公司数据库高级 DBA，负责美图后端数据存储平台建设和架构设计。前新浪高级数据库工程师，负责新浪...
1. 介绍身处MySQL这个圈子，能够切身地感受到大家对MySQL 5.7的期待和热情，似乎每个人都迫不及待的想要了解、学习和使用MySQL 5.7。那么，我们不禁要问，MySQL 5.7到底做了哪些改进，引入了哪些新功能，性能又提升了多少，能够让大家翘首以盼，甚至欢呼雀跃呢？下面就跟随我来一起了解一下MySQL 5.7的部分新功能。想要在一篇文章中介绍完MySQL 5.7的所有改进，几乎是不可能的。所以，我会选择一些有特别意思的、特别有用的功能进行...
转自： DBAplus社群 http://www.toutiao.com/m5762164771/ 迄今最安全的MySQL？细数5.7那些惊艳与鸡肋的新特性（上） - 今日头条(TouTiao.com)http://toutiao.com/a6300616158581604609/?tt_from=mobile_qq&utm_campaign=client_share&app=news_article&utm_source=mobile_qq&iid=4592472790&utm_medium=toutiao_ios 写在前面 MySQL 5.7版本于2015年10月份左右GA，至今已经大半年了，但作为MySQL DBA的我却一直没时间follow它的特性...
写在最前在MysQL5.6版本中，可以把undo log 回滚日志分离到一个单独的表空间里；其缺点是不能回收空间大小，until MysQL5.7，but MariadDB10.1暂不支持。本文介绍并演示MysQL5.7是如何在线收缩undo log的。undo log日志是保存在共享表空间ibdata1文件中的，随着数据库的运行时间的不断增长，ibdata1文件会越来越大，在以往的MySQL数据库版本中，如果我们想要回收ibdata1文件所占空间，会非常的复杂和困难，必须先将mysqldump -A全库...
在MysQL5.6版本中，可以把undo log 回滚日志分离到一个单独的表空间里；其缺点是不能回收空间大小，until MysQL5.7，but MariadDB10.1暂不支持。 本文介绍并演示MysQL5.7是如何在线收缩undo log的。 undo log日志是保存在共享表空间ibdata1文件中的，随着数据库的运行时间的不断增长，ibdata1文件会越来越大，在以往的MySQL数据库版本中，如果我们想要回收ibdata1文件所占空间，会非常的复杂和困难，必须先将mysqldump -A全库导出...
asynchronous 异步复制 fully synchronous 全同步复制 Semisynchronous 半同步复制asynchronous replication原理：在异步复制中，master写数据到binlog且sync，slave request binlog后写入relay-log并flush disk优点：复制的性能最好缺点：master挂掉后，slave可能会丢失事务代表：MySQL原生的复制fully synchronous replication原理：在全同步复制中，master写数据到binlog且sync，所有slave request binlog后写入relay-log并flus...