Mysql数据库大量删除操作及谈面向对象中的封装继承和多态原理（图）最近进行数据库操作，遇到一个问题，就是大量删除一个数据表中的数据后，由于设定了id是自增的，导致再插入时，默认生成的id会很大，这个时候想要再次插入新的数据，应该怎么办呢？1.明确目前最后一个id的大小select id from tags order by id DESC limit 0,1; 假设返回的是9，则设置数据表从10开始自增 2.修改这个数据表从10开始自增alter table tags auto_incre...
要掌握一个数据库，必须掌握基础的操作；要调优一个数据库，就必须掌握底层的原理。mysql每一个表都对应了一棵B+数，那么他就会存在叶子节点和非叶子节点，所有的节点都对应了一个16K的页。所有的叶子节点都存储的真实数据，叶子直接通过双向链表连接。 页内部所有数据通过单向链表连接，根据主键排序（没有主键会自动创建虚拟id），分为不同的分组（每一组叫一个槽）。 创建一个表的同时会创建一个聚簇索引，包含主键和所有列。用...
1.mysql工作原理和逻辑架构图2.mysql表类型和存储引擎 原文：https://www.cnblogs.com/gan-wenjun/p/8324244.html
一、背景我们工作中经常打交道的就是索引，那么到底什么是索引呢？例如，当一个SQL查询比较慢的时候，你可能会说给“某个字段加个索引吧”之类的解决方案。总的来说索引的出现其实就是为了提高数据查询的效率，就像书的目录一样。一本上千页页的英语字典，如果你想快速找到其中的某一个单词，在不借助目录的情况下，那我估计你可得找一会儿。同样，对于数据库的表而言，索引其实就是它的“目录”。实现索引的方式却有很多种，所以这...
mysql事务原理及MVCC事务是数据库最为重要的机制之一，凡是使用过数据库的人，都了解数据库的事务机制，也对ACID四个 基本特性如数家珍。但是聊起事务或者ACID的底层实现原理，往往言之不详，不明所以。在MySQL中 的事务是由存储引擎实现的，而且支持事务的存储引擎不多，我们主要讲解InnoDB存储引擎中的事 务。所以，今天我们就一起来分析和探讨InnoDB的事务机制，希望能建立起对事务底层实现原理的具 体了解。事务的特性原子性:事...
一 将具体分析binlog中的常用event二 Row格式事件核心 ROW_LOG_EVENT+TABLE_MAP_EVENT+GTID_EVENT三 event生效机制 在binlog cache中生效,然后刷新纪录写入binlog中四 具体event 内容 0 FORMAT_DESCRIPTION_EVENT 1 PREVIOUS_GTIDS_LOG_EVENT 2 GTID_LOG_EVENT 3 TABLE_MAP_EVENT 4 ROW_LOG_EVENT 5 QUERY_EVENT () 6 XID_EVENT 7 ROTATE_EVNET 8 STOP_EVENT五 详解 0 FORMAT_DESCRIPTION_EVENT ...
我们可以通过打开general log，查看mysqldump全库备份时执行的命令来了解mysqldump背后的原理。 打开general logmysql> set global general_log=on;其中，general log的存放路径可通过以下命令查看mysql> show variables like ‘%general_log_file%‘; 执行全库备份# mysqldump --master-data=2 -R --single-transaction -A -phello > 3306_20160518.sql其中--master-data指定为2指的是会在备份文件中生成CHANGE MASTER的注释。具...
原文 ? http://www.blogjava.net/wangxinsh55/archive/2014/11/19/420297.html http://www.linuxidc.com/Linux/2012-01/51615.htm 1 Map side tuning 参数 1.1 MapTask 运行内部原理 当map task 开始运算，并产生中间数据时，其产生的中间结果并非直接就简单原文? http://www.blogjava.net/wangxinsh55/archive/2014/11/19/420297.htmlhttp://www.linuxidc.com/Linux/2012-01/51615.htm1 Map side tuning 参数 1.1 MapTask 运行内部...
J2SE1.4以后， java 发布了新的IO类库，简称NIO。引入了全新的高效的IO机制，同时引入了基于Reactor设计模式的多路复用异步模式。 包含以下几种抽象数据类型 Channel(管道) NIO把它支持的IO对象抽象为channel。它模拟了通信连接，类似于IO中的stream。用户可J2SE1.4以后，java发布了新的IO类库，简称NIO。引入了全新的高效的IO机制，同时引入了基于Reactor设计模式的多路复用异步模式。 包含以下几种抽象数据类型 Channel(管道) NI...
基本概念 模块 RPC 通常采用客户机/服务器模型。请求程序是客户机，服务提供程序则是一个服务器。包括以下几个模块 通信模块：两个相互协作的通信模块实现请求-应答协议。同步方式和异步方式。 Stub程序：客户端和服务器端均包含Stub程序，代理程序。它使得基本概念 模块 RPC通常采用客户机/服务器模型。请求程序是客户机，服务提供程序则是一个服务器。包括以下几个模块 通信模块：两个相互协作的通信模块实现请求-应答协议。同步...
Java 网络编程 建立在TCP/IP协议基础上，致力于实现应用层。传输层向应用层提供了套接字Socket接口，它封装了下层的数据传输细节；应用层的程序通过Socket与远程主机建立连接和进行数据传输。 TCP TCP是Tranfer Control Protocol的 简称，是一种面向连接的保Java网络编程建立在TCP/IP协议基础上，致力于实现应用层。传输层向应用层提供了套接字Socket接口，它封装了下层的数据传输细节；应用层的程序通过Socket与远程主机建立连接和...
用户编写的作业比较复杂，相互之间存在依赖关系，这种依赖关系可以用有向图表示，我们称之为 工作流 。 1.JobControl实现原理： 传统做法：为每个作业创建相应的JobConf对象，并按照依赖关系依次(串行)提交各个作业。 //创建Job对象JobConf extractJobConf =用户编写的作业比较复杂，相互之间存在依赖关系，这种依赖关系可以用有向图表示，我们称之为工作流。 1.JobControl实现原理： 传统做法：为每个作业创建相应的JobConf对象，...
hadoop RPC 中用到的JDK开发工具包中的一些类。 主要包括java.lang. reflect 反射机制和动态代理相关类。java.net网络编程库,java.nio（NIO） 1.java反射机制和动态代理 反射机制是java语言的一个重要特性，它允许用户动态获取类的信息和动态调用对象的方法hadoop RPC中用到的JDK开发工具包中的一些类。 主要包括java.lang.reflect反射机制和动态代理相关类。java.net网络编程库,java.nio（NIO） 1.java反射机制和动态代理 反射机制...
网络通信模块是分布式系统中最底层的模块。直接支撑了上层分布式环境下复杂的进程间通信（IPC）。是所有分布式系统的基网络通信模块是分布式系统中最底层的模块。直接支撑了上层分布式环境下复杂的进程间通信（IPC）。是所有分布式系统的基础。远程过程调用RPC是一种常用的分布式网络通信协议。它允许运行于一台计算机的程序调用另外一台计算机的子程序，同时将网络的通信细节隐藏起来。 hadoop RPC特点 1.透明性 当用户在一台计算...
Hadoop 2.3.0已经发布了，其中最大的亮点就是集中式的缓存管理(HDFS centralized cache management)。这个功能对于提升Hadoop系统和上层应用的执行效率与实时性有很大帮助，本文从原理、架构和代码剖析三个角度来探讨这一功能。 主要解决了哪些问题 1.用户可Hadoop 2.3.0已经发布了，其中最大的亮点就是集中式的缓存管理(HDFS centralized cache management)。这个功能对于提升Hadoop系统和上层应用的执行效率与实时性有很大帮助，...