table_backup.sh #!/bin/bashflag=0 user=root pass=testmysql -u$user -p"$pass" -e "show databases;" &>/dev/null [ $? -ne 0 ] && read -p "Mysql do not running,start it?(`echo -e "\033[32myes/no\033[0m"`):" choice && flag=1 [[ "choice" -eq "yes" ]] && service mysqld start &>/dev/null && flag=0 [ $flag -eq 1 ] && exit 2 database=`mysql -u$user -p$pass -e "show databases;"|sed 1d|grep -v ‘schema‘`e...
#!/bin/shMYUSER=rootMYPASS=123123MYSOCK=/tmp/mysql.sockbackup_path=/testDBLIST="`mysql -u$MYUSER -p$MYPASS -e "show databases;" |grep -Ev ‘Database|mysql|schema‘`"DUMP="mysqldump -u$MYUSER -p$MYPASS -F -R -x"mkdir -p $backup_pathfor db in $DBLISTdoecho "db:"$dbTBLIST="$(mysql -u$MYUSER -p$MYPASS -e "show tables from $db;" |sed 1d)"for tb in $TBLISTdo$DUMP $db $tb |gzip >${backup_path}/mysqltest_...
where语句的优化 1.尽量避免在 where 子句中对字段进行表达式操作select id from uinfo_jifen where jifen/60 > 10000;优化后:Select id from uinfo_jifen where jifen>600000; 2.应尽量避免在where子句中对字段进行函数操作，这将导致mysql放弃使用索引 select uid from imid where datediff(create_time,‘2011-11-22‘)=0优化后select uid from imid where create_time> =‘2011-11-21‘ and create_time<‘2011-11-23’; 优化G...
代码如下:<?php for($i=0;$i< 100; $i++ ){ //echo "CREATE TABLE db2.members{$i} LIKE db1.members<br>"; echo "INSERT INTO members{$i} SELECT * FROM members WHERE mid%100={$i}<br>"; } ?> 2、不停机修改mysql表结构 同样还是members表，前期设计的表结构不尽合理，随着数据库不断运行，其冗余数据也是增长巨大，同事使用了下面的方法来处理： 先创建一个临时表： /*创建临时表*/ CREATE TABLE members_tmp LIKE members 然...
1、分库分表很明显，一个主表（也就是很重要的表，例如用户表）无限制的增长势必严重影响性能，分库与分表是一个很不错的解决途径，也就是性能优化途径，现在的案例是我们有一个1000多万条记录的用户表members,查询起来非常之慢，同事的做法是将其散列到100个表中，分别从members0到members99，然后根据mid分发记录到这些表中，牛逼的代码大概是这样子：代码如下 复制代码<?php for($i=0;$i< 100; $i++ ){//echo "CREATE TABLE...
根据经验，Mysql表数据一般达到百万级别，查询效率会很低，容易造成表锁，甚至堆积很多连接，直接挂掉；水平分表能够很大程度较少这些压力。1.按时间分表这种分表方式有一定的局限性，当数据有较强的实效性，如微博发送记录、微信消息记录等，这种数据很少有用户会查询几个月前的数据，如就可以按月分表。2.按区间范围分表一般在有严格的自增id需求上，如按照user_id水平分表：table_1 user_id从1~100wtable_2 user_id从101~200w...
为什么要分表 当一张表的数据达到几千万时，你查询一次所花的时间会变多，如果有联合查询的话，我想有可能会死在那儿了。分表的目的就在于此，减小数据库的负担，缩短查询时间。 mysql中有一种机制是表锁定和行锁定，是为了保证数据的完整性。表锁定表示你们都不能对这张表进行操作，必须等我对表操作完才行。行锁定也一样，别的sql必须等我对这条数据操作完了，才能对这条数据进行操作。 mysql proxy：amoeba 做mysql集群,利用amo...
#! /bin/bashBAKPATH=/data/mysql-backMYUSER=rootMYPASS="123456"SOCKET=/var/lib/mysql/mysql.sockMYCMD="mysql -u$MYUSER -p$MYPASS -S $SOCKET"MYDUMP="mysqldump -u$MYUSER -p$MYPASS -S $SOCKET -x -F -R"DBLIST=`$MYCMD -e "show databases;" |sed "1d" |egrep -v "_schema|test"`[ ! -d $BAKPATH ] && mkdir -p $BAKPATHfor dbname in $DBLISTdo TLIST=`$MYCMD -e "show tables from $dbname;" |sed "1d"` for tname...
table user(id int(11),money int(11) unsigned not null,date datetime ) partition by range(YEAR(date))(partition p2014 values less than (2015),partition p2015 values less than (2016),partition p2016 values less than (2017),partition p2017 values less than maxvalue );（2）List：把离散值分成集合，按集合划分，适合有固定取值列的表例：create table user(a int(11),b int(11) ) partition by list(b)(partition...
mysql分表和分区1.mysql分表什么是分表？分表是将一个大表按照一定的规则分解成多张具有独立存储空间的实体表，每个表都对应三个文件，MYD数据文件，MYI索引文件，frm表结构文件。如果是Innodb存储引擎，索引文件和数据文件存放在同一个位置。这些表可以分布在同一块磁盘上，也可以在不同的机器上。app读写的时候根据事先定义好的规则得到对应的的表明，然后去操作它。将单个数据库表进行拆分，拆分成多个数据表，然后用户访问的时...
对于大型的互联网应用，数据库单表的数据量可能达到千万甚至上亿级别，同时面临这高并发的压力。Master-Slave结构只能对数据库的读能力进行扩展，写操作还是集中在Master中，Master并不能无限制的挂接Slave库，如果需要对数据库的吞吐能力进行进一步的扩展，可以考虑采用分库分表的策略。 1.分表 在分表之前，首先要选中合适的分表策略（以哪个字典为分表字段，需要将数据分为多少张表），使数据能够均衡的分布在多张表中...
TABLE IF NOT EXISTS user1 (id int(11) NOT NULL AUTO_INCREMENT, name varchar(50) DEFAULT NULL, sex int(1) NOT NULL DEFAULT 0, PRIMARY KEY (id) ) ENGINE=MyISAM DEFAULT CHARSET=utf8 AUTO_INCREMENT=1 ; 2.用户2表 CREATE TABLE IF NOT EXISTS user2 ( id int(11) NOT NULL AUTO_INCREMENT, name varchar(50) DEFAULT NULL, sex int(1) NOT NULL DEFAULT 0, PRIMARY KEY (`id`) ) ENGINE=MyISAM DEFAUL...
mysqldump -uroot -poldboy oldboy >/opt/oldboy.sql 最简单的备份 1) mysql基于myisam引擎mysqldump -uroot -poldboy -B -x -F oldboy | gzip >/opt/oldboy.sql.gz2) 5.5以后默认是innodb(推荐)mysqldump -uroot -poldboy -B -F --single-transactio oldboy | gzip >/opt/oldboy.sql.gz二、多实例分库备份数据库（用于写shell脚本）主要思想就是把库列出来，一个for循环备份mysql -uroot -poldboy -e"sho...
表锁,行锁,都是为了保证数据的完整性,分表分表是把一个大表,分成若干个独立储存空间的表,每个表都对应MYD数据文件,MYI索引文件,FRM表结构文件,这些表可以分布在一个存储设备,也可以分在不同存储设备.相当于一个表变为多个表,如果这时候有APP已经在使用中,而且会对原表进行操作等等,需要开发修改代码,因为原来的一个表已经分成好几个,按照原来的表肯定是搜索不到的.将单表拆分,再根据一定算法,就可以将数据分散到多个表中,对数据量大...
void rollback() {final int initCount = session.getTargetCount();lock.lock();try {reset(initCount);} finally {lock.unlock();}if (session.closed()) {decrementCountToZero();return;}// 执行int started = 0;for (final RouteResultsetNode node : session.getTargetKeys()) {if (node == null) {LOGGER.error("null is contained in RoutResultsetNodes, source = "+ session.getSource());continue;}final BackendConnec...