bitsCN.com 情况描述：最近在分析服务器的slow-log和bin-log的时候，发现这两个log中有某些语句的execute time 极大例如：4294967295。log信息：#091008 21:40:04 server id 1 end_log_pos 3440531 Query thread_id=63169 exec_time=4294967295 error_code=0而出现这种极长执行时间的语句却不固定，最终通过以下的分析过程，找到了这个问题出现的原因updated at 2012-05-14: chinaunix 上也有网友表示遇到过这样的情况...
问题： 本案例要求使用Apach DBCP 连接数据池重构类DBUtility 为ConnectionSource类，并重构案例“实现DBUtility”，提供连接的获取，关闭功能的"中的EmpDAO类，在该类中使用ConnectionSource来获取连接。 方案： 直接使用JDBC访问数据库时，需要避免一下隐患： 1.每一次数据操作请求都是需要建立数据库连接，打开连接，存取数据和关闭数据等步骤。而建立和打开数据库是一件既耗资源有费时间的过程，如果频繁发生这样的数据库操作，...
转载请注明：http://blog.csdn.net/uniquewonderq问题：使用JDBC连接数据库，实现帐号转账业务。从A账户转账为B账户500元方案： 本案例中，要实现转账业务，需要执行两次更新操作，一是更新A账户的金额为在原有的金额基础上减去500元； 二是更新B账户的金额为在原有金额的基础上增加500元。这两次更新操作要么全部成功，要么全部失败（事务），来表示转账的成功或失败。如果A账户的金额更新为原来金额基础上减去500元，而B账户去没...
假设表结构和SQL语句如下： CREATE TABLE t1(id int, col1 varchar(64), col2 varchar(64), col3 varchar(64), PRIMARY KEY(id),key(col1,col2)); SELECT col1,col2,col3 FROM t1 WHERE col1>100 ORDER BY col2; a. 常规排序 从表t1中获取满足WHERE条件的记录 对于每条记录，将记录的主键+排序键(id,col2)取出放入sort buffer 如果sort buffer可以存放所有满足条件的(id,col2)对，则进行排序；否则sort buffer满后，进行排序并固化...
create table t7 ( id char(64) primary key, var int not null default 0, str1 varchar(3000) not null, str2 varchar(3000) not null, str3 varchar(3000) not null, str4 varchar(3000) not null key `idvar` (id,var))engine=myisam charset=utf8;create table t8 ( id char(64) primary key, var int not null default 0, str1 varchar(3000) not null, str2 varchar(3000) not null, str...
写在最前在MySQL的error log中，我们会经常性看到一些各类的Aborted connection错误，本文中会针对这类错误进行一个初步分析，并了解一个问题产生后的基本排查思路和方法。掌握这种方法是至关重要的，而不是出现问题了，去猜，去试。数据库出现问题的时候需要DBA在短时间内快速解决问题，因此一个好与坏的DBA，区别也在于此。Part2:种类[Warning] Aborted connection 305628 to db: ‘db‘ user: ‘dbuser‘ host: ‘hostname‘ (G...
原文:MySQL SYS CPU高的案例分析（一）【现象】 最近关注MySQL CPU告警的问题时，发现有一种场景，有一些服务器最近都较频繁的出现CPU告警，其中的现象是 SYS CPU占比较高。 下面的截图来源于“MySQL CPU报警”采集的文件 【问题分析】 可以分析出这服务器CPU升高的原因是由于表的高并发写入引起。优化方案通常是通知开发停止写入或降低写入频率。 究竟是什么原因导致高并发写入时CPU sys的占比这么高。 从采集的【Perf Stat】...
有台MySQL 5.6.21的数据库实例以写入为主，IO %util接近100% 写入IOPS很高 【分析过程】 1、通过iotop工具可以看到当前IO消耗最高的mysql线程 2、查看线程49342的堆栈，可以看到正在进行redo log的刷新，对应的是9号文件 3、9号文件对应的是redo log的第一个文件 为什么mysql进程会频繁的刷新redo log文件，要结合redolog的刷盘策略来分析，关键是innodb_flush_log_at_trx_commit参数， 默认是1，最安全，但在写压力大的...
原文:MySQL SYS CPU高的案例分析（二）后面又做了补充测试，增加了每秒context switch的监控，以及SQL执行时各步骤消耗时间的监控。 【测试现象一】 启用1000个并发线程的压测程序，保持压测程序持续运行，保持innodb_spin_wait_delay默认值不变 在10:17:14秒将innodb_spin_wait_delay值从默认值6调整为18，看到sys从40%降到20%TPS从1.7W增加到2W context switch从82W降到78W 【测试现象二】 开启SQL执行时各步骤消耗时间的...
原文:MySQL大事务导致的Insert慢的案例分析【问题】 有台MySQL服务器不定时的会出现并发线程的告警，从记录信息来看，有大量insert的慢查询，执行几十秒，等待flushing log，状态query end【初步分析】 从等待资源来看，大部分时间消耗在了innodb_log_file阶段，怀疑可能是磁盘问题导致，经过排查没有发现服务器本身存在硬件问题 后面开启线程上升时pstack的自动采集，定位MySQL线程等待的位置。 【分析过程】 部署了pstack的自动...
本文由云+社区发表一、 问题是这样来的 ? 2018年某个周末，接到连续数据库的告警，告警信息如下：二、 苦逼的探索过程 1、总体的思路 看到too many connection的报错信息，基本上可以把问题定位在： （1）机器负载飙升，导致SQL执行效率下降，导致连接推积 （2）业务访问量突增（或者有SQL注入现象），导致连接数打满 （3）出现“死锁”或者锁竞争严重，导致大量SQL堆积 2、排查过程 （1）机器的各项性能指标都显示正常， 没有出现...
本文由云+社区发表一、从常见的报错说起 ? 故事的开头我们先来看一个常见的sql报错信息：? 相信对于这类报错大家一定遇到过很多次了，特别对于OMG这种已内容生产为主要工作核心的BG，在内容线的存储中，数据大一定是个绕不开的话题。这里的数据“大”，远不止存储空间占用多，其中也包括了单个（表）字段存储多、大，数据留存时间长，数据冗余多，冷热数据不明显导致的体量大，访问峰值随着热点变化明显，逻辑处理复杂导致数据存储...
【问题现象】 开发同事反馈有应用在21:00-22:00之间出现大量超时报错。 【问题分析】 1、 从DB服务器慢查询指标来看，18:00后有大量的慢查询，累计产生了约9000条慢查询 2、 测试直接执行慢查询SQL语句，并没有发现性能问题 3、当时DBA同事在排障现场看到了线程执行时等待Writing to net。 之前我们碰到过大量Writing to net等待的情况，通常是DB服务器网卡流量打满导致。但这次从DB服务器网卡流量上看，并没有打满，而且比...
表格设计，考虑到组有组描述，成员有成员描述，图片有图片描述，为了减少冗余，满足第二范式，可以如下设计： （1） 组表包括： 1）组名 2) 组描述 （第一列唯一索引） (2) 成员包括： 1) 组名，成员名，用户描述 （前两列唯一索引） (3) 图像表包括： 1）组名，成员名，图像ID，图像描述 （前三列唯一索引） （4) 每一个特征表（一个clientFlag，一个特征对应一张表）包括： 1）组名，成员名，图像...
一、前言 分布式环境下数据库的读写分离策略是解决数据库读写性能瓶颈的一个关键解决方案，更是最大限度了提高了应用中读取 （Read）数据的速度和并发量。 在进行数据库读写分离的时候，我们首先要进行数据库的主从配置，最简单的是一台Master和一台Slave（大型网站系统的话，当然会很复杂，这里只是分析了最简单的情况）。通过主从配置主从数据库保持了相同的数据，我们在进行读操作的时候访问从数据库Slave，在进行写操作的时候访...