对于一些数据量较大的系统，面临的问题除了是查询效率低下，还有一个很重要的问题就是插入时间长。我们就有一个业务系统，每天的 对于一些数据量较大的系统，面临的问题除了是查询效率低下，还有一个很重要的问题就是插入时间长。我们就有一个业务系统，每天的数据导入需要4-5个钟。这种费时的操作其实是很有风险的，假设程序出了问题，想重跑操作那是一件痛苦的事情。因此，提高大数据量系统的MySQL insert效率是很有必要的。 经过...
1. 选择最有效率的表名顺序 SQL的解析器按照从右到左的顺序处理FROM子句中的表名, FROM子句中包含多个表的情况下,你必须选择记录 1. 选择最有效率的表名顺序 SQL的解析器按照从右到左的顺序处理FROM子句中的表名, FROM子句中包含多个表的情况下,你必须选择记录条数最少的表作为基础表。 例如: 表 TAB1 16,384条记录 表 TAB2 1条记录 选择TAB2作为基础表 (最好的方法): select count(*) from tab1,tab2 ----执行时间0.96秒 选...
复制（Replication）：通过复制执行过的语句或者数据集从主服务器上复制到一个或多个从服务器上实现多个数据库服务器之间数据库的 复制（Replication）：通过复制执行过的语句或者数据集从主服务器上复制到一个或多个从服务器上实现多个数据库服务器之间数据库的同步。 MySQLs built-in replication capability is the foundation for building large, highperformance applications on top of MySQL. MySQL supports two kinds of...
在项目中做权限控制时，需要用组织阶层来控制能够访问的数据，比如A组织的人可以看到其下属组织的人员数据，或者只有A组织是B组织 在项目中做权限控制时，需要用组织阶层来控制能够访问的数据，比如A组织的人可以看到其下属组织的人员数据，或者只有A组织是B组织上级的时候才有看B组织人员数据的权利。根据需求需要构筑DB的表结构，如下（ORG_RANK） 组织ID(PK) 上位组织ID ORG_ID HIGH_ORG_ID 根据上面的结构，使用Oracle的树查询...
笔者在看Oracle性能优化一书时，讲到用exists替代in,用表链接替代exists，关于前者，一般效果比较明显，exists效率明显比in高 笔者在看Oracle性能优化一书时，讲到用exists替代in,用表链接替代exists，关于前者，一般效果比较明显，exists效率明显比in高，但是如果要想表连接的效率比exists高，必须在from子句中，将记录多的表放在前面，记录少的表放后面。 关于select... bulk collect into ... limit ...或fetch... bulk c...
F、DB_block_checksum=true，因此增加了性能负担。（为了保证数据的一致性，oracle的写数据的时候加一个checksum在block上， 一、SGA 1、Shared pool tunning Shared pool的优化应该放在优先考虑，因为一个cache miss在shared pool中发生比在data buffer中发生导致的成本更高，由于dictionary数据一般比library cache中的数据在内存中保存的时间长，所以关键是library cache的优化。 Gets：（parse）在namespace中查找...
性能优化有时就这么简单 一、概述 最近有一个系统（aix6.1+Oracle10.2.0.5 RAC）CPU每五分钟就达到百分之百，这个系统是监控系统 性能优化有时就这么简单 一、概述 最近有一个系统（aix6.1+Oracle10.2.0.5 RAC）CPU每五分钟就达到百分之百，这个系统是监控系统，针对所有运行系统每五分钟取数，所以之前也没太在意， 其实在年前就有过这种情况，只是把执行频繁的语句发送给项目组，有针对系统运行环境调整了一下SGA等大小，只是不告...
【背景】某业务数据库load 报警异常，cpu usr 达到30-40 ，居高不下。使用工具查看数据库正在执行的sql ，排在前面的大部分是： 【背景】某业务数据库load 报警异常，cpu usr 达到30-40 ，居高不下。使用工具查看数据库正在执行的sql ，排在前面的大部分是：infoend_time ORDER BY id asc LIMIT 149420 ,20;表的数据量大致有36w左右，该sql是一个非常典型的排序+分页查询：order by col limit N,OFFSET M , MySQL 执行此类sql时需要...
一、保留区 没有被PIN住大对象的加载、老化将会使共享池产生碎片，Oracle想了个方法解决这个问题，它专门在共享池开辟一块区域， 一、保留区 没有被PIN住大对象的加载、老化将会使共享池产生碎片，Oracle想了个方法解决这个问题，它专门在共享池开辟一块区域，所有大小超过4400字节的对象，将在此专门开辟的区域中分配空间，这块区域被称为保留区。这样，让大对象和小对象分开存储，可以减少大对象的加载、老化以大量小对象产生的影...
Oracle性能优化 之 游标及SQL，这些SQL语句严格来说是无法共享游标（也就是共享执行计划）的，但是这些语句所需要执行计划其实都 一、游标 我们要先说一下游标这个概念。 从Oracle数据库管理员的角度上说，游标是对存储在库缓存中的可执行对象的统称。SQL语句是存储在库缓存中的，它是游标。除了它之外，还有Oracle的存储过程也是存储在库缓存中的可执行对象，从Oracle DBA的角度上说，它也是游标。Oracle也把它算为游标，在某些和...
查询、新增、修改及删除数据库等操作是影响web应用程序性能指标的重大因素。下面一些常见的建议可以提高查询性能问题。 查询、新增、修改及删除数据库等操作是影响web应用程序性能指标的重大因素。下面一些常见的建议可以提高查询性能问题。 1. 优化JDBC连接 采用数据库连接池机制可以将曾打开的数据库连接保存在缓存中，这样程序其他部分就可以继续利用，从而节省了数据库连接耗费的时间。 2. 提高select子句的查询速度 （1）建...
对于一些数据量较大的系统，数据库面临的问题除了查询效率低下，还有就是数据入库时间长。特别像报表系统，每天花费在数据导入上的时间可能会长达几个小时或十几个小时之久。因此，优化数据库插入性能是很有意义的。 经过对MySQL innodb的一些性能测试，发现对于一些数据量较大的系统，数据库面临的问题除了查询效率低下，还有就是数据入库时间长。特别像报表系统，每天花费在数据导入上的时间可能会长达几个小时或十几个小时之久。...
通过根据服务器目前状况，修改MySQL的系统参数，达到合理利用服务器现有资源，最大合理的提高MySQL性能。 1、目的： 通过根据服务器目前状况，修改MySQL的系统参数，达到合理利用服务器现有资源，最大合理的提高MySQL性能。 2、服务器参数： 32G内存、4个CPU,每个CPU 8核。 3、MySQL目前安装状况。MySQL目前安装，用的是MySQL默认的最大支持配置。拷贝的是my-huge.cnf.编码已修改为UTF-8.具体修改及安装MySQL,可以参考<<Linux系统上...
受博文视点所邀，最近正开始编写一本关于MySQL性能优化与架构设计方面的技术书籍（书名暂时还未确定），考虑到MySQL数据库其入门简单的特点和基本的用户操作手册中英文版本都有的情况，这本书的内容将定位在MySQL中高级技术，适合于对MySQL已经有一个基本了受博文视点所邀，最近正开始编写一本关于MySQL性能优化与架构设计方面的技术书籍（书名暂时还未确定），考虑到MySQL数据库其入门简单的特点和基本的用户操作手册中英文版本都...
mysql分解连接的总结(来自于高性能MySQL以及自己网站性能优化) 许多高性能的站点都用了“分解连接”技术，也就是把单个多表连接查询改成多个但表查询，然后在程序中合并数据，比如： select a.*,b.* from A a join B b on a.id = b.id 可以替换为: select a.*mysql分解连接的总结(来自于高性能MySQL以及自己网站性能优化)许多高性能的站点都用了“分解连接”技术，也就是把单个多表连接查询改成多个但表查询，然后在程序中合并数据...