首页 / MYSQL / MySQL巧用sum,case...when...优化统计查询

MySQL巧用sum,case...when...优化统计查询

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了MySQL巧用sum,case...when...优化统计查询，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含4086字，纯文字阅读大概需要6分钟。

内容图文

最近在公司做项目，涉及到开发统计报表相关的任务，由于数据量相对较多，之前写的查询语句查询五十万条数据大概需要十秒左右的样子，后来经过老大的指点利用sum,case...when...重写SQL性能一下子提高到一秒钟就解决了。这里为了简洁明了的阐述问题和解决的方法，我简化一下需求模型。

现在数据库有一张订单表（经过简化的中间表），表结构如下：

CREATE TABLE `statistic_order` (
  `oid` bigint(20) NOT NULL,
  `o_source` varchar(25) DEFAULT NULL COMMENT ‘来源编号‘,
  `o_actno` varchar(30) DEFAULT NULL COMMENT ‘活动编号‘,
  `o_actname` varchar(100) DEFAULT NULL COMMENT ‘参与活动名称‘,
  `o_n_channel` int(2) DEFAULT NULL COMMENT ‘商城平台‘,
  `o_clue` varchar(25) DEFAULT NULL COMMENT ‘线索分类‘,
  `o_star_level` varchar(25) DEFAULT NULL COMMENT ‘订单星级‘,
  `o_saledep` varchar(30) DEFAULT NULL COMMENT ‘营销部‘,
  `o_style` varchar(30) DEFAULT NULL COMMENT ‘车型‘,
  `o_status` int(2) DEFAULT NULL COMMENT ‘订单状态‘,
  `syctime_day` varchar(15) DEFAULT NULL COMMENT ‘按天格式化日期‘,
  PRIMARY KEY (`oid`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8

项目需求是这样的:

统计某段时间范围内每天的来源编号数量，其中来源编号对应数据表中的o_source字段，字段值可能为CDE,SDE,PDE,CSE,SSE。

来源分类随时间流动

一开始写了这样一段SQL：

select S.syctime_day,
  (select count(*) from statistic_order SS where SS.syctime_day = S.syctime_day and SS.o_source = ‘CDE‘) as ‘CDE‘,
  (select count(*) from statistic_order SS where SS.syctime_day = S.syctime_day and SS.o_source = ‘CDE‘) as ‘SDE‘,
  (select count(*) from statistic_order SS where SS.syctime_day = S.syctime_day and SS.o_source = ‘CDE‘) as ‘PDE‘,
  (select count(*) from statistic_order SS where SS.syctime_day = S.syctime_day and SS.o_source = ‘CDE‘) as ‘CSE‘,
  (select count(*) from statistic_order SS where SS.syctime_day = S.syctime_day and SS.o_source = ‘CDE‘) as ‘SSE‘
 from statistic_order S where S.syctime_day > ‘2016-05-01‘ and S.syctime_day < ‘2016-08-01‘ 
 GROUP BY S.syctime_day order by S.syctime_day asc;

这种写法采用了子查询的方式，在没有加索引的情况下，55万条数据执行这句SQL，在workbench下等待了将近十分钟，最后报了一个连接中断，通过explain解释器可以看到SQL的执行计划如下：

每一个查询都进行了全表扫描，五个子查询DEPENDENT SUBQUERY说明依赖于外部查询，这种查询机制是先进行外部查询，查询出group by后的日期结果，然后子查询分别查询对应的日期中CDE，SDE等的数量，其效率可想而知。

在o_source和syctime_day上加上索引之后，效率提高了很多，大概五秒钟就查询出了结果：

查看执行计划发现扫描的行数减少了很多，不再进行全表扫描了：

这当然还不够快，如果当数据量达到百万级别的话，查询速度肯定是不能容忍的。一直在想有没有一种办法，能否直接遍历一次就查询出所有的结果，类似于遍历java中的list集合，遇到某个条件就计数一次，这样进行一次全表扫描就可以查询出结果集，结果索引，效率应该会很高。在老大的指引下，利用sum聚合函数，加上case...when...then...这种“陌生”的用法，有效的解决了这个问题。
具体SQL如下：

 select S.syctime_day,
   sum(case when S.o_source = ‘CDE‘ then 1 else 0 end) as ‘CDE‘,
   sum(case when S.o_source = ‘SDE‘ then 1 else 0 end) as ‘SDE‘,
   sum(case when S.o_source = ‘PDE‘ then 1 else 0 end) as ‘PDE‘,
   sum(case when S.o_source = ‘CSE‘ then 1 else 0 end) as ‘CSE‘,
   sum(case when S.o_source = ‘SSE‘ then 1 else 0 end) as ‘SSE‘
 from statistic_order S where S.syctime_day > ‘2015-05-01‘ and S.syctime_day < ‘2016-08-01‘ 
 GROUP BY S.syctime_day order by S.syctime_day asc;

关于MySQL中case...when...then的用法就不做过多的解释了，这条SQL很容易理解，先对一条一条记录进行遍历，group by对日期进行了分类，sum聚合函数对某个日期的值进行求和，重点就在于case...when...then对sum的求和巧妙的加入了条件，当o_source = ‘CDE‘的时候，计数为1，否则为0；当o_source=‘SDE‘的时候......
这条语句的执行只花了一秒多，对于五十多万的数据进行这样一个维度的统计还是比较理想的。

通过执行计划发现，虽然扫描的行数变多了，但是只进行了一次全表扫描，而且是SIMPLE简单查询，所以执行效率自然就高了：

MySQL巧用sum,case...when...优化统计查询

标签：过多遍历 pos plain containe workbench 外部 data -o

本文系统来源：http://www.cnblogs.com/flywang/p/8025272.html

内容总结

以上是互联网集市为您收集整理的MySQL巧用sum,case...when...优化统计查询全部内容，希望文章能够帮你解决MySQL巧用sum,case...when...优化统计查询所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/495366.html

来源：【匿名】

【上一篇】四、mysql数据常用命令【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【MySQL巧用sum,case...when...优化统计查询】教程文章相关的互联网学习教程文章

mysql之多表查询【图】

今天在项目中遇到一个数据库查询的问题：三张表分别放置不同的东西：分享的音频相关数据、分享的文字图片说说、分享的主题相关数据。所有分享的东西都可看做新鲜事，现在要求从这三张表将相同的几个字段的数据全部查找出来按照发布时间先后排序（至于为什么不把这三张表的数据整到一张表里面这是由于数据库是这样设计的，咱这先不讨论数据库设计的好坏，就记录一下自己怎么使用三表联合查询将这三张表的数据都查找出来）。在网上找...

MySQL查询所有表的数据量【代码】

#数据库中所有表的信息 SELECT*FROM information_schema.TABLES WHERE TABLE_SCHEMA =‘数据库名‘ #数据库中每个表的数据量 SELECT table_name,table_rows FROM information_schema.tables WHERE TABLE_SCHEMA =‘数据库名‘ORDERBY table_rows DESC; 原文：https://www.cnblogs.com/shenyixin/p/14789074.html

MySql排名查询【代码】

-- ---------------------------------------------------------- -- 表的结构 `score` -- CREATETABLEIFNOTEXISTS `score` (`id` int(11) NOTNULL AUTO_INCREMENT,`name` varchar(32) NOTNULLDEFAULT‘‘,`scores` int(11) NOTNULLDEFAULT‘0‘,PRIMARYKEY (`id`) ) ENGINE=MyISAM DEFAULT CHARSET=utf8 AUTO_INCREMENT=6 ;-- -- 转存表中的数据 `score` -- INSERTINTO `score` (`id`, `name`, `scores`) VALUES (1, ‘a‘, 97),...

23个mysql查询语句

一查询数值型数据: SELECT * FROM tb_name WHERE sum > 100; 查询谓词:>,=,<,<>,!=,!>,!<,=>,=< 二查询字符串 SELECT * FROM tb_stu WHERE sname = ‘小刘‘ SELECT * FROM tb_stu WHERE sname like ‘刘%‘ SELECT * FROM tb_stu WHERE sname like ‘%程序员‘ SELECT * FROM tb_stu WHERE sname like ‘%PHP%‘ 三查询日期型数据 SELECT * FROM tb_stu WHERE date = ‘2011-04-08‘ 注:不同数据库对日期型数据存在差异: ：...

mysql三表查询

SELECT a.city,b.realname,b.address,c.goodsid FROM ims_ewei_shop_member a,ims_ewei_shop_member_address b,ims_ewei_shop_member_cart c where a.openid=b.openid and a.openid=c.openidSELECT a.city,b.realname,b.address,c.goodsid FROM (ims_ewei_shop_member a JOIN ims_ewei_shop_member_address b on a.openid=b.openid) JOIN ims_ewei_shop_member_cart c on a.openid=c.openid select username,psw,gname,tel from (t...

[整理] MySQL 使用空间函数 st_distance_sphere ，通过经纬度查询最近的地点【代码】

目录创建数据表插入数据函数st_distance_sphere 和 st_distance查询距离成都最近的5个地方创建数据表create table data_point (ID int auto_increment primary key,city varchar(64) not null,pt geometry not null ) 插入数据INSERT INTO data_point (city, pt) VALUES (‘成都‘,ST_GeomFromText(‘POINT(104.040 30.400)‘)); INSERT INTO data_point (city, pt) VALUES (‘巴中‘,ST_GeomFromText(‘POINT(106.43 31.51...

mysql多表查询【代码】

多表查询的作用：比如：我们想查询孙悟空的名字和他所在的部门的名字，则需要使用多表查询。如果一条 SQL 语句查询多张表，因为查询结果在多张不同的表中。每张表取 1 列或多列。多表查询的分类：准备sql-- 创建部门表CREATE TABLE dept( id INT PRIMARY KEY AUTO_INCREMENT, NAME VARCHAR(20) ); INSERT INTO dept (NAME) VALUES (‘开发部‘),(‘市场部‘),(‘财务部‘);-- 创建员工表CREATE TABLE emp ( id INT PRIMARY KEY AU...

mysql 数据库查询与实例。【代码】【图】

资料是从教材弄下来的，主要内容是练习实例，在写博文中学习命令行,当然也希望这篇博文能帮助其他人学习mysq数据库命令 SELECT 语句可以从一个或多个表中选取特定的行和列　SELECT 指定要查询的列名称，列与列之间用逗号隔开。 [ALL|DISTINCT] ALL(默认)显示所有行，包括重复行 | DISTINCT 消除重复行 [FROM表名[,表名]……] 指定要查询的表，可以指定两个以上的表，表...

如何提高 Mysql 查询性能？【图】

MySQL 查询优化器SELECT 执行过程那么如何提高 MySQL 的查询性能呢？首先你需要了解查询优化器处理 SQL 的全过程。以 SELECT 的 SQL 的执行过程为例，如下图所示。客户端发送一条 SELECT 查询给服务器；服务器先检查查询缓存，如果命中缓存，则立刻返回存储在缓存中的结果。否则进入下一阶段；服务器进行 SQL 解析、预处理、再由查询优化器生成对应的执行计划；MySQL 根据优化器生成的执行计划，调用存储引擎的 API 来执行查询；...

MySQL查询表内重复记录【代码】

(一)1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断 select * from people where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)2、删除表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断，只留有一个记录 delete from people where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1) and min(id) not in ...

mysql查询表内容【图】

一，说明：表名为student1，查询某个表里的字段select 字段名1，字段名1 form student;例如：查询student中的snameselect sname from student;2,查询某个表里的字段（字段下面有重复的内容），并且显示的查询结果不显示重复的select distinct class from student;3,查询加条件select * from student where sno=‘107‘;4,查询某个字段下满足某条件的（class为95031中ssex为女的）select * from student where class in(95031) and ...

Java,Mysql-根据一个给定经纬度的点，进行附近500米地点查询–合理利用算法【图】

LBS 球面距离公式http://wiki.myoa.info/zh-blog:20 Java,Mysql-根据一个给定经纬度的点，进行附近500米地点查询–合理利用算法最近做一个项目：需要查询一个站点（已知该站点经纬度）500米范围内的其它站点。所以，我首先想到的是，对每条记录，去进行遍历，跟数据库中的每一个点进行距离计算，当距离小于500米时，认为匹配。这样做确实能够得到结果，但是效率极其低下，因为每条记录都要去循环匹配n条数据，其消耗的时间可想而知...

linux C API连接并查询mysql5.7.9【代码】

开发环境：ubuntu16.04mysql5.7.9原生C APIVIM配置远程连接配置mysql允许远程连接的方法默认情况下，mysql只允许本地登录，如果要开启远程连接，则需要修改/etc/mysql/my.conf文件。一、修改/etc/mysql/my.conf 找到bind-address = 127.0.0.1这一行改为bind-address = 0.0.0.0即可二、为需要远程登录的用户赋予权限 1、新建用户远程连接mysql数据库grant all on *.* to admin@‘%‘ identified by ‘123456‘ with grant option;?...

五、mysql子查询

参考url:https://www.bilibili.com/video/BV12b411K7Zu?p=132 含义：出现在其他语句内部的select语句，称为子查询或内查询　　　　　内部嵌套其他select语句的查询，称为主查询或外查询示例：　　SELECT first_name FROM employees　　WHERE department_id in (　　　　SELECT department_id FROM departments　　　　WHERE location_id=1700　　) 分类：　　1) 按子查询出现的位置　　　　SELECT后面：仅仅支持标量子查询FROM 后面...

mysql 排序查询字段【代码】

排序查询语法: select 查询字段1from 表where 【筛选条件】order by 要排序字段2 asc升序、desc 降序，要排字段3 asc升序、desc降序如果不写默认为升序案例:查询员工信息，要求工资从高到低排序SELECT * FROM employees ORDER BY salary DESC;#案例2：查询部门编号>=90，按入职日期升序的员工信息SELECT* FROMemployees WHEREdepartment_id >=90 ORDER BY hiredate ASC;#案例：按表达式排序，如按年薪高低显示年薪SELECTsalary...

首页 / MYSQL / MySQL巧用sum,case...when...优化统计查询

MySQL巧用sum,case...when...优化统计查询

内容导读

内容图文

项目需求是这样的:

内容总结

内容备注

内容手机端

【MySQL巧用sum,case...when...优化统计查询】教程文章相关的互联网学习教程文章

mysql之多表查询【图】

MySQL查询所有表的数据量【代码】

MySql排名查询【代码】

23个mysql查询语句

mysql三表查询

[整理] MySQL 使用空间函数 st_distance_sphere ，通过经纬度查询最近的地点【代码】

mysql多表查询【代码】

mysql 数据库查询与实例。【代码】【图】

如何提高 Mysql 查询性能？【图】

MySQL查询表内重复记录【代码】

mysql查询表内容【图】

Java,Mysql-根据一个给定经纬度的点，进行附近500米地点查询–合理利用算法【图】

linux C API连接并查询mysql5.7.9【代码】

五、mysql子查询

mysql 排序查询字段【代码】

MYSQL - 相关标签

WHEN - 相关标签

统计 - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程