参考：https://blog.csdn.net/happylin0x29a/article/details/8855716问题原因：为了优化读取parquet格式文件，spark默认选择使用自己的解析方式读取数据，结果读出的数据就有问题。 解决办法：将配置项spark.sql.hive.convertMetastoreParquet 改为false就行了
当SQLite数据库中包含自增列时，会自动建立一个名为 sqlite_sequence 的表。这个表包含两个列：name和seq。name记录自增列所在的表，seq记录当前序号（下一条记录的编号就是当前序号加1）。如果想把某个自增列的序号归零，只需要修改 sqlite_sequence表就可以了。 UPDATE sqlite_sequence SET seq = 0 WHERE name = 'TableName';
select Cid from sc order by Sid HAVING score > #查询" 01 “课程比” 02 "课程成绩高的学生的信息及课程分数 select s.,a.,b.* from student s, (select Sid,score from sc where Cid =‘01’ ) a, (select Sid,score from sc where Cid =‘02’ ) b WHERE a.Sid = b.Sid and a.score > b.score and s.Sid = a.Sid #查询平均成绩大于等于 60 分的同学的学生编号和学生姓名和平均成绩 select s.,c. ,AVG(score) as se from stude...
上一篇博文说到相关子查询效率低下，那我们怎么能将不同表的信息一起查询出来呢？这就需要用到表联接。 和之前的UNION组合查询不同，UNION是将不同的表组合起来，也就是纵向联接，说白了就是竖着拼起来。 而表联接是通过笛卡尔乘积将表进行横向联接，所谓的通过笛卡尔乘积简单说就是两表的行依次相联再相加。要想更详细的理解可以百度下，毕竟本文主要是汇总SQL语句。 现在有如下两张表：这是当初老师布置的一份作业，我偷个懒就不...
SQL 不同于与其他编程语言的最明显特征是处理代码的顺序。在大数编程语言中，代码按编码顺序被处理，但是在SQL语言中，第一个被处理的子句是FROM子句，尽管SELECT语句第一个出现，但是几乎总是最后被处理。 每个步骤都会产生一个虚拟表，该虚拟表被用作下一个步骤的输入。这些虚拟表对调用者（客户端应用程序或者外部查询）不可用。只是最后一步生成的表才会返回给调用者。如果没有在查询中指定某一子句，将跳过相应的步骤。下面是...
dept as(select DeptId,DeptUpId from DeptInfo union all select dept.DeptId,DeptInfo.DeptUpId from dept inner join DeptInfoon dept.DeptUpId=DeptInfo.DeptId) select * from DeptInfo 执行后结果如下： 小结一下：使用递归时查阅资料后还要注意以下几点：1. 递归 CTE 定义至少必须包含两个 CTE 查询定义，一个定位点成员和一个递归成员。可以定义多个定位点成员和递归成员；但必须将所有定位点成员查询定义置于第一个...
? 原来的公司，在存储数据的时候，都是将数据存储在excel里面的，这也是大家用得最多、最熟悉的，但是随着公司做系统开发，就不可能继续放在excel里面操作了，因为这个就不方便了，我们公司也是这样的。 下面介绍一个非常简单的方法，可以一次性搞定你的所有数据库，并且不用什么外部工具之类，也不用什么命令。 如在excel里面有如下表格假如这里面数据很多，我们不可能一条一条的去录入，我只是只是兴例，其它的都是...
SELECT * FROM(SELECT a.id,a.catid,a.title,a.thumb,a.description,a.pinpai,b.count,b.posnum FROM buses17_brand AS a LEFT JOIN buses17_statistics_res AS b ON a.id=b.cxid where a.catid = 38 and b.type=2 and (a.energy like %纯电动% or a.energy like %混合动力% or a.energy like %燃料电池%) ORDER BY posnum DESC,count DESC limit 100)tempGROUP BY temp. pinpai order by posnum desc,count desc
System; using System.Collections.Generic; using System.ComponentModel; using System.Data; using System.Drawing; using System.Linq; using System.Text; using System.Windows.Forms; using System.Data.SqlClient;namespace WindowsFormsApplication2 {public partial class Form1 : Form{public Form1(){InitializeComponent();}private void button1_Click(object sender, EventArgs e){using (SqlConnection conn =new ...
写SQL语句的时候我们往往关注的是SQL的执行结果，但是是否真的关注了SQL的执行效率，是否注意了SQL的写法规范？ 以下的干货分享是在实际开发过程中总结的，希望对大家有所帮助！ 1. limit分页优化 当偏移量特别大时，limit效率会非常低。 SELECT id FROM A LIMIT 1000,10 很快 SELECT id FROM A LIMIT 90000,10 很慢 方案一：select id from A order by id limit 90000,10; 复制代码 如果我们结合order by使用。很快，0.04秒就OK。...
KING并没有上级，所以添加一个(+)号表示左连接 29.列出受雇日期早于直接上级的所有员工的编号，姓名，部门名称 SELECT e.ename,e.empno,d.dname FROM emp e,emp m,dept d WHERE e.mgr=m.empno AND e.deptno=d.deptno AND e.hiredate<m.hiredate ; 30.列出部门名称和这些部门员工的信息，同时列出那些没有员工的部门。 左右关联的问题，即使没有员工也要显示 SELECT d.deptno,d.dname,e.empno,e.ename FROM dept d,emp e WH...
创建数据库CREATE DATABASE 数据库名称; 删除数据库DROP DATABASE 数据库名称; 创建新表create table 表名(列 类型 ,列 类型 ,..); 根据已有的表创建新表1. create table 新表名 like 旧表名;2. create table 新表名 as select 列1,列2… from 旧表名 definition only 删除表DROP TABLE 表名; 新增列ALTER TABLE 表名 add column 列 类型; 添加主键ALTER TABLE 表名 add primary key(列); 删除主键ALTER TABLE 表名 drop primary k...
distinct简单来说就是用来去重的，而group by的设计目的则是用来聚合统计的，两者在能够实现的功能上有些相同之处，但是2者的性能差距很大 对于一个84万数据量的表，count(distinct(XXX))的查询需要20s，而group by仅需1s，性能相差20倍 原理分析： distinct方式就是两两对比，需要遍历整个表，大多数情况下都会导致对最终结果集进行一次排序； group by分组类似先建立索引再查索引，所以两者对比，小表distinct快，不用索引。大表...
本文会提到52条SQL语句性能优化策略。 1、对查询进行优化，应尽量避免全表扫描，首先应考虑在where及order by涉及的列上建立索引。 2、应尽量避免在where子句中对字段进行null值判断，创建表时NULL是默认值，但大多数时候应该使用NOT NULL，或者使用一个特殊的值，如0，-1作为默认值。 3、应尽量避免在where子句中使用!=或<>操作符，MySQL只有对以下操作符才使用索引：<，<=，=，>，>=，BETWEEN，IN，以及某些时候的LIKE。 4、应尽...
本篇文章中，主要说明SQL中的各种连接以及使用范围，以及更进一步的解释关系代数法和关系演算法对在同一条查询的不同思路。 多表连接简介 在关系数据库中，一个查询往往会涉及多个表，因为很少有数据库只有一个表，而如果大多查询只涉及到一个表的，那么那个表也往往低于第三范式，存在大量冗余和异常。 因此，连接(Join)就是一种把多个表连接成一个表的重要手段. 比如简单两个表连接学生表(Student)和班级(Class)表，如图: 进行...