package com.spark_sql2 3 import java.util.Properties4 import org.apache.spark.sql.{DataFrame, SparkSession}5 6 object DataFromMysql {7 def main(args: Array[String]): Unit = {8 //todo:1、创建sparkSession对象9 val spark: SparkSession = SparkSession.builder().appName("DataFromMysql").master("local[2]").getOrCreate() 10 //todo:2、创建Properties对象，设置连接mysql的用户名和密码 11 val...
1.mysql逻辑框架简介和其它数据库相比，MySQL 有点与众不同，它的架构可以在多种不同场景中应用并发挥良好作用。主要体现在存储引擎的架构上，插件式的存储引擎架构将查询处理和其它的系统任务以及数据的存储提取相分离。这种架构可以根据业务的需求和实际需要选择合适的存储引擎。 各层介绍： 1.1 连接层 最上层是一些客户端和连接服务，包含本地sock 通信和大多数基于客户端/服务端工具实现的类似于tcp/ip 的通信。主要完成一些...
1.什么是mysql ? MySQL 是一个关系型数据库管理系统，由瑞典MySQL AB 公司开发，目前属于Oracle 公司。? Mysql 是开源的，可以定制的，采用了GPL 协议，你可以修改源码来开发自己的Mysql 系统。? MySQL 使用标准的SQL 数据语言形式。? Mysql 可以允许于多个系统上，并且支持多种语言。这些编程语言包括C、C++、Python、Java、Perl、PHP、Eiffel、Ruby 和Tcl 等。? MySQL 支持大型数据库，支持5000 万条记录的数据仓库，32 位系统表...
sqllite to mysql 工具 sqllite 转 mysql标签：targe style mys logs ref log mysq font mysql 本文系统来源：https://www.cnblogs.com/mingjing/p/12883099.html
一 前言 本篇内容是关于 基本的数据库操作，建表，表结构修改等内容； 学习本篇的基础是知识追寻者以前发布的文章： 《SQL-你真的了解什么SQL么？》 《SQL-小白最佳入门sql查询一》 《SQL-小白最佳入门sql查询二》 《SQL- 多年开发人员都不懂的插入与更新删除操作注意点》 《SQL-SQL事物操作》 《SQL-Mysql数据类型》 公众号：知识追寻者知识追寻者(Inheriting the spirit of open source, Spreading technology knowledge;)二 SQ...
初用MySQL Mysql示例库 Navicat15查看初始密码 MySQl首次启动会创建“超级管理员账号”root@localhost,初始密码存储在日志文件中，通过grep搜索并查看： grep ‘temporary password‘ /var/log/mysqld.log 进入mysql mysql -u root -p通过键入密码（上一步查询到的密码）的方式以root身份进入mysql 请注意，这里的root身份是指mysql系统中的“超级管理员”root，而不是操作系统的root，因为如下图，只密码正确，以es用户也可以以...
目录前言一、二叉查找树(BST)：不平衡二、平衡二叉树(AVL)：旋转耗时三、红黑树：树太高四、B树：为磁盘而生五、B+树六、感受B+树的威力七、总结参考文献 前言 在MySQL中，无论是Innodb还是MyIsam，都使用了B+树作索引结构(这里不考虑hash等其他索引)。本文将从最普通的二叉查找树开始，逐步说明各种树解决的问题以及面临的新问题，从而说明MySQL为什么选择B+树作为索引结构。一、二叉查找树(BST)：不平衡 二叉查找树(BST，Binary ...
TABLE Test_Table (Ukey_A int not null, Ukey_B varchar(10) not null, Col_C varchar(100),primary key (Ukey_A, Ukey_B) );插入操作有两种情形需要考虑，一种是不重复INSERT否则UPDATE，另一种是不重复INSERT否则Do Nothing。 二、Oracle Oracle可使用Merge Into来实现此功能，大概在9i时已经支持，后来在10g时又进行了增强。 示例SQL如下：-- 情形1 MERGE INTO Test_Table A USING (SELECT COUNT(*) AS cnt FROM Test_Tabl...
一 前言 本篇内容是关于mysql游标和触发器的知识，学习本篇的基础是知识追寻者之前发过的文章（公众号读者看专辑） 《SQL-你真的了解什么SQL么？》 《SQL-小白最佳入门sql查询一》 《SQL-小白最佳入门sql查询二》 《SQL- 多年开发人员都不懂的插入与更新删除操作注意点》 《SQL-SQL事物操作》 《SQL-Mysql数据类型》 《SQL-mysql视图的前世今生》 《SQL-mysql储存过程》 公众号：知识追寻者知识追寻者(Inheriting the spirit of op...
链接地址：【QTMysql】MySQL安装及QT连接MySQL驱动编译操作步骤 目录MySQL安装1、下载2、解压3、添加环境变量4、创建my.ini文件及data文件夹5、命令提示符初始化MySQL及修改密码6、完成QT连接MySQL1、修改 mysql.pro 文件2、编译 MainGW 版驱动3、创建测试项目 MySQL安装1、下载 MySQL官网: https://dev.mysql.com/downloads/mysql/.下载安装包时，需要根据自身需求选择x86(win32)或win64MySQL版本的选择及对应，MySQL 7因为功能齐...
一 前言 本篇是MYSQL高级进阶篇内容第二篇，学习本篇的基础是知识追寻者之前发布过的文章，尤其是《MYSQL架构入门篇》重中之重； 《SQL-你真的了解什么SQL么？》 《SQL-小白最佳入门sql查询一》 《SQL-小白最佳入门sql查询二》 《SQL- 多年开发人员都不懂的插入与更新删除操作注意点》 《SQL-SQL事物操作》 《SQL-Mysql数据类型》 《SQL-mysql视图的前世今生》 《SQL-mysql储存过程》 《SQL-mysql游标与触发器》 《SQL-mysql用户权...
一 前言 MySQL 5.7.8 之后 支持 JSON （由rfc7159规定）数据类型，其能在字段中使用json 类型，做到了自动校验是否为json类型数据，否则插入数据会报异常；其次，储存json数据内部做到了优化储存，能够快速读取json类型数据，比如无需将二进制json转为文本形式后读取； 《SQL-你真的了解什么SQL么？》 《SQL-小白最佳入门sql查询一》 《SQL-小白最佳入门sql查询二》 《SQL- 多年开发人员都不懂的插入与更新删除操作注意点》 《SQL-...
DataX安装使用实现MySQL到MySQL数据同步 1.前置条件： 1.1jdk安装jdk安装前往官网，这里我安装jdk-8u261解压 sudo mkdir -p /opt/moudle sudo tar -zxvf jdk-8u261-linux-x64.tar.gz -C /opt/moudle/设置环境变量 export JAVA_HOME=/opt/moudle/jdk1.8.0_261 export JRE_HOME=${JAVA_HOME}/jre export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib export PATH=${JAVA_HOME}/bin:$PATH刷新配置 source /etc/profile检查java java...
概要 postgesql 12备份/恢复脚本 时区设置mysql 5.6备份/恢复脚本 时区设置概要 postgresql 和 mysql 是最常用的 2 种开源关系数据库, 很多项目也会优先选用这 2 种数据库. 通过 docker 来使用这 2 种数据库的时候, 部署非常方便, 没什么好说的. 这里简单总结下数据库的备份/恢复和时区设置问题. postgesql 12 备份/恢复脚本 1 DOCKER_CONTAINER=pg12 2 DATE=`date +%Y%m%d-%H%M` 3 BACK_DATA=${DOCKER_CONTAINER}-data-${DATE}...
SQL 1.什么是SQL？Structured Query Language：结构化查询语言其实就是定义了操作所有关系型数据库的规则。每一种数据库操作的方式存在不一样的地方，称为“方言”。2.SQL通用语法1. SQL 语句可以单行或多行书写，以分号结尾。2. 可使用空格和缩进来增强语句的可读性。3. MySQL 数据库的 SQL 语句不区分大小写，关键字建议使用大写。4. 3 种注释* 单行注释: -- 注释内容 或 # 注释内容(mysql 特有) * 多行注释: /* 注释 */3. SQL分...