如需转载，请经本人同意。之前本人曾经写过一个使用 select ....into outfile原理导出数据的脚本，但该脚本值适用于本地快速导出，并不支持远程服务，故又编写了下面这个支持远程导出的脚本。该脚本支持导出文件检测、数据库信息检查。如果大家有好的建议欢迎留言评论。脚本总体而言比较简单，希望对大家有帮助脚本语言：python版本：2.7#!/usr/bin/python # -*- coding:UTF-8 -*- #@author Jane.Hoo #@date 2016/11/29from __futu...
思维导图前言在很多业务情况下，我们都会在系统中加入redis缓存做查询优化。如果数据库数据发生更新，这时候就需要在业务代码中写一段同步更新redis的代码。这种数据同步的代码跟业务代码糅合在一起会不太优雅，能不能把这些数据同步的代码抽出来形成一个独立的模块呢，答案是可以的。架构图canal是一个伪装成slave订阅mysql的binlog，实现数据同步的中间件。上一篇文章《canal入门》我已经介绍了最简单的使用方法，也就是tcp模式。...
package Test0; import java.io.BufferedReader; import java.io.File; import java.io.FileInputStream; import java.io.FilenameFilter; import java.io.InputStream; import java.io.InputStreamReader; import java.sql.DriverManager; import java.util.regex.Matcher; import java.util.regex.Pattern; import com.mysql.jdbc.Connection; import com.mysql.jdbc.Statement; public class Test00 { static Connection co...
今日总结： 一，数据库基础 ***** 二：mysql 的下载安装 ***** 三：修改密码 四 配置文件 *** 五：数据库基础语法 ****** 一，数据库基础： 1，数据库基础概念 1,之前储存到文件中 ，数据格式也是千差万别的 2，软件开发目录规范，规定了数据的存放位置，数据都是保存在本地的， 3，将保存数据的，存储到一个公共的地方 MySQL就...
目录一、mysql常用日志1.1 概述1.1.1 错误日志1.1.2 通用查询日志1.1.3 二进制日志(binlog)1.1.4 慢查询日志1.2 查询日志状态1.2.1 查看通用日志开启状态1.2.2 查看二进制日志开启状态1.2.3 查看慢查询日志功能是否开启1.2.4 查看慢查询时间设置1.2.5 在数据库中设置开启慢查询的办法（临时）二、备份与恢复2.1 概述2.2 备份类型2.2.1 从物理与逻辑的角度分类（逻辑备份、物理备份）2.2.2 从数据库的备份策略角度分类（完全备份、差...
day04一 、管理root用户密码1.1 修改密码1.2 恢复密码 二、用户授权与权限撤销2.1 授权2.2 撤销权限三、安装图形管理工具四 数据备份与恢复 ----- 完全备份与恢复4.1 完全备份4.2 完全恢复++++++++++++++++++++++++++++++++++一 、管理root用户密码（*操作系统管理员有权限管理）1.1 修改本机登录密码#mysqladmin -hlocalhost -uroot -p password "新密码"必须知道正确旧密码新密码才能设置成功1.2 恢复本机登录密码#vim ...
用户管理实际应用：MySQL数据库是信息系统中非常重要的一个环节， 默认有个root用户，但是这个用户权限太大，一般只在管理数据库时候才用。所以通常由管理员创建不同的管理账户，分配不同的操作权限，交给相应的人员使用。下面将详细介绍mysql数据库的用户创建、授权等操作。（一）用户查看： select user,authentication_string,host from user;（二）创建用户方法1：create user ‘test01‘@‘localhost‘ identified by ‘abc12...
??Kettle版本4.1.0打开Spoon软件，windows下面双击Spoon.bat即可。创建一个转换。创建两个数据源，一个是oracle的一个是mysql的。创建表输入。创建字段选择创建表输出，将输入表的value字段映射为输出表的str字段。注意：如果目标表没有，是新建的，则应该点击SQL按键进行SQL语句创建表。将三个步骤连接起来。创建一个作业创建一个转换创建一个定时job连接好job和transformation，运行job原文：http://blog.csdn.net/zhangdaiscott...
你能用的数据库引擎取决于mysql在安装的时候是如何被编译的。要添加一个新的引擎，就必须重新编译MYSQL。在缺省情况下，MYSQL支持三个引擎：ISAM、MYISAM和HEAP。另外两种类型INNODB和BERKLEY（BDB），也常常可以使用。 ISAM ISAM是一个定义明确且历经时间考验的数据表格管理方法，它在设计之时就考虑到数据库被查询的次数要远大于更新的次数。因此，ISAM执行读 取操作的速度很快，而且不占用大量的内存和存储资源。ISAM的...
需求近期在使用python写一套模拟API请求的监控项目，考虑数据可视化这方面就采用grafana来呈现，下面来看看怎么弄。数据源准备首先安装好mysql，将监控的日志数据写入到mysql之中。如下图：好了，这里就已经准备好了相关的测试模拟数据。那么下面就使用Grafana来配置图表看看。使用Grafana呈现table表格如果有不清楚Grafana怎么安装的朋友，可以点击这里查看如何安装部署。执行Grafana的启动脚本如下：[root@server86 grafana]# ca...
经理提出要求：对线上测试环境的mysql的所有数据库作备份[root@BJVM-CM-94 data]# cd /app/mysql/data/[root@BJVM-CM-94 data]# du -sh2.9G.经查看数据只有2.9G，数据容量不是很大，所以我选择了使用mysqldump进行备份[root@www ftp.scj.com]# ps -ef | grep mysqlroot 5642 1211 20 11:16 pts/0 00:00:00 grep mysqlroot 29558 1 0 Apr14 pts/1 00:00:00 /bin/sh /usr/local/mysql/bin/mysqld_safe --datadi...
前几天，加班到晚上10点多了，在回去的路上，朋友打来电话，说他们公司的开发维护人员在对线上系统进行版本更新时，不小心把线上的数据库给drop掉了，叫我过去救火，唉！ 虽然在运维界也混迹多年，这情况也是头一回见哈，怀着即兴奋又担心的心情去到现场，兴奋是因为可以好好的实战一下，担心是怕帮不到朋友，唉，废话不多说，上“战场”。 第一步，既然数据库都被干掉了，又没做主从，只好把所有相关系统程序关闭。 第二步，...
原文:MySQL 数据库查询数据，过滤重复数据保留一条数据---（MySQL中的row_number变相实现方法）转自： http://www.maomao365.com/?p=10564 摘要: 下文讲述MySQL数据库查询重复数据时，只保留一条数据的方法 实现思路: 在MySQL数据库中没有row_number函数，所以我们需变向实现此功能。 --1.基础数据表查看 mysql>select*from `maomao365.com`; +-------+------------+| keyId | infoB |+-------+------------+|1| mysql test ||...
linux下mysql数据库基础及客户端命令详解1.mysql数据库存储引擎: SHOW ENGINES; #查看mysql支持的存储引擎常见有如下两个存储引擎：MyISAM:每表三个文件： .frm: 表结构 .MYD：表数据 .MYI：表索引InnoDB：默认所有表共享一个表空间文件； 建议：每表一个独立的表空间文件；默认此功能没有打开 .frm: 表结构 .ibd: 表空间,包含表数据和表索引 .opt: 字符集和字符排序规则打开InnoDB每表创建独立的表空间文件功能办法: vim...
一、演示环境说明： 系统CentOS Linux release 7.2.1511 (Core) X_86 64位最小化安装mysql版本是官方二进制版本5.7.22-22，mysql采用的是二进制安装，单机上开启2个mysql实例，mysql实例要开启定时器event_scheduler=ON. 而且2个mysql实例都要开启Gtidxtrabackup 采用的是rpm包安装，版本是version 2.4.13MySQL备份方式采用每天一次全量备份和binlog增量备份二、模拟删除库，进行数据恢复演示：提示：当然此处只是演示，严禁生成环...