和Mysql一样，Redis也有慢日志，用于记录超过给定时间的命令。可以在redis.conf文件中看到 相应的配置：有两个配置，slowlog-log-slower-than和slowlog-max-len，我这里是改过的，默认值不是这个0和5。slowlog-log-slower-than设置超过这个时间（微妙）的命令就会被添加到慢日志当中。slowlog-max-len设置慢日志当中最多保存多少条记录我这里slowlog-log-slower-than设置的0，slowlog-max-len设置的5，就是说所有的命令都会被记录到...
1.前置工作 1.虚拟机环境简介 Linux版本:Linux localhost.localdomain 3.10.0-862.el7.x86_64 #1 SMP Fri Apr 20 16:44:24 UTC 2018 x86_64 x86_64 x86_64 GNU/Linux ip地址:192.168.1.4(虚拟机Nat配置可参考我的CSDN博客https://blog.csdn.net/yanshaoshuai/article/details/97689891) Java环境:java 12.0.2(java环境安装可以参考我的CSDN博客https://blog.csdn.net/yanshaoshuai/article/details/87868286) 2.用户及权限配置 由...
redis loglevel 安装默认的设置为 verbose1）debug：会打印出很多信息，适用于开发和测试阶段2）verbose（冗长的）：包含很多不太有用的信息，但比debug要清晰一些3）notice：适用于生产模式4）warning : 警告信息例：loglevel notice
apache_log------>logstash----->redis---->logstash----->es日志写到redis中 redis安装配置略input{path => "/var/log/access_log"type => "acccess_log"start_postition => "beginning"} output{redis{host => "ip"port => 6379db => "2"data_type => "list"key => "access_log"} } logstash从redis中读取日志input{redis{host => "ip"port => 6379db => "2"data_type => "list"key => "access_log"type => "access_log"} } filt...
转载自http://www.run-debug.com/?p=674192.168.110.21 主 192.168.110.31 从 #两台服务器都安装redis #下载最新稳定版本：http://redis.io/download wget http://download.redis.io/releases/redis-2.8.19.tar.gz#安装 tar -zxvf redis-2.8.19.tar.gz cd redis-2.8.19 more README make#安装tclsh8.5 make test #You need tclsh8.5 in order to run the Redis test ldconfig -p |grep tcl #libtcl8.4.so (libc6,x86-64) => /usr/l...
filebeat客户端配置文件--filebeat.prospectors: - type: log harvester_limit: 12 close_inactive: 35m paths: ["/opt/app/log/*.log"] #exclude_lines: [ "disconected from"] multiline.pattern: ^[0-9]{4}-[0-9]{2}-[0-9]{2} multiline.match: after multiline.negate: true output: redis: hosts: ["61.148.68.110"] port: 6877 password: "kxxd123@#" key: "Online:log" data_type: "li...
Redis是单线程运行的，一个慢执行，会让后续的大量执行延时，吞吐量也会极大的降低。记录、查询、监控Redis慢执行意义重大。Redis的slowlog只记录在内存中，效率很高，不用过于担心影响性能。题外话，Redis确实是一个比较完备的工具，不是简单的内存数据库那么简单。 配置slowlog `config get slowlog-log-slower-than` 查询log的时间阀值(微秒，一毫秒等于1000微秒)，大于该数字的语句才会记录。负数表示不记录，0记录所有的。 ...
1. 部署环境2. 架构拓扑3. nginx安装 安装在192.168.176.128服务器上 这里安装就简单粗暴了直接yum安装nginx [root@manager ~]# yum -y install epel-release [root@manager ~]# yum -y install nginx 检查是否安装成功(这里选择了查看版本号) [root@manager ~]# nginx -V nginx version: nginx/1.12.2 built by gcc 4.8.5 20150623 (Red Hat 4.8.5-16) (GCC) built with OpenSSL 1.0.2k-fips 26 Jan 2017 TLS SNI support enabl...
redis慢查询日志和mysql一样redis也有慢查询日志，redis的慢查询日志默认是开启的。针对慢查询日志，主要是设置两个参数，一个是执行时长，单位是微秒，另一个是慢查询日志的长度。当一个新的命令被写入日志时，最老的一条会从命令日志队列中被移除。编辑配置文件，文件中搜素slowlog，可以设置以下几个参数，一般情况下保持默认即可：[root@aminglinux-149 ~]# vim /etc/redis.conf slowlog-log-slower-than 1000 //单位ms，表示慢...
ELK快速入门三-logstash收集日志写入redis 用一台服务器部署redis服务，专门用于日志缓存使用，一般用于web服务器产生大量日志的场景。 这里是使用一台专门用于部署redis ，一台专门部署了logstash，在linux-elk1ELK集群上面进行日志收集存到了redis服务器上面，然后通过专门的logstash服务器去redis服务器里面取出数据在放到kibana上面进行展示 部署redis 下载安装redis[root@linux-redis ~]# wget http://download.redis.io/rele...
之前的文档介绍了ELK架构的基础知识，日志集中分析系统的实施方案：- ELK+Redis- ELK+Filebeat - ELK+Filebeat+Redis- ELK+Filebeat+Kafka+ZooKeeperELK进一步优化架构为EFK，其中F就表示Filebeat。Filebeat即是轻量级数据收集引擎，基于原先Logstash-fowarder 的源码改造出来。换句话说：Filebeat就是新版的 Logstash-fowarder，也会是ELK Stack在shipper端的第一选择。这里选择ELK+Redis的方式进行部署，下面简单记录下ELK结合Re...
AOF日志与RDB是Reids中两大持久化机制，当服务器或者Reids宕机的时候可以通过这两大机制恢复Redis的数据。先说说AOF日志吧，在执行一条操作请求时，Redis先将命令在内存中执行，之后再将命令写到AOF日志中，与我们熟悉的MySQL的redo log日志先写日志再执行sql的顺序刚好相反。这么做的好处主要有两点：先执行命令再写入AOF日志确保命令不存在语法错误能正常的被执行； 不阻塞主线程；在Redis中AOF日志有三种写回的策略：Always，同...
一、部署redis 1、下载redis [root@linux-node2 ~]# wget http://download.redis.io/releases/redis-4.0.6.tar.gz [root@linux-node2 ~]# tar -zxvf redis-4.0.6.tar.gz [root@linux-node2 ~]# mv redis-4.0.6 /usr/loca/src [root@linux-node2 ~]# cd /usr/local/src/redis-4.0.6 [root@linux-node2 redis-4.0.6]# make [root@linux-node2 redis-4.0.6]# ln -sv /usr/local/src/redis-4.0.6 /usr/local/redis [root@linux-node2 r...
接着上篇内容继续往下执行。 首先pom.xml 添加redis的引用，因为开始建项目没有，自动生成redis的引用，然后手动添加进去。添加成功以后看我们的配置文件添加我们的日志类和缓存 缓存方法结果： http://localhost:8080/set?key=lxh2&&value=1001 http://localhost:8080/getPerson?id=2本地还需要下载redis server服务，下载一个客户端可以看到缓存的内容。
一，创建日志的备份目录[root@yjweb crontab]# mkdir /data/logs/redislogsbackup 说明：刘宏缔的架构森林是一个专注架构的博客，地址：https://www.cnblogs.com/architectforest 对应的源码可以访问这里获取： https://github.com/liuhongdi/ 说明：作者:刘宏缔 邮箱: 371125307@qq.com 二，编写日志切分的脚本:[root@yjweb crontab]# vi /data/web/crontab/split_redis_logs.sh代码:#!/bin/bash # 备份redis的日志#...