目录1.使用系统中的某个文件作为swap分区1.1创建swapfile1.2格式化swap分区1.3检查当前swap分区情况1.4临时启用新建swap分区并查看情况1.5 关闭新建的swap分区并查看情况1.6永久启用新建的swap分区2.使用磁盘分区作为swap分区2.1创建分区并将分区修改为swap分区2.2刷新新分区并格式化swap分区2.3临时启用新建swap分区和关闭新建swap分区2.4永久启用新建的swap分区3.日志系统3.1搭建日志服务器3.2编辑另外一台服务器1.使用系统中的某...
概述最近这段时间在强化日志系统自身的稳定性和可靠性，一个稳定可靠的系统离不开监控，我们这里谈及的监控除了服务是否存活还有这些组件的核心metrics采集与抓取，为此我们将这些任务做成了定时任务来执行。由于大致的思路以及设计已经成型，所以今天来分享一下日志系统在定时任务这块的选型与设计。组件运行时监控从我之前分享的文章中不难看出我们日志系统的各个组件的选型：采集agent : Flume-NG消息系统 : Kafka实时流处理 : ...
一、安卓中的日志系统1.java中常用的两个日志System.out.println();//普通日志System.err.println();//警告日志2.android中常用的日志种类Log.e(Tag,"错误信息");Log.w(Tag,"警告信息");Log.i(Tag,"普通信息");Log.d(Tag,"调试信息");Log.v(Tag,"无用信息");ps：这个log.v神奇的地方就在于它没有用，它存在的意义竟然是供开发人员自娱自乐的，哦呵呵。。。二、安卓中的权限系统1.android常用的使用权限 在开发过程中，有时候我们...
导语 | 930变革后，公司明确了“开源协同、自研上云”的公司技术战略，通过自研业务上云，整合资源使用、推动架构能力互补，促进自研业务与云产品协同发展，同时实现产业互联网发展战略和促进腾讯云业务做大做强。公司也专门成立了组织架构单元大力推动公司级业务上云。为了响应这个号召，分布式日志系统（鹰眼）也在积极探索将原有业务迁入云端的方案。目录一、鹰眼平台介绍二、上云的背景三、组件上云架构优化和云上组件选型四、...
1、一个小故事我们先看一个故事。项目经理A带着一帮兄弟开发了一套复杂的企业ERP系统，这个系统一连开发了好几年，开发人员也换了好几拨。阶段一：最开始的时候，项目经理A安排小B在系统中添加日志功能，在控制台上打印一些必要的信息。最开始的时候，由于项目的功能比较少，于是小B就是用System.out.println的方式打印日志信息。经理A感觉这样使用比较方便，也便于项目小组人员的使用，于是就沿用了下来。阶段二：此时小B被借调到...
综合：Tomcat下相关的日志文件 Cataline引擎的日志文件，文件名catalina.日期.log Tomcat下内部代码丢出的日志，文件名localhost.日期.log（jsp页面内部错误的异常，org.apache.jasper.runtime.HttpJspBase.service类丢出的，日志信息就在该文件！） Tomcat下默认manager应用日志，文件名manager.日期.log 控制台输出的日志，Linux下默认重定向到catalina.out Access日志（Servlet.xml配置） 应用程序通过log4j.properties：${cata...
參考glog写了现有的Logging系统。直接有enum LoggingEnum{LOG_INFO,LOG_DBBUG,LOG_ERROR,LOG_WARNNING,LOG_END };几种等级的日志，实时刷到console上，异步延迟写到日志上，建立队列缓存日志，时间一到一起刷到file，好了，看下Logging实现：class Active; struct Buffer;enum LoggingEnum{LOG_INFO,LOG_DBBUG,LOG_ERROR,LOG_WARNNING,LOG_END };enum GLogColor {COLOR_DEFAULT,COLOR_RED,COLOR_GREEN,COLOR_YELLOW };class Loggin...
服务器编程中，日志系统需要满足几个条件.高效，日志系统不应占用太多资源.简洁，为了一个简单的日志功能引入大量第三方代码未必值得.线程安全，服务器中各个线程都能同时写出日志.轮替，服务器不出故障是不重启的，半年一年的日志放到一个文件会导致文件过大.及时保存，程序故障导致异常退出，此时需要通过日志诊断问题，不缓冲的日志系统更易用 著名的日志库有log4xxx系列，提供了非常灵活的功能，当然随之而来的代价就是庞大的库...
环境准备1. 三台服务器 10.1.34.215 10.1.34.216 10.1.34.2172. 全部关闭防火墙和selinux systemctl stop firewalld && systemctl stop firewalld sed -i ‘s/=enforcing/=disabled/g‘ /etc/selinux/config && setenforce 03. 全部配置系统环境 vim /etc/security/limits.conf 添加以下四行 注：星号不可少 * soft nofile 65536 * hard nofile 131072 ...
syslog服务syslogd：系统，负责记录非内核产生的日志信息klogd：内核，专门负责记录内核产生的日志信息kernel启动的相关日志kernel --> 物理终端(/dev/console) --> /var/log/dmesg查看kernel启动的相关日志#dmesg#cat /var/log/dmesg日志存储采取滚动的方式(日志切割)：messages messages.1 messages.2,...配置文件/etc/logrotate.conf[root@localhost ~]# cat /etc/logrotate.conf # see "man logrotate" for details # rotate...
最近对日志系统的采集机制进行了重构，增强了对单一主机上多个日志源采集的便捷性。重构之前重构之前的设计以日志类型为中心，一个日志类型对应一个独立的flume的配置模板，一个日志类型的一个日志源（具体到某个节点上特定的日志文件）对应一个flume配置文件（也即一个flume agent）。flume配置模板主要针对这个日志类型的日志文件名称、是否存在多行日志、日志首字符、目标接收方有关的配置等固定属性。光靠这些配置还不够，因为...
利用ELK+redis搭建一套nginx日志分析平台。logstash,elasticsearch,kibana 怎么进行nginx的日志分析呢？首先，架构方面，nginx是有日志文件的，它的每个请求的状态等都有日志文件进行记录。其次，需要有个队列，redis的list结构正好可以作为队列使用。然后分析使用elasticsearch就可以进行分析和查询了。我们需要的是一个分布式的，日志收集和分析系统。logstash有agent和indexer两个角色。对于agent角色，放在单独的web机器上面，...
函数使用介绍 这里面的三个函数openlog， syslog。closelog是一套系统日志写入接口。另外那个vsyslog和syslog功能一样，仅仅是參数格式不同。 通常。syslog守护进程读取三种格式的记录消息。此守护进程在启动时读一个配置文件。一般来说，其文件名称为/etc/syslog.conf，该文件决定了不同种类的消息应送向何处。比如。紧急消息可被送向系统管理员（若已登录），并在控制台上显示。而警告消息则可记录到一个文件里。该机制提...
最近我在日志收集的功能中加入了对docker容器日志的支持。这篇文章简单谈谈策略选择和处理方式。关于docker的容器日志docker 我就不多说了，这两年火得发烫。最近我也正在把日志系统的一些组件往docker里部署。很显然，组件跑在容器里之后很多东西都会受到容器的制约，比如日志文件就是其中之一。当一个组件部署到docker中时，你可以通过如下命令在标准输出流（命令行）中查看这个组件的日志：docker logs ${containerName}日志形如...
什么是 SLOWLOGSlow log 是 Redis 用来记录查询执行时间的日志系统。查询执行时间指的是不包括像客户端响应(talking)、发送回复等 IO 操作，而单单是执行一个查询命令所耗费的时间。另外，slow log 保存在内存里面，读写速度非常快，因此你可以放心地使用它，不必担心因为开启 slow log而损害 Redis 的速度。设置 SLOWLOGSlow log 的行为由两个配置参数(configurationparameter)指定，可以通过改写 redis.conf 文件或者用 CONFIG ...