在安装sublime text以后发现总是会打开历史记录的文件，这里mark下，方便以后查找找到设置->设置添加以下两行配置即可    "hot_exit": false,     "remember_open_file...

在logstash处理filebeat收集的日志数据以后我们可以发现logstash解析以后有一个@timestamp时间，然后而这个时间跟我们grok解析日志以后里面所包含的时间不是一致的，logstash收集日志的@...

之前有笔记记录linux内核参数的介绍和一些优化方法：https://sulao.cn/post/491，这次的笔记其实还是基于原来的笔记，针对于最大进程数和最大打开文件数的优化，这两个参数的优化在我们日常的优化中比较常...

在项目中有时不想别人看到我们写的python脚本内容，这时候我们需要将我们的python脚本进行加密，其实是不像让别人看到我写的代码太LOW了，(*^_^*)python脚本加密常用的有两种方式，一种是将文件.py文件转...

redis是我们常用的数据中间件，在目前大多项目中经常会使用到，所以使用zabbix对他进行监控还是非常又必须要的，我们这里来看看具体操作过程，以下操作过程目录约束为/usr/local/redis，admin123为我...

目前在我的工作中删除topic这种操作基本很少去做，但是之前也做过几次，都是很粗暴的去目录下删除文件，移除目录等方法这次学习的笔记中我们学习记录如何彻底删除kafka的topic，按照一个正常的流程去操作，删除kafka...

Kafka 是一种分布式的、分区的、多副本的基于发布／订阅的消息系统。它是通过 zookeeper 进行协调，常见可以用于 web/nginx 日志、访问日志、消息服务等。主要应用场景为：日志收集系统和消息系统。Kafk...

我们通过之前得学习，得知kafka一些特性和python操作kafka得方法，但是我们还没有学习过查看kafka数据方法，然后在这一篇笔记中我们来学习下使用命令来查看kafka数据我们首先查看kafka主题分布情况/us...

考虑到发布和订阅消息的实时性问题，有时需要消费者重新消费之前的历史日志消息，所以后面肯定需要使用kafka替换掉原来使用的redis，所以这里暂时先mark下logstash清洗过滤日志以后发布到kafka主题中的方式将...

自己在测试环境中尝试编写一些简单的日志规则，于是拿mongodb的日志进行测试，整体的ELK环境这里不再讲了，主要从客户端的filebeat开始我们去mongodb服务器上安装filebeatwget https://a...