-
聊一聊丁克
丁客族（英语: DINK / DINKY）是一个1950年代起源于欧美、在1980年代传入亚洲的生活型态名词，由英文DINK音译而来，亦翻为顶客族，或是丁克家庭。DINK是“Dual（或Double） Income, No Kids”的缩写，意为“双薪水、无子女”的夫妻。 —— wiki...—— Posted on May 23, 2019 -
Filebeat采集数据不完整、一行数据被截断（inode重用问题）
写在前面 用 Filebeat + Logstash 采集日志文件数据时，偶然发现了采集的数据出现了不完整的情况，因为在 Logstash 中配置了 json 过滤器，所以遇到这种不完整的数据会报出一条解析失败的日志 经过一点点排查，最后断定是 Filebeat 采集的时候在某种外部特殊操...—— Posted on May 4, 2019 -
多个Logstash实例在Kibana上只显示一个pipeline
接上篇《多个Logstash实例在Kibana上只显示出一个》，使用了不同的 uuid，显示了多个 Logstash Node 之后，发现 Pipelines 这项也是只显示了一个，点进去可以看到 Number of Nodes 又显示了多个 看到这个名字 main 大概想起来，因为目前...—— Posted on April 27, 2019 -
多个Logstash实例在Kibana上只显示出一个
一个小问题 安装 ElasticSearch 和 Kibana 后，通过配置 Logstash 的 x-pack 实现可视化监控是非常便捷的监控手段，ELK 全家桶中的 Filebeat 也是一样 但在使用过程中发现，明明配置和启动了多个 Logstash 实例，但在 Kibana 的监控...—— Posted on April 25, 2019 -
服务器上发现了挖矿木马
发现异样 上周同事说云服务器上有个不知道什么的程序几乎占满了所有 CPU 资源，杀掉还会自动重启，怀疑是不是中病毒了 稍微留意了一下，登上去看了其他的服务器，果然也都有相似的进程在疯狂运行 到群里随意吐个槽说刚开几天的云服务器好像就中毒了，一个前同事接了句“挖矿的？” 查查是啥...—— Posted on April 15, 2019 -
Java dump问题（SIGSEGV、libresolv.so.2+0x7a91、__libc_res_nquery+0x1c1）
写了个 Quartz 实现的定时程序，打包到服务器上启动时发现会崩溃，本地测试都没毛病，之前服务器上启动也不会崩，搞不懂是不是服务器最近改了什么配置，反正先看看报错： # # A fatal error has been detected by the Java Runtime Enviro...—— Posted on March 31, 2019 -
from2019-2-28
写在前面 这个给未来的一封信已经写了六年了，今年是第七年，以前是写在QQ空间的私密日志里，去年开始搬到个人博客这边 其实内容类似一年总结，只是我写在每年的生日这天罢了。。 去年的问题 生活 0. 平时锻炼身体了没？又瞎立什么 flag 没？ 回想过去一年，除了五一假的时候悲剧发...—— Posted on February 28, 2019 -
Filebeat+Logstash处理大批量数据时卡慢的问题探究
写在前面 上篇博客《写了个简单的logstash-output-rocketmq插件》中说到，最近用到了 Filebeat + Logstash 做日志采集，在测试阶段，有一个场景：预先生成一个 1G 大小的日志文件，其中单行数据（即一条日志） 50 kb，让 Filebeat 和 Logs...—— Posted on February 20, 2019 -
写了个简单的logstash-output-rocketmq插件
写在前面 近期参与一个新的项目，姑且是负责了数据存储相关模块的需求分析和设计（其实就是参考学习网络上流传的其他大厂分享的成熟方案），目前的方案是用 FileBeat + LogStash 做收集，之后再存到 HDFS、HBase、MySQL 本来是看到 LogStash 有现成的直接输出到...—— Posted on January 6, 2019 -
幻想成真——焦虑症
写在前面 本文字数： 5000 阅读时间： 大约10~15分钟 上周在微博上看到了曹增辉先生的两条微博（焦虑症的自我治疗方法（上）、焦虑症的自我治疗（下）治疗方法分享），讲述了他这几年如何对抗焦虑症（下篇中的部分内容不予评论），看的过程中可以说产生了共鸣吧，毕竟这几年我基本也经历了这样的...—— Posted on December 18, 2018
