针对于刚搭建的ELK环境,要做一些基本的设置。如：索引模板的建立。 如果非集群模式的ELK环境，在监听新的日志文件时，没有创建索引模板，则会根据系统默认的模板规则进行创建。但是系统默认的配置是按照集群方...

随着ELK日志索引文件的不断增加,如果业务日志越来越多。很快就把服务器磁盘撑满了。所以在linux服务器上，写个计划脚本,定时清理无效的文件。如下： DATE=`date -d "12 days ago" +%Y.%m.%d` curl -u elastic:1...

配置ELK之后,可以发挥elasticsearch的更大功效,就是用java连接elastic进行数据的存储，达到快速读取的目的。可以取代redis、或者solr的功能。在一些搜索服务功能、或者列表服务功能处可以恰当的使用。 POM依赖...

由于工作需要，处理20w条左右的数据 步骤： 1. 从线上拉取20w条记录为EXCEL格式 (5w记录/个)可以更多, 2. java读取EXCEL数据，进行解析并导入 3.文件格式是 excel 2007版本 有三个文件导入成功，还有一...

文章推荐：走向癫疯——大日本帝国的崛起与崩溃 推荐指数：***** 五颗星 推荐理由：读史使人明智。在人的一生中，只有短暂数十年。然而历史已经有了几千年上万年的演变。沿着前人的脚步，去感受那个时代的疯...

搭建好ELK环境之后，开始监控日志文件。 服务器上有七八个不同类型的业务日志文件。在使用filebeat时，如果没有进行区分，则在收集日志时会统一建立到一个名为filebeat-6.4.2-*的索引文件中。可以正常查询，但...

ELK的环境搭建好之后，如何利用收集到的数据进行数据告警呢？在破解ELK之后，它本身提供一个监视器功能,配置偏向编写脚本。有一个更加方便的插件sentiel。   一、下载并安装sentinl插件   ...

之前对ELK完全没有概念，工作中需要引入，所以就花时间看了下相关资料。作为开源的软件，功能配套很齐全且插件完善。很多场景可以使用elk。 监控文件日志、系统日志、报警、图形化展示数据等。以下是整体的环...

 随着公司日益增长的业务，日志增长较快，各种bug层出不穷。为了快速定位问题以及做告警/数据分析等问题，就针对性的查看/搭建了几种日志服务系统。 可能整理的不是那么正确或者详尽。但也记录一...

由于公司服务器产生日志量较大，而且以后会记录每个用户的操作行为日志，为了方面搜集及分析，所以要搭建一套日志服务系统，便于分析。前期调研了几个方案 如：阿里云的日志服务，提供了多种日志接入方案。如...

这其实是一个很头疼的事情，在本来时间就不是那么充裕的情况下，还要挤出来时间去做这个事情。oh ~ my god， 没有一个人的支持，或者回报的可见价值，去长时间的做下去没有坚定的毅力和决心是很难熬的。更何况...

看到项目代码一团乱麻你是否很头疼？ 仔细揣摩同一项目下迥异的写作风格是否很奔溃？ 很后怕没有规范的约束项目后期是否越来越臃肿，难以扩展？ 开发环境好不容易搭建好难道就是为了一堆垃圾代码服...

因为最近要做项目，所以自己搭建环境做maven仓库。这里用的是阿里云服务，1G内存、20G空间。 由于在安装java环境之前已经运安装了一套PHP环境，mysql、nginx、php等。已经将内存根据nginx的情况进行分配。 ...

书籍推荐：淘宝技术的发展与故事阐述《淘宝技术这十年》 推荐指数：***** 五颗星 书籍掠影： 1.从淘宝业务发展的转变来阐述一些技术是如何应用而生的，以及如何应用技术去突破技术瓶颈+壁垒 2.从作者作为...

在做一个软件项目的时候，版本的控制是一个非常重要的事情，它关系到了整个代码的安全性、还原性、差异性。   试想在一个项目代码结构越来越庞大的情况下，难道还靠人脑的记忆去处理么，...