程序猿除了要会记录日志，还要会分析日志，不仅有利于异常的解决与分析，还能从其他层次对业务或性能做调整。 线上服务器的运行日志一大堆，业务日志已经被filebeat监控并用sentinl发送告警邮件，打点日志已用...

最近在使用es制作搜索功能的时候，发现搜索结果不尽人意。使用默认分词器是将中文拆分成了单字，在查询时虽能返回包含相关字的结果，但是和整句的意思差别太大，无法直接根据一段文本精准查询。使用ik_analyze后...

程序猿有时候面对海量的api接口，需要一一尝试、确定自己想要的是哪种实现方式与结果，这是一个探索的过程。文档有时候写的很明确，但结果不对啊。这需要自己尝试下，才能安心。最近需求有碰到用elasticsearch做...

elasticsearch映射是定义文档及其包含的字段的存储和索引方式的过程。可以使用映射来定义 1. 应将那些字符串字段视为全文字段。 2. 那些字段包含数字、日期或地理位置 3. 日期值格式 4. 自定义规则用于动态添...

切换原因：公司为了监控日志，部署了一套ELK环境。整体使用下来还是不错，不仅能对公司的所有业务日志监控，还能发送报警邮件[日志中出现exception等关键字时]。使用filebeat轻量级收集日志，logstash切割日志，...

java程序猿的必备开发工具肯定少不了eclipse, 近一年的时间在mac本上使用eclipse，安装了很多插件，随着项目的不断增大和os本身应用的增多。内存愈加吃紧。eclipse卡顿着实影响心情。之前说是一直调整JVM参数什么...

selenium是一个浏览器自动化测试框架。直接驱动浏览器模拟用户操作行为，是一个方便、易用的爬虫首选插件工具。最近在爬取x网的时候，模拟用户操作滑动验证码，一直报错，如下 org.openqa.selenium.interactions...

在网关或其他web层项目使用过程中，为了抵御流量攻击，或者降低高流量带来的系统压力，需要做一些技术措施来做处理。这里可以用阿里的哨兵神器 sentinel，简单方便，而且有控制台可以对限流规则做调整。对于流量...

之前在线上服务器安装了一套ELK环境,开启了ssl。由于公司网络结构的设置，本地或开发环境无法直接连接es进行测试。 这时需要单独安装一个elasticsearch作为单独的测试环境的搜索存储容器，方便测试和对应环境的...

ELK整体环境搭建起来后，感觉还是很好用的。近期有了新需求，要用ES的分词器对一段文字进行分词处理。本以为这么高大上的ES组件应该有较好的中文分词器，但是很遗憾，本身支持较差，需要安装elasticsearch-analys...

最近线上的ELK日志监控爆出几个异常问题，jsonException的解析问题。如下: message: 2019-04-10 23:37:43,952 ERROR aop.AspectAdvice eid=410724004 not match : - , com.alibaba.fastjson.JSONException: no...

在使用RestHighLevelClient客户端连接elasticsearch之后需要批量初始化一批数据。 代码如下: //一个线程100条数据,根据记录总数进行分页共8页。这样的话，总共初始化780条记录(测试数据) public void refres...

最近使用elasticsearch的client相关功能，本以为TransportClient的api已经比较详细了,所以按照官方文档进行业务结构的整理。没想到在前期时安装了x-pack相关的认证功能卡住了我。随着TransportClient在7.0的淘汰...

  需求描述：表TIMP_CONFIG中TEXT_DATA为clob类型，存储xml数据， 原数据为: <tables> ... <table>TBSI_IR_VALUATION</table> <yKey>VAL_SOURCE,PORT_CODE,I_CODE,A_TYPE,M_TYPE&...