java程序猿的必备开发工具肯定少不了eclipse, 近一年的时间在mac本上使用eclipse，安装了很多插件，随着项目的不断增大和os本身应用的增多。内存愈加吃紧。eclipse卡顿着实影响心情。之前说是一直调整JVM参数什么...

selenium是一个浏览器自动化测试框架。直接驱动浏览器模拟用户操作行为，是一个方便、易用的爬虫首选插件工具。最近在爬取x网的时候，模拟用户操作滑动验证码，一直报错，如下 org.openqa.selenium.interactions...

在网关或其他web层项目使用过程中，为了抵御流量攻击，或者降低高流量带来的系统压力，需要做一些技术措施来做处理。这里可以用阿里的哨兵神器 sentinel，简单方便，而且有控制台可以对限流规则做调整。对于流量...

之前在线上服务器安装了一套ELK环境,开启了ssl。由于公司网络结构的设置，本地或开发环境无法直接连接es进行测试。 这时需要单独安装一个elasticsearch作为单独的测试环境的搜索存储容器，方便测试和对应环境的...

ELK整体环境搭建起来后，感觉还是很好用的。近期有了新需求，要用ES的分词器对一段文字进行分词处理。本以为这么高大上的ES组件应该有较好的中文分词器，但是很遗憾，本身支持较差，需要安装elasticsearch-analys...

最近线上的ELK日志监控爆出几个异常问题，jsonException的解析问题。如下: message: 2019-04-10 23:37:43,952 ERROR aop.AspectAdvice eid=410724004 not match : - , com.alibaba.fastjson.JSONException: no...

在使用RestHighLevelClient客户端连接elasticsearch之后需要批量初始化一批数据。 代码如下: //一个线程100条数据,根据记录总数进行分页共8页。这样的话，总共初始化780条记录(测试数据) public void refres...

最近使用elasticsearch的client相关功能，本以为TransportClient的api已经比较详细了,所以按照官方文档进行业务结构的整理。没想到在前期时安装了x-pack相关的认证功能卡住了我。随着TransportClient在7.0的淘汰...

  需求描述：表TIMP_CONFIG中TEXT_DATA为clob类型，存储xml数据， 原数据为: <tables> ... <table>TBSI_IR_VALUATION</table> <yKey>VAL_SOURCE,PORT_CODE,I_CODE,A_TYPE,M_TYPE&...

最近要做一些爬取数据的工作, 综合网上的信息python语言是不错的选择, 其中scrapy也是很多人的不二选择。所以这里学习记录下，做些数据爬取的准备   1先去下载python3.7.x版本(mac默认2.7安装报错) ...

1.python自定义函数 规则: a.函数代码以def关键词开头,后面是函数标识符名称和圆括号() b.任何入参和自变量必须放在圆括号中间 c.函数的第一行可以选择性的使用字符串，存放函数说明 d.函数内容以冒号开始...

1.python导入模块 python模块是一个python文件，以.py结尾 多次import一个模块只会被导入一次。 pyhton解析器对模块位置的搜索顺序是a.当前目录 b.shell变量pythonpath下的目录 c.默认路径 import math prin...

1. python 算数运算符 a = 15;b = 20;c = 1 c = a+b;print c c = a-b;print c c = a*b;print c c = a/b;print c c = a%b;print c c = a**b;print c # a的b次幂 c = b//a;print c # 向下取整 '''...

1. python标识符 在python中，标识符由字母、下划线、数字组成 所有标识符可以包括英文、数字及下划线，但不能以数字开头 python中的下划线开头标识符是有特殊意义的。 以单下划线开头_foo的代表不能直接访问...