java程序猿的必备开发工具肯定少不了eclipse, 近一年的时间在mac本上使用eclipse，安装了很多插件，随着项目的不断增大和os本身应用的增多。内存愈加吃紧。eclipse卡顿着实影响心情。之前说是一直调整JVM参数什么...
org.openqa.selenium.interactions.MoveTargetOutOfBoundsException: (323, 140.5) is out of bounds of viewport width (320) and height (282)
selenium是一个浏览器自动化测试框架。直接驱动浏览器模拟用户操作行为，是一个方便、易用的爬虫首选插件工具。最近在爬取x网的时候，模拟用户操作滑动验证码，一直报错，如下 org.openqa.selenium.interactions...
网关流量控制使用阿里流量哨兵神器sentinel控制台实践验证过程
在网关或其他web层项目使用过程中，为了抵御流量攻击，或者降低高流量带来的系统压力，需要做一些技术措施来做处理。这里可以用阿里的哨兵神器 sentinel，简单方便，而且有控制台可以对限流规则做调整。对于流量...
记录汇总涉及到的相关技术的官方网站地址(持续整理中)
很多技术资料的最权威、最正确、最具时效性的发布都是在官方网站上可以找到。所以整理一份官方网站的地址链接，方便查阅。 看见英文外语别恐惧，瞄准两个地方download,document，一个是相关资源包的下载，一个...
单独安装elasticsearch6.x并破解xpack开启SSL认证进行测试使用
之前在线上服务器安装了一套ELK环境,开启了ssl。由于公司网络结构的设置，本地或开发环境无法直接连接es进行测试。 这时需要单独安装一个elasticsearch作为单独的测试环境的搜索存储容器，方便测试和对应环境的...
JAVA连接ES使用IK分词器进行中文分词及elasticsearch的分词器使用说明附官方文档
ELK整体环境搭建起来后，感觉还是很好用的。近期有了新需求，要用ES的分词器对一段文字进行分词处理。本以为这么高大上的ES组件应该有较好的中文分词器，但是很遗憾，本身支持较差，需要安装elasticsearch-analys...
使用富文本编辑器保存数据后进行fastjson格式转换异常及序列化处理
最近线上的ELK日志监控爆出几个异常问题，jsonException的解析问题。如下: message: 2019-04-10 23:37:43,952 ERROR aop.AspectAdvice eid=410724004 not match : - , com.alibaba.fastjson.JSONException: no...
JAVA程序多线程批量初始化ES数据时产生的异常问题以及解惑记录
在使用RestHighLevelClient客户端连接elasticsearch之后需要批量初始化一批数据。 代码如下: //一个线程100条数据,根据记录总数进行分页共8页。这样的话，总共初始化780条记录(测试数据) public void refres...
elasticsearch6.4.2安装x-pack安全认证后,java如何使用transportclient连接/resthighlevelclient连接
最近使用elasticsearch的client相关功能，本以为TransportClient的api已经比较详细了,所以按照官方文档进行业务结构的整理。没想到在前期时安装了x-pack相关的认证功能卡住了我。随着TransportClient在7.0的淘汰...
Oracle使用正则表达式REGEXP_REPLACE替换xml格式文档中的数据
需求描述：表TIMP_CONFIG中TEXT_DATA为clob类型，存储xml数据， 原数据为: <tables> ... <table>TBSI_IR_VALUATION</table> <yKey>VAL_SOURCE,PORT_CODE,I_CODE,A_TYPE,M_TYPE&...
Mac系统安装python3.7.3并安装Scrapy爬虫框架
最近要做一些爬取数据的工作, 综合网上的信息python语言是不错的选择, 其中scrapy也是很多人的不二选择。所以这里学习记录下，做些数据爬取的准备 1先去下载python3.7.x版本(mac默认2.7安装报错) ...
在mac环境下记录Python的学习笔记之函数+异常
1.python自定义函数 规则: a.函数代码以def关键词开头,后面是函数标识符名称和圆括号() b.任何入参和自变量必须放在圆括号中间 c.函数的第一行可以选择性的使用字符串，存放函数说明 d.函数内容以冒号开始...
在mac环境下记录Python的学习笔记之导入+模块
1.python导入模块 python模块是一个python文件，以.py结尾 多次import一个模块只会被导入一次。 pyhton解析器对模块位置的搜索顺序是a.当前目录 b.shell变量pythonpath下的目录 c.默认路径 import math prin...
在mac环境下记录Python的学习笔记之运算符+条件语句
1. python 算数运算符 a = 15;b = 20;c = 1 c = a+b;print c c = a-b;print c c = a*b;print c c = a/b;print c c = a%b;print c c = a**b;print c # a的b次幂 c = b//a;print c # 向下取整 '''...
在mac环境下记录Python的学习笔记之基础语法+变量类型
1. python标识符 在python中，标识符由字母、下划线、数字组成 所有标识符可以包括英文、数字及下划线，但不能以数字开头 python中的下划线开头标识符是有特殊意义的。 以单下划线开头_foo的代表不能直接访问...