背景 之前写过一篇《java使用transportClient连接elasticsearch并做接口实现增删改查ES6.4.3版本》的文章，在项目中可以作为基本的使用。但是没有权限验证及分词的处理。在资料查找中，发现TransportClien客...

jsoup解析url中的html元素 有时候需要通过解析不同网站的网站元素、数据等信息做些基本的调研或者分析。随着技术的不断发展及升级，很多网站已经升级使用vue或者相关前端框架作为首选。这样的话，使用jsoup...

处理流程 记录accesslog日志 切割整理accesslog日志 入库数据 数据抽取、分割 制作报表 适用场景 accesslog日志记录了比较全面的访问日志。针对访问日志进行不同接口/页面/用户/终端的PV/UV统计，...

书籍推荐： 阿里《Codelife》程序人生，给程序猿的发展方向提供一些资料 推荐指数： **** 四颗星 读书感受： 只是感觉自己年纪稍微大了一些，且思维方式上已经有些固话，喜欢按照自己的意愿去...

书籍推荐： 《程序员健康指南》，让程序猿的生活逐渐健康起来 推荐指数： *** 三颗星 读书感受： 本书是为程序猿量身制作的健康指南，针对头痛、眼部疲劳、背部疼痛和手腕疼痛等常见的问题。简...

有时候，需要做自定义类加载器，业务场景类似tomcat a)、要保证部署在tomcat上的每个应用依赖的类库相互独立，不受影响。 b)、由于tomcat是采用java语言编写的，它自身也有类库依赖，为了安全考虑，tomcat使用的...

链式编程可以使得代码可读性更佳，部分情况下减少编码量。通过.的方式设置对象很方便，但有时不利于调试。我们编程过程中常用到的链式编程典型非StringBuilder莫属了 new StringBuffer().append("1").append("b"...

背景 程序猿美名曰高薪职业，现实就是码奴。最近被派到兄弟公司做支持，也就是过来加加班，赶赶工期。之前公司的架构是dubbo框架，这里的是springCloud，没有怎么接触过，但是代码学习搬运起来还是比较快的。做...

最近要尝试一些数据导入功能，是将获取的文本内容，导入到discuz系统库表中。由于ip动态变动原因，不适合直连线上库。所以本地搭建一套方便调试与测试。 根本没想到mac系统原来自带apache和php。按照以往使用win...

程序猿最近要摘取pdf文件中的信息，选材用到了itextpdf工具包，整体比较简单，记录一下 1.pdf操作pom设置 <!-- https://mvnrepository.com/artifact/com.itextpdf/itextpdf --> <dependency> &...

程序猿最近在做对文件操作的功能，搜索到docx4J的介绍，使用起来不错，所以这里整理记录下。 1.pom文件增加 <!-- https://mvnrepository.com/artifact/org.docx4j/docx4j --> <dependency>...

异常背景 程序猿最近在做关于office软件的文件处理，需要读取doc文档类资料进行处理，选择有很多Openoffice、apache POI、dox4j等，这里选择了dox4j,感觉功能实现更符合需求吧 异常信息 2019-07-20 17:51:34,0...

Scrapy爬虫在抓取的时候，主要是根据页面元素结构进行解析。有多种方式，如：Jsoup、正则、xpath等解析。或者selenium自动化工具等。 Xpath XPath 是一门在 XML 文档中查找信息的语言。XPath 使用路径表达式...

Scrapy介绍 Scrapy是python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化数据。scrapy用途广泛，可以用于数据挖掘、检测和自动化测试。 Scrapy是一个为遍历爬行...

书籍简介 深度工作：如何有效使用每一点脑力 --Deep Work：Rules for focused success in a distracted world 作者：卡尔·纽波特（Cal Newport） 推荐指数： ***** 推荐理由 偶然一个机...