如何快速编写一个暗网爬虫
2
对于暗网想必不用我过多解释，在https://www.torproject.org/download 下载Tor Browser安装即可，当然国内得配合SS使用。 但我们作为一名爬虫工程师，如何写爬虫去访问暗网网址才是我们需要的；如何最简单的实现暗网爬取呢？ 首先需要一台香港的服...
阅读(699)评论(0)赞 (2)
标签：爬虫
将Jsoup请求得到的Document中的相对路径转换为绝对路径
在后端开发时经常在HTML页面使用相对路径，然而这个对于爬虫来说有时候却很难受，虽然Jsoup提供了.attr("abs:href")用来来获取绝对路径，但还是不够方便。 在HTML中href跟src是这两个属性是用来填url的，也是我们需要处理的地方，相对路径一般是/，./，....
阅读(527)评论(1)赞 (0)
Windows环境下Java获取指定进程的句柄总数
在做网银爬虫时用swt处理密码控件，做成web服务供外部调用，时间一长总会跪掉，控制台显示 org.eclipse.swt.SWTError no more handles然后java进程就没了，这个错误，注意是错误，不是异常!!!翻译过来就是句柄用完了，那么如何让程序知道自己到...
阅读(310)评论(0)赞 (0)