WEB旁注爬虫

Domain3.5旁注工具，打开速度超快啊。不像很多版本那样打开要半天。包括了查看指定IP的所有域名及旁注入侵操作、SQL注入、上传漏洞利用、其他一些小工具。

鬼哥旁注C段利器(干净版)，没有后门和病毒，通过360等国内杀毒软件查杀，国外的暂时没有检测。

JSP版的“旁注助手”，一句话木马后，上传这个“小马”，再“大马”， 保存方式有“update”和“append”,下载。。。。。。

精通Scrapy网络爬虫.pdf

在com.zhy.spider.test包下有个测试类

pyReptile是一个快速的高级Web爬虫和Web抓取框架，用于抓取网站并从其页面中提取结构化数据。它可用于各种用途，从数据挖掘到监控和自动化测试。

python网络爬虫实战-90个已经验证的方法，使用Docker、microservice和AWS来帮助你爬取数据。包括了文字、图片、音乐、视频内容的抓取，爬虫服务器集群的部署等。PACKT出版社，2

基于聚焦爬虫的web信息采集技术研究门户网站的建设中，自动的信息采集可以极大的提高效率，还可以用于个性化信息获取、链接分析和辅助决策等，基于聚焦爬虫的主题信息采集研究具有广泛的现实意义和实用价值。

实验课的项目，爬虫爬取网站内容，lucene实现索引和搜索功能，界面也很美观。爬取的是重庆大学新闻网的内容。

关于即刻热门推荐的爬虫与分析,爬取web端的热门推荐,每小时获取一次数据。对json数据进行清晰,进行二次挖掘和分析。在介绍主要工作之前,先对整个项目进行说明。