SmartSniff数据抓取工具

网上有好多站点抓包的工具，筛选了好多，目前这个挺好用，能把网站几乎所有的页面，包含css、图片、音频视频等一网打进，很不错的工具，分享使用...

在不知道设备地址的情况下，轻松获取ip地址，进行设备配置

最近在天涯看鬼文，由于连载的，不方便看，就搞了个工具抓取下来存成txt，然后慢慢看。抓取了几篇看了下，还不错，有兴趣的试试吧。用的时候把原界面的参数对应着替换掉就行了

soup是一款Java的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于JQuery的操作方法来取出和操作数据。

curl.exe

窗口抓取工具，虚拟定位辅助文件，可以改变手机虚拟定位坐标。

可以更好的方便的抓取异常日志，把代码嵌入在app代码中，将异常的日志保存在本地，可以导出，查看日志，更加方便

用于整站抓取做镜像或者仿站，效率较高，可多线程

HTTrack是一个免费并易于使用的线下浏览器工具，它能够让你从互联网上下载整个网站进行线下浏览。非常强大，小巧

抓取当天必应全球首页的无水印壁纸，目前支持美国/英国/中国/日本/澳大利亚