wcrawler:简单的Web爬网程序CLI工具具有最小的依赖关系 源码
Wrawler WCrawler是一个简单的Web爬网程序CLI工具。 注意:此工具主要是出于练习目的而创建的,因此不依赖于任何有助于爬网的库。 用法 浏览网络: ❯ wcrawler explore --help Explore the web by following links up to a pre-determined depth Usage: wcrawler explore URL [flags] Flags: -d, --depth uint depth of recursion (default 10) -o, --output string file to save results (default "./web_graph.json") -s, --stats show live stats (def
文件列表
wcrawler-master.zip
(预估有个27文件)
wcrawler-master
pkg
core
graph
viewer.go
1KB
utils_test.go
324B
graph.tmpl
644B
entities.go
421B
utils.go
1KB
records_mngr.go
3KB
暂无评论