storm crawler:基于Apache Storm的可扩展成熟且通用的Web搜寻器 源码

StormCrawler是开源资源集合,用于在上构建低延迟,可扩展的Web搜寻器。 它是在下提供的,并且大部分是用Java编写的。 快速开始 注意:这些说明假定您已安装 。 最简单的入门方法是使用生成一个基于StormCrawler的全新项目: mvn archetype:generate -DarchetypeGroupId=com.digitalpebble.stormcrawler -DarchetypeArtifactId=storm-crawler-archetype -DarchetypeVersion=1.17 系统会要求您输入一个groupId(例如com.mycompa