Heritrix是一个爬虫框架，可加如入一些可互换的组件。