一个简单功能的爬行器,使用C#+Sql Server开发,用到了反射、线程池、流、log4net等知识点。可以作为学习使用。可以用来收录整站URL、下载图片、检测每个页面是否包含指定内容等等。