本课题的主要目的是设计面向定向网站的网络爬虫程序，满足不同的性能要求。详细涉及到定向网络爬虫的各个细节与应用环节，以解决通用搜索引擎局限性问题。网络爬虫应用智能自构造技术，使用多线程技术让爬虫具备更强大的抓取能力。对网络爬虫的连接网络设置连接及读取时间避免无限制的等待。根据预先设定的主题实现对特定主题的爬取。还研究网络爬虫原理并实现相关功能。爬取的数据清洗后存入数据库，可视化显示。