介绍了网络爬虫的工作原理, 分析了传统的两种启发式算法—— —基于有限空间的A*搜索算法和局部搜索的爬山算法在网络爬虫中应用的可行性及局限性。并详细阐述了应用了模拟退火算法的网络爬虫网页搜索的过程, 并结合一个搜索实验说明了基于模拟退火算法的网络爬虫搜索性能的优越性。