目前所有大数据技术都有一个前提,即是数据的获取。网络爬虫即可解决数据获取的问题。因此是大数据处理技术部可或缺的一部分