大数据爬取技术概述与应用实践

使用Scrapy框架爬取腾讯招聘网站社会招聘数据可修改代码爬取校园招聘数据需手动配置数据库并创建表运行run.py后方可正常爬取

爬取地震网数据

翻译网站数据爬取

大数据技术与应用+电子课件，该书可作为云计算、大数据领域的初学者教材，内容较为全面，技术细节详细，与同道者共享此资源。

第1章大数据概述内容提要：首先介绍了大数据发展历程、基本概念、主要影响、应用领域、关键技术、计算模式和产业发展，并阐述了云计算、物联网的概念及其与大数据之间的紧密关系。

上海科学技术出版社，十二五国家重点图书初版规划项目，大数据与应用-能源大数据

这是我近期使用C#写的一个QQ空间蜘蛛网爬虫程序。程序断断续续的运行了两周,目前总共爬了3000万QQ数据,其中有300万包含用户(QQ号,昵称,空间名称,头像,最新一条说说内容,最新说说的发表时间,

本文详细介绍了SuperMap大数据GIS技术实践的多个案例，包括实际应用场景、数据采集和管理、数据处理和分析等方面。通过这些案例，读者可以更好地了解大数据GIS技术的应用场景和操作流程。

学习Spark非常不错的书。里面分两部分，一部分是spark的原理的介绍，另一部分是实践开发。