详解python爬取弹幕与数据分析

很不幸的是,由于疫情的关系,原本线下的AWD改成线上CTF了。这就很难受了,毕竟AWD还是要比CTF难一些的,与人斗现在变成了与主办方斗。 虽然无奈归无奈,但是现在还是得打起精神去面对下一场比赛。这个开始也是线下的,决赛地点在南京,后来是由于疫情的关系也成了线上。 当然,比赛内容还是一如既往的得现学,内容是关于大数据的。 由于我们学校之前并没有开设过相关培训,所以也只能自己琢磨了。 好了,废话先不多说了,正文开始。 一.比赛介绍 大数据总体来说分为三个过程。 第一个过程是搭建hadoop环境。 这个开始我也挺懵的,不过后来看了个教程大概懂了。总的来说,hadoop就是一个集成环境,这个环境里