python 爬取腾讯视频评论的实现步骤

但是抓包有点麻烦，尝试了F12，也可以获取到评论。以电视剧《在一起》为例子。评论最底端有个查看更多评论猜测过去应该是 Ajax 的异步加载。再通过F12获取到评论链接，找到网址的规律，构建网址，加载三四个评论就行了。观察发现只有 cursor 和 source 进行了改变，其他是不变的，二 source 是在第一个的基础上进行加一操作，所以只需要获取到 cursor 即可。我们打开一个评论链接的网址，我们可以知道，cursor 其实是上一页 最后一个用户的ID码。个人认为子评论也算有效评论，目前不打算处理。但是代理池一般都是使用docker 和 Redis 进行获取。暂时没有选用，之选用了用户代理，然后在获取 headers 的时候加个 time.sleep。目前还是正常的。