爬取b站一个人所有评论,爬虫爬取评论的示例网页

爬取b站一个人所有评论,爬虫爬取评论的示例网页

∪△∪ #选择同一个文件夹下的luoxiang.jpg图片

mask = imageio.imread('xing.jpg')

＋▂＋ #设置想要爬取的由于b站的评论是动态加载，且经常更换评论的url格式，所以这是较新的一个爬取b站评论的方法。使用chrome游览器里的检查功能(F12),调出开发人员工具开发者工具

但我学习群中小伙伴频繁讨论B站评论的爬取，所以，再分享一个B站视频评论的爬虫。二、展示爬取结果首先，看下部分爬取数据：爬取结果爬取字段含：视频链接、评还是接上次的爬虫爬取B站视频弹幕和评论以我的主页为例，如下然后找到存有我相关视频数据的文件，如下然后我们随便点开一个视频，进入api端口查看相关信息我们发现视频的cid号和o

今天花了一上午探究如何用selenium获取b站视频下面的评论，一开始只是想用一个视频来练练手，后面逐渐改成了所有视频都适用的完整代码。话不多说，直接上源码：分析可得，评论请求每20条一组，第一组由于置顶评论会单独放在”top_replies"里，所以只有19条。另外，我只爬取了最外部的评论，楼中楼同理。得找到数据之后事情就简单了，无非是分析api

对爬虫还挺有兴趣的，但是一直没有尝试过，今天看了几篇写得非常好的博客，学到了一丢丢，自己也写了个简单的爬虫娱乐娱乐。1.分析需求需求：爬取b站up主王老菊所有视频投稿的如下图所示，即可出现很多csrf值链接，随便点击一个带有csrf值的链接，然后点击’负载‘选项：