抖音用户主页视频数据爬虫详解（点赞，收藏，分享等）

一.首先进行抓包分析随便找个主页f12关键词搜索发现这个包是以post开头二.查看请求参数我们复制curl在spiderbox里面快速形成请求对headersparams进行尝试删减最后发现只需要这些参数其中只有sec_user_id是加密的修改count变为100发现他发的包并没有100个原因在于postdevice。。。的包中有个max_cursor参数请求载荷中也有一个这样的参数每次请求的数据中max_cursor是下一个请求的载荷同时has_more为1时候代表还能请求0为不能请求我们做如下判断对于sec_user_id这个参数是作者本身的表示在url一栏中体现我们通过自动化drissionpage获取通过re进行匹配最终得到最后的载荷最后进行抓包发现点赞收藏等都在这里进行提取最后用pandas转化为execl最后发现cookie很容易过期批量爬取有点困难我们采用drissoinpage进行自动化获取完美解决。完整代码请在知识星球https://t.zsxq.com/95LBhapi解释请你第一次运行先按0进行登录或者触发反爬的时候登录完成之后按1进行爬取choose为你要爬取的博主为方便爬取请你每次爬2个。