当前位置: 首页 > article >正文

python爬虫实战案例——从移动端接口抓取微博评论,采用cookie登陆,数据存入excel表格,超详细(15)

文章目录

  • 1、任务目标
  • 2、网页分析
  • 3、代码编写
    • 3.1 代码分析
    • 3.2 完整代码

1、任务目标

1、目标网站:微博文章(https://m.weibo.cn/detail/4813628149072458),这是微博某一篇博文,用于本文测试
2、要求:爬取该博文下,所有一级评论和二级评论,以及每条评论的作者,最后保存至Excel文件中

在这里插入图片描述

2、网页分析


一级评论页面分析:

  1. 进入网站(https://m.weibo.cn/detail/4813628149072458),由于网站需要登录,我们先用账号登录,然后打开开发者模式,因为pc端网页数据包不好分析,我们可以切换为客户端模式获取数据包
    在这里插入图片描述

  2. 刷新网页,因为是异步加载的网站&


http://www.kler.cn/news/353691.html

相关文章:

  • Python数据分析库pandas高级接口dt的使用
  • PLSQL高级编程-面向对象编程
  • 初始化列表、静态成员、友元
  • Nacos2.3.2在ubuntu中的部署
  • R语言绘图——坐标轴及图例
  • (41)MATLAB中fftshift函数与ifftshift函数的用法
  • 程序设计说明书
  • 10.17学习
  • C语言双向链表操作
  • I\O进程线程(Day29)
  • leetcode力扣刷题系列——【最小元素和最大元素的最小平均值】
  • uniapp vue3 watch监听使用情况
  • 【微服务】深入探讨微服务架构:现代软件开发的变革之路
  • 【Postgresql】根据响应数据反向实现建表语句与insert语句
  • C++11 wrapper装饰器 bind+function
  • 【服务器知识】Tomcat简单入门
  • 10月17日,每日信息差
  • Leetcode 最小栈
  • 小白投资理财 - 中国股票代号
  • NVIDIA Bluefield DPU上的启动流程4个阶段分别是什么?作用是什么?