python爬虫实战案例——从移动端接口抓取微博评论，采用cookie登陆，数据存入excel表格，超详细（15）

文章目录

  • 1、任务目标
  • 2、网页分析
  • 3、代码编写
    • 3.1 代码分析
    • 3.2 完整代码

1、任务目标

1、目标网站：微博文章(https://m.weibo.cn/detail/4813628149072458)，这是微博某一篇博文，用于本文测试
2、要求：爬取该博文下，所有一级评论和二级评论，以及每条评论的作者，最后保存至Excel文件中

在这里插入图片描述

2、网页分析


一级评论页面分析：

  1. 进入网站（https://m.weibo.cn/detail/4813628149072458），由于网站需要登录，我们先用账号登录，然后打开开发者模式，因为pc端网页数据包不好分析，我们可以切换为客户端模式获取数据包
    在这里插入图片描述

  2. 刷新网页，因为是异步加载的网站&

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/450027.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

熵权法计算评价指标权重——使用Excel VBA实现

熵权法计算评价指标权重——使用Excel VBA实现

[ 熵权法 ] 信息是系统有序程度的一个度量，熵是系统无序程度的一个度量；根据信息熵的定义，对于某项指标，可以用熵值来判断某个指标的离散程度，其信息熵值越小，指标的离散程度越大， 该指标对综合…
阅读更多...
java脚手架系列4--测试用例、拦截器

java脚手架系列4--测试用例、拦截器

异常处理、拦截器、数据库连接 1 测试用例 单元测试是一个老生常谈的问题，无论是后端对自己的代码质量把的第一道关也好，也是对测试减缓压力。这里就不过多讲述测试用例的重要性，但是有2个框架我们必须了解一下。 1.1 JUnit和mockito 我们…
阅读更多...
gitlab保护分支设置

gitlab保护分支设置

版本：gitlab10.2.2 一旦设置master分支被保护，除了管理员之外的任何用户都无法直接向master提交代码，只要提交代码就会报错 # git push -u origin master Total 0 (delta 0), reused 0 (delta 0) remote: GitLab: You are not allowed to pu…
阅读更多...
[LeetCode] 733. 图像渲染

[LeetCode] 733. 图像渲染

题目描述： 有一幅以 m x n 的二维整数数组表示的图画 image ，其中 image[i][j] 表示该图画的像素值大小。你也被给予三个整数 sr , sc 和 color 。你应该从像素 image[sr][sc] 开始对图像进行上色 填充 。 为了完成 上色工作： 从初始像素…
阅读更多...
【python】OpenCV—Fun Mirrors

【python】OpenCV—Fun Mirrors

文章目录 1、准备工作2、原理介绍3、代码实现4、效果展示5、参考 1、准备工作 pip install vacm2、原理介绍 在OpenCV中，VCAM 库是一个用于简化创建三维曲面、定义虚拟摄像机、设置参数以及进行投影任务的工具。它特别适用于实现如哈哈镜等图像变形效果。 一、VC…
阅读更多...
简易STL实现 | PriorityQueue 的实现

简易STL实现 | PriorityQueue 的实现

1、priority_queue 的底层是堆，标准库中 直接使用 std::make_heap, std::push_heap, std::pop_heap 来实现 priority_queue 2、std::make_heap、std::push_heap 和 std::pop_heap 这三个函数 用于 处理堆数据结构（Heap）。堆 是一种特殊的完全…
阅读更多...
4、.Net 快速开发框架：DncZeus - 开源项目研究文章

4、.Net 快速开发框架：DncZeus - 开源项目研究文章

DncZeus 是一个基于 ASP.NET Core 和 Vue.js 的前后端分离的通用后台管理系统框架，其愿景是成为一个易于使用且功能丰富的 .NET Core 通用后台权限管理模板系统基础框架。项目名称 "DncZeus" 由 "Dnc"(.NET Core 的缩写)和 "Zeus"(古…
阅读更多...
JavaWeb环境下的Spring Boot在线考试系统开发

JavaWeb环境下的Spring Boot在线考试系统开发

1系统概述 1.1 研究背景 随着计算机技术的发展以及计算机网络的逐渐普及，互联网成为人们查找信息的重要场所，二十一世纪是信息的时代，所以信息的管理显得特别重要。因此，使用计算机来管理基于JavaWeb技术的在线考试系统设计与实现…
阅读更多...
【学习】word保存图片

【学习】word保存图片

word中有想保存的照片 直接右键另存为的话，文件总是不清晰，截屏的话，好像也欠妥。 怎么办? 可以另存为 网页 .html 可以得到： 原图就放到了文件夹里面
阅读更多...
Java学习Day47：戏耍黑手道人(项目记录)

Java学习Day47：戏耍黑手道人(项目记录)

1.项目背景 2.技术选择 3.环境搭建 1.创建空项目 创建health_parent父文件用来控制依赖，类型为quickStart 打包方式为，pom：用在父级工程或聚合工程中，用来做jar包的版本控制，必须指明这个聚合工程的打包方式为pom。…
阅读更多...
计算机网络-RSTP工作过程与原理

计算机网络-RSTP工作过程与原理

前面我们已经学习了RSTP的一些基础概念以及对于STP的改进之处，因为RSTP兼容STP，所以实际上两者工作原理是一致的，这里只简单过一遍，然后进行一些基础实验即可，大致还是遵循选举根桥、确定端口角色与状态、全网收敛的思…
阅读更多...
ROS理论与实践学习笔记——6 ROS机器人导航（仿真）之导航实现

ROS理论与实践学习笔记——6 ROS机器人导航（仿真）之导航实现

准备工作&#xff1a;请先安装相关的ROS功能包 安装 gmapping 包(用于构建地图):sudo apt install ros-<ROS版本>-gmapping 安装地图服务包(用于保存与读取地图):sudo apt install ros-<ROS版本>-map-server 安装 navigation 包(用于定位以及路径规划):sudo apt in…
阅读更多...
一文详解Ntlm Relay

一文详解Ntlm Relay

Ntlm Rleay简介 Ntlm Rleay翻译过来就是Ntlm 中继的意思&#xff0c;也肯定是跟Ntlm协议是相关的&#xff0c;既然要中继&#xff0c;那么攻击者扮演的就是一个中间人的角色&#xff0c;类似于ARP欺骗&#xff0c;ARP欺骗就是在一个广播域中发送一些广播&#xff0c;然后大声问…
阅读更多...
解锁C++多态的魔力：灵活与高效的编码艺术（上）

解锁C++多态的魔力：灵活与高效的编码艺术（上）

文章目录 前言&#x1f338;一、多态的定义与概念&#x1f33b;1.1 多态的核心思想&#xff1a;&#x1f33b;1.2 多态的两种主要形式&#xff1a; &#x1f338;二、多态的使用条件&#x1f33b;2.1 基类指针或引用2.1.1 为什么需要基类指针或引用 &#x1f33b;2.2 虚函数&am…
阅读更多...
UE5 猎户座漂浮小岛 04 声音 材质

UE5 猎户座漂浮小岛 04 声音 材质

UE5 猎户座漂浮小岛 04 声音 材质 1.声音 1.1 导入 wav格式 1.2 循环播放 1.3 mp3转wav 1.4 新手包素材&#xff08;火焰 &#xff09; particle&#xff1a;颗粒 2.材质 2.1 基本颜色 M_Yellow 2.2 混合模式与双面材质 2.3 金属感、高光、粗糙度 M_AluminumAlloy 2.4 自…
阅读更多...
视频网站开发：Spring Boot框架的高效实现

视频网站开发：Spring Boot框架的高效实现

5 系统实现 5.1用户信息管理 管理员管理用户信息&#xff0c;可以添加&#xff0c;修改&#xff0c;删除用户信息信息。下图就是用户信息管理页面。 图5.1 用户信息管理页面 5.2 视频分享管理 管理员管理视频分享&#xff0c;可以添加&#xff0c;修改&#xff0c;删除视频分…
阅读更多...
Codeforces Round 770 (Div. 2)

Codeforces Round 770 (Div. 2)

比赛链接&#xff1a;Dashboard - Codeforces Round 770 (Div. 2) - Codeforces A. Reverse and Concatenate 题意&#xff1a; 思路&#xff1a; 假设 s "abba" 经过1次操作后 -> "abbaabba" s "abcd" 经过一次操作后 -> "abcd…
阅读更多...
JavaWeb合集12-Redis

JavaWeb合集12-Redis

十二、Redis 1、Redis 入门 Redis是一个基于内存的key-valule 结构数据库。 特点&#xff1a;基于内存存储&#xff0c;读写性能高 场景&#xff1a;适合存储热点数据(热点商品、资讯、新闻) Redis安装包分为Windows版和Linux版&#xff1a; Windows版 下载地址: https://gith…
阅读更多...
unity 屏幕波动反馈打击效果（附资源下载）

unity 屏幕波动反馈打击效果（附资源下载）

unity 屏幕波动反馈打击效果 一枪打出去整个屏幕都回波动的效果反馈。 知识点&#xff1a; 1、动画事件 2、屏幕后处理 效果如图&#xff1a;&#xff08;波动速度浮动都可调整&#xff09; 附件下载
阅读更多...
Java 枚举类

Java 枚举类

枚举类型 在Java编程语言中&#xff0c;枚举类&#xff08;Enum Class&#xff09;是一种特殊的类&#xff0c;它用于表示一组固定的常量。这些常量通常用于定义变量的合法取值&#xff0c;比如一周的天数、交通信号灯的颜色等。枚举类提供了一种类型安全的方式来使用这些常量&…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023