爬虫:爬取知乎评论2024

您所在的位置:网站首页 如何删除知乎上的评论和点赞 爬虫:爬取知乎评论2024

爬虫:爬取知乎评论2024

2024-07-04 11:21:24| 来源: 网络整理| 查看: 265

爬虫:知乎爬取评论2024

注:本文仅为兴趣爱好探究,请勿进行商业利用或非法研究,负责后果自负,与本文作者无关

一.总体概述

继上次爬取小红书评论之后,由于比赛需要,需要爬取更多平台的评论,这里盯上了知乎

同样的,爬取的数据包括了

评论者昵称,评论者id,性别,地区,评论内容,评论时间,评论等级

上效果图

二.爬虫过程

老规矩,打开对应页面f12

image-20240228212040502

搜索想要爬取的关键词,点击展开评论,可以看到这个xhr请求返回了json格式的评论数据

image-20240228212129685

翻页根据offset进行

https://www.zhihu.com/api/v4/comment_v5/answers/1459060852/root_comment?limit=10&offset=25370407_1053121143_0&order_by=score

翻页逻辑如下

image-20240228212337159

爬取子评论逻辑

image-20240228212403321

并发逻辑

image-20240228212437730

获取offset值逻辑

image-20240228212505225

数据处理

image-20240228212700997

最后这里笔者发现了一个更快更好的接口,现在f12发现的接口会有反爬限制,需要每次爬取之后都要更改header头x_zse_93和96的值,这个接口只需要有个cookie即可

image-20240228183129549

强烈推荐第二个老接口

三. readme

cookie必需!!

网页版知乎登录后,搜索想要关键词

image-20240228212745448

在下列评论多的问题中进行点击评论或者直接点入该问题

image-20240228212841553

对应的数据id字段即为必需填入脚本id字段

image-20240228213058857

image-20240228212940076

image-20240228212951976

在代码14行进行填入即可,可填入多个

效果如下

image-20240228213014346

原文链接

爬虫: 知乎爬取评论2024

关注公众号 剑客古月的安全屋

回复 2024知乎爬虫获取源码



【本文地址】

公司简介

联系我们

今日新闻


点击排行

实验室常用的仪器、试剂和
说到实验室常用到的东西,主要就分为仪器、试剂和耗
不用再找了,全球10大实验
01、赛默飞世尔科技(热电)Thermo Fisher Scientif
三代水柜的量产巅峰T-72坦
作者:寞寒最近,西边闹腾挺大,本来小寞以为忙完这
通风柜跟实验室通风系统有
说到通风柜跟实验室通风,不少人都纠结二者到底是不
集消毒杀菌、烘干收纳为一
厨房是家里细菌较多的地方,潮湿的环境、没有完全密
实验室设备之全钢实验台如
全钢实验台是实验室家具中较为重要的家具之一,很多

推荐新闻


图片新闻

实验室药品柜的特性有哪些
实验室药品柜是实验室家具的重要组成部分之一,主要
小学科学实验中有哪些教学
计算机 计算器 一般 打孔器 打气筒 仪器车 显微镜
实验室各种仪器原理动图讲
1.紫外分光光谱UV分析原理:吸收紫外光能量,引起分
高中化学常见仪器及实验装
1、可加热仪器:2、计量仪器:(1)仪器A的名称:量
微生物操作主要设备和器具
今天盘点一下微生物操作主要设备和器具,别嫌我啰嗦
浅谈通风柜使用基本常识
 众所周知,通风柜功能中最主要的就是排气功能。在

专题文章

    CopyRight 2018-2019 实验室设备网 版权所有 win10的实时保护怎么永久关闭