许多网页爬虫开发者都遇到过这样一个难题：网页源代码与实际显示内容不符。58同城招聘页面就是一个典型的例子。 你可能会发现，直接爬取源代码得到的申请人数和浏览人数为0，而页面上却显示着实时更新的数字，且这些数字与浏览器开发者工具（F12）中的Elements标签页内容一致。这是因为58同城使用JavaScript动态加载数据。
解决方法是分析网络请求。
步骤：
打开开发者工具: 在浏览器中打开开发者工具（通常是F12），切换到“网络”或“Network”选项卡。
刷新页面: 刷新58同城招聘页面，观察网络请求。你会发现一个指向类似 https://statisticszp.58.com/position/totalcount/?infoId=27988... 的URL的请求。这个请求返回的数据包含了实时申请和浏览人数。 (注意：infoId 部分会根据具体职位而变化)。
分析JSON数据: 该请求返回的是JSON格式的数据，例如：
{ "deliveryCount": 1141, "commentCount": 0, "infoCount": 4, "resumeReadPercent": 0, "referUrl": "", "nextUrl": "null"}
其中，"deliveryCount" 代表申请人数，"infoCount" 代表浏览人数。
编写爬虫代码: 你的爬虫代码需要：发送请求到 https://statisticszp.58.com/position/totalcount/?infoId=... (替换 ... 为实际的 infoId)。解析返回的JSON数据。提取 "deliveryCount" 和 "infoCount" 字段的值。
通过这种方法，你的爬虫就能获取到58同城招聘页面上准确的、实时的申请和浏览人数，有效避免了直接爬取源代码带来的数据不准确问题。 记住，infoId 是动态变化的，你需要根据你目标职位的页面信息找到正确的 infoId 值。
以上就是如何爬取58同城工作页面中实时的申请和浏览人数？的详细内容，更多请关注创想鸟其它相关文章！
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 chuangxiangniao@163.com 举报，一经查实，本站将立刻删除。
发布者：程序猿，转转请注明出处：https://www.chuangxiangniao.com/p/1564378.html
微信扫一扫 
支付宝扫一扫 
