python 爬虫 一键获取Boss直聘的岗位
  WIU1Qlm7CwPb 2023年11月02日 60 0

使用python写一个爬虫脚本

搜索岗位名称就能获取所有相关岗位信息

公众号回复 Boss直聘 获取源代码

先看效果:

python 爬虫 一键获取Boss直聘的岗位_公众号

教程:

先打开网站,搜索任意岗位

然后打开开发者模式

全局搜索下面的岗位信息

就可以找到包含岗位信息的文件

python 爬虫 一键获取Boss直聘的岗位_搜索_02


点击负载,query就是你搜索的信息

page是页数

pagesize是一页显示多少条数据

这些是查询字符串参数

我们只要在url里去改变参数即可

python 爬虫 一键获取Boss直聘的岗位_字符串_03

python 爬虫 一键获取Boss直聘的岗位_字符串_04

python 爬虫 一键获取Boss直聘的岗位_搜索_05

把请求标头也全部复制写到headers里

请求url:
https://www.zhipin.com/wapi/zpgeek/search/joblist.json?scene=1&query=%E7%88%AC%E8%99%AB&city=101010100&experience=°ree=&industry=&scale=&stage=&position=&jobType=&salary=&multiBusinessDistrict=&multiSubway=&page=1&pageSize=30
请求方法:
get

然后开始写代码:

访问,这里做一个参数传递

传递要查询的岗位信息参数query

python 爬虫 一键获取Boss直聘的岗位_公众号_06

拿到源码后

一步步去提取信息

python 爬虫 一键获取Boss直聘的岗位_公众号_07

可以看这里比较清晰

python 爬虫 一键获取Boss直聘的岗位_搜索_08

提取完之后,再进行保存

python 爬虫 一键获取Boss直聘的岗位_公众号_09

看效果

python 爬虫 一键获取Boss直聘的岗位_公众号

没问题,岗位信息全部拿下


公众号回复 Boss直聘 获取源代码

代码仅供学习参考

感谢观看!


【版权声明】本文内容来自摩杜云社区用户原创、第三方投稿、转载,内容版权归原作者所有。本网站的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@moduyun.com

  1. 分享:
最后一次编辑于 2023年11月08日 0

暂无评论

推荐阅读
WIU1Qlm7CwPb