目前国内使用较多的招聘网站是boss直聘网,它有个优点就是可实时聊天沟通,免去了求职者胡乱海投,而且中间可能很多都没有招聘回复,对求职者非常友好。但海量的职位数据,我们有时也会蒙圈,不知道到底哪些职位才适合自己。所以我们可能会想抓取一些职位回来分析。通过招聘职位数据,我们可以分析出自己所处行业的平均薪资,需求用户数,然后更好的制定自己的职业规划。
废话不多说,我们直接撸个小爬虫来实现这个简单的需求。(本文源代码可加我索要,也可以留下邮箱,我会定期批量发出)
为了完成本次需求,你需要了解或者熟悉初级的编程知识,如python语法,爬虫相关的python库等,对于技术细节我不会讲解太多,网上都有现成的,感兴趣的同学可以百度去搜一下教程
用到的技术如下(都是开源免费的技术):
Python3.7.7
playwright==1.15.3
lxml==4.6.3
以上几个包需要自己先安装好,实在不会的可加我询问。接下来我们一步步来实现吧!
进入boss直聘