400-616-5551

您所在位置: 首页> 学习课程> python培训 | 数据抓爬:Python爬取300个区块链岗位深度分析

python培训 | 数据抓爬:Python爬取300个区块链岗位深度分析

发布百知教育 来源:学习课程 2019-11-01


最近区块链技术再次被大家热议,既然区块链受到如此高的关注,我们就不妨去采集数据分析看看,目前所有与区块链相关的招聘信息吧。



1

数据的爬取


首先是对于数据的爬取,由于目前这些招聘网站都设有很强的反爬手段,所以爬取起来并不是特别的简单,从网上获取来的源码绝大多数都不能直接拿来用。

小编采取了一个最为直接简单,但是又是最耗时的办法,就是先将所有的招聘网页的子网页链接保存下来,然后每十个网页作为一批,分别来进行爬取,同时注意程序的延时,防止反爬的发生。部分程序如下图所示。


Python培训


  • 程序首先爬取的是每个招聘子页的链接地址,将每个招聘子页的链接进行保存;

  • 接着找到“下一页”按钮,判断按钮是否有效,如果有效的话,就点击,然后进行接下来的爬取,如果无效的话,就退出浏览器;

  • 然后爬取到子页的链接后,便以10个为一组,然后分别爬取每个子网页的信息;

  • 如招聘职位的名称,工资,学历要求,职位职责等等信息。并将数据保存到本地。爬取的数据如下图所示:


python数据


2

数据分析


爬取到数据之后,接下来便是对于数据的分析,看看区块链的岗位的要求到底都有哪些,工资收入如何,学历要求如何。


1.首先是对于学历要求的展示,如下图所示:


python培训


从上图可以看出,区块链招聘对于本科及以上的学历要求占到了总数的73%以上,所以说对于区块链技术来说,学历上要求还是比较严格的


2.看看对于工作经验的需求


区块链非常看重经验,对于经验在3到5年的招聘需求最高,而应届毕业生以及经验在一年以下的,招聘的人数非常少。


3.区块链岗位的薪资如何,年薪到底有多少


对于薪资待遇,小编做了一下处理,由于招聘网页的薪资都是一个浮动的范围 ,因此小编就取了浮动范围的中间值作为薪资待遇,由上图可以看出,月薪在20k左右的招聘占到了约50%而月薪在20k到40k的占比也高达43%左右,所以区块链的薪资还是非常的诱人的。


4.区块链的招聘城市有哪些

由图可以看出北京、上海和深圳对于区块链的招聘人数最多,同时可以看出,对于区块链的招聘城市并不是非常多,而是主要集中于金融互联网较为发达的一二线城市。


说了这么多,薪资与其他招聘条件的关系如何呢?小编为大家展示的是薪资与学历的关系


python培训


上图中折线代表的是平均月薪和学历的关系,而柱状图代表的是学历和对应的招聘数量的关系。可以看出,薪资待遇方面呈现的关系是博士>硕士>本科>经验不限>大专。比较符合现在招聘的趋势,同时对于本科及以上的招聘数量远远高于其他学历。


3

看看招聘关键字


最后,小编为大家展示的是岗位职责的词云展示,如下图所示。


区块链对于项目经验技术等提出的最多,产品是关键字,就是需要大家有相关的经验。同时也有管理和计算机方面的知识,看来区块链对于大家的知识储备还是非常考验的,有兴趣的要提前布局啊。


Python培训:http://www.baizhiedu.com/python2019







上一篇:python培训 | Python 进阶编程之字典的高级用法

下一篇:应届生去公司找个Java程序员的职位需要什么技能?

相关推荐

www.baizhiedu.com

有位老师想和您聊一聊

关闭

立即申请