前程无忧爬虫
源代码及数据在这里:https://github.com/muyuequzhi/job_spider,100多行代码敲的我对漂亮小姐姐都能免疫了!!
欢迎一起来折腾
今年夏天将会有很多机械专业的朋友毕业,我就爬取了前程无忧的相关职位信息进行分析,试图回答4个问题。
1、通过工作经验与薪资的关系图,来了解这个专业前景如何、是否适合长期投入
2、通过分析职位中不同学历的占比情况,来决定是否要专升本、考研
3、通过统计词频,看哪些是企业招聘时最看重的,来查漏补缺
4、通过郑州与上海的对比图,来决定将来是留在本地还是去上海(听说机械在南方就业好一些)
郑州与上海各800条,然后去除异地招聘、没有薪资的数据,数据保存为csv文件,在excel中进行分析
原数据薪资单位统一了下:统一为千/月,值为薪资范围的平均值,例如6-8千/月,取为7千/月
1、 通过工作经验与薪资的关系图, 来了解这个专业前景如何、是否适合长期投入
薪资取的是平均值,单位是千/月
发现这两的无工作经验的平均薪资要高于有1年工作经验的,刚开始还以为是数据有问题了,后来去前程无忧看了下,发现有些软件公司还有很多招聘职位,都是要求无经验、格式也一样,薪资给的还不错,不由得怀疑这是挂羊头卖狗肉了,有可能是培训机构。这两地在1年经验至5-7年经验这段区间薪资都是随着经验增长而上升的,还是可以的,不知道工作10年左右的人还会在前程无忧上找工作吗?
2、 通过分析职位中不同学历的占比情况, 来决定是否要专升本、考研
对比发现大专学历目前在郑州还挺多,占了有62%,不过上海要求就更高了,本科和专科占比快要持平了,建议专科可以升本,本科的选择权更大一些,是否要考研就根据个人情况了。
3、 通过jieba、词云统计词频, 看哪些是企业招聘时看重的,来查漏补缺,找对方向提升自己。
郑州的词云图令我很不解,工作、销售、负责排名前三,以为机械专业最重要的应该是机械设计、制图,看上海的词云图还符合预期,机械、产品、设计排名前三。
下边的是上海的
4、通过郑州与上海的对比图,来决定将来是留在本地还是去上海(听说机械在南方就业好一些)
看完这些图这个问题应该有答案了吧?