摘要:另外數(shù)學(xué)成為了一個(gè)關(guān)鍵詞,編程語言主要是等,運(yùn)營也出現(xiàn)在詞云中說明數(shù)據(jù)分析師也需要有運(yùn)營能力。
功能點(diǎn) 爬取數(shù)據(jù)
所有公司數(shù)據(jù),名稱簡寫,城市,行業(yè),職位數(shù)量,人數(shù)范圍,標(biāo)簽,介紹,融資階段,平均工資
github2016年度最受歡迎編程語言相應(yīng)年數(shù)薪水,城市,學(xué)歷要求,公司融資階段,公司行業(yè)
大數(shù)據(jù)行業(yè)五大崗位相應(yīng)年數(shù)薪水,城市,學(xué)歷要求,公司融資階段,公司行業(yè),崗位要求
編程語言分析編程語言在不同城市(top10)的需求量
編程語言在不同行業(yè)(top10)的需求量
編程語言在不同融資階段的需求量
編程語言相應(yīng)工作年限薪水平均值
大數(shù)據(jù)崗位分析五個(gè)崗位的職位需求關(guān)鍵詞詞云
五個(gè)崗位在不同城市(top10)的需求量
五個(gè)崗位在不同行業(yè)(top10)的需求量
五個(gè)崗位在不同融資階段的需求量
五個(gè)崗位相應(yīng)工作年限薪水平均值
數(shù)據(jù)可視化Bokeh
Echarts
開發(fā)工作編寫數(shù)據(jù)采集所用語言:python
針對拉勾網(wǎng)反爬蟲的應(yīng)對措施:
加http頭偽裝成瀏覽器;
找臨界值更換IP;
限制爬取頻率;
設(shè)置代理池。
使用多線程爬蟲:提高效率
制作詞云:jieba中文分詞,自定義詞典,wordcloud生成圖片
分析結(jié)果可視化:bokeh,echarts
數(shù)據(jù)崗位分析結(jié)果數(shù)據(jù)崗位不同城市需求增長趨勢
2016.02數(shù)據(jù)
2017.05數(shù)據(jù)
可以看到TOP5城市依然未變,南京武漢的數(shù)據(jù)崗位增加明顯,數(shù)量上而言,總體翻倍
數(shù)據(jù)分析崗位增長趨勢
數(shù)據(jù)分析相關(guān)專業(yè)作為新興行業(yè)在近一年來的發(fā)展勢頭迅猛,2016年10月之前的招聘信息十分稀少,但在短短四個(gè)月的時(shí)間內(nèi)增長至一千多個(gè)。(2016.10-2017.1)
2017.02數(shù)據(jù)
2017.05數(shù)據(jù)
數(shù)據(jù)崗位工資水平兩年內(nèi)變化
2015年數(shù)據(jù)崗位相應(yīng)工作年限平均工資
2017.05數(shù)據(jù)崗位相應(yīng)工作年限平均工資數(shù)據(jù)
可以看出,兩年內(nèi)數(shù)據(jù)崗位的工資明顯提高,起薪近乎漲了一倍,各個(gè)年限增長趨勢也很明顯。
數(shù)據(jù)挖掘工資趨勢
2015.12數(shù)據(jù)
2017.05數(shù)據(jù)
總體都比兩年前對應(yīng)年薪高,并且高薪比例明顯提高
數(shù)據(jù)崗位和普通開發(fā)不同年限工資對比
普通開發(fā)崗位工資水平
數(shù)據(jù)崗位工資水平
3-5年和5-10年的工資水平?jīng)]有明顯增長,也許說明重復(fù)的勞動(dòng)不能代表技術(shù)的增長
數(shù)據(jù)崗位和普通開發(fā)崗位要求學(xué)歷對比
可以看出,數(shù)據(jù)崗位對學(xué)歷的要求較普通開發(fā)高,碩士的比例增加,并出現(xiàn)了博士的需求。
詞云結(jié)果實(shí)例
數(shù)據(jù)架構(gòu)師崗位要求詞云
可以看出對架構(gòu)師而言,“開發(fā)”還是最重要的,“架構(gòu)設(shè)計(jì)”毫無疑問成為關(guān)鍵詞,另外管理能力也有所要求
數(shù)據(jù)分析師崗位要求詞云
可以看到數(shù)據(jù)分析師也需要掌握數(shù)據(jù)挖掘的技能。另外數(shù)學(xué)成為了一個(gè)關(guān)鍵詞,編程語言主要是“SQL”,“SAS”等,運(yùn)營也出現(xiàn)在詞云中說明數(shù)據(jù)分析師也需要有運(yùn)營能力。
數(shù)據(jù)挖掘崗位要求詞云
可以看到算法成為了一大關(guān)鍵詞,說明數(shù)據(jù)挖掘?qū)λ惴ǖ囊筮€是挺高的,另外“計(jì)算機(jī)”和“數(shù)學(xué)”成為了需求最多的兩個(gè)專業(yè),編程語言方面“SQL”,“ JAVA”,“ R”都有要求。
數(shù)據(jù)可視化崗位要求詞云
可以看到前端成為了一個(gè)關(guān)鍵詞,另外可視化相應(yīng)的工具如“ECHARTS”等也出現(xiàn)在詞云中,交互和開發(fā)同時(shí)出現(xiàn),這在其他崗位是沒有的,說明可視化還是需要視覺效果
職位需求量
所在行業(yè)
Python崗位所在行業(yè)
scala崗位所在公司行業(yè)
可以看出Python的應(yīng)用更廣,而Scala主要是數(shù)據(jù)服務(wù)行業(yè)需要。原因是Python除了可以用來做web開發(fā),在科學(xué)計(jì)算等方面的表現(xiàn)也很出色。
崗位城市分布(示例java)
Java崗位城市分布
可以看出Java的總體需求還是北上廣深杭比較多,而杭州數(shù)量多的可能也許是因?yàn)樽湓诖说陌⒗锇桶蛢?nèi)部使用Java較多
崗位所在公司融資階段(示例PHP)
對PHP需求最多的是初創(chuàng)型公司,可能因?yàn)镻HP可以做到快速開發(fā)并且在中小規(guī)模公司比較適用。
普通開發(fā)不同城市不同工作年限平均工資
可以看出,北京的整體工資水平最高,高薪主要集中在北上廣深杭,其中,杭州的工資水平也較高,可能因?yàn)楹贾菔前⒗锇桶途W(wǎng)易等大型互聯(lián)網(wǎng)公司總部所在地。
不同融資階段公司工作年限不同平均工資
可以看到1-3年和3-5年工資差距并不明顯,D輪及以上公司給的工資整體水平都比其他融資階段高
數(shù)據(jù)崗位集中在北上廣深,需求量呈爆炸式增長。
數(shù)據(jù)崗位算法、學(xué)歷要求更高,對業(yè)務(wù)敏銳,薪資更高。
門檻高的崗位需求量更少(Scala), 門檻低應(yīng)用廣(Python)
互聯(lián)網(wǎng)行業(yè)對人才的要求越來越高(算法、數(shù)學(xué)、業(yè)務(wù))
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://specialneedsforspecialkids.com/yun/44535.html
摘要:互聯(lián)網(wǎng)行業(yè)薪資普遍高于其他行業(yè)拉勾網(wǎng)數(shù)據(jù)顯示,年以來,互聯(lián)網(wǎng)行業(yè)的年度平均薪資穩(wěn)步增長,年度薪資較年同比增長,開年薪資同比去年增長。 智聯(lián)招聘的一組數(shù)據(jù)顯示,20...
摘要:成功爬取了拉鉤網(wǎng)上多個(gè)招聘崗位的具體信息后,數(shù)據(jù)可視化并得出分析結(jié)果如下從整體看,北上廣深杭這五個(gè)城市前端工程師招聘崗位,北京是遙遙領(lǐng)先,是深圳的兩倍,是廣州的三倍,其次到上海,深圳,杭州,廣州居末。 前前言 本文首發(fā)于 github blog 不想看爬蟲過程只想看職位錢途數(shù)據(jù)分析請看這里:前端招聘崗位分析C++招聘崗位分析JAVA招聘崗位分析PHP招聘崗位分析Python招聘崗位分析...
摘要:然后準(zhǔn)備再去抓下拉勾網(wǎng)的招聘數(shù)據(jù),這也是個(gè)相對優(yōu)秀的專業(yè)招聘網(wǎng)站了,數(shù)據(jù)也相當(dāng)多,想當(dāng)初找實(shí)習(xí)找正式工作,都是在這兩個(gè)上找的,其他的網(wǎng)站幾乎都沒看。 原文地址:http://www.jtahstu.com/blog/s... Pyhton爬蟲實(shí)戰(zhàn) - 抓取BOSS直聘職位描述 和 數(shù)據(jù)清洗 零、致謝 感謝BOSS直聘相對權(quán)威的招聘信息,使本人有了這次比較有意思的研究之旅。 由于爬蟲持續(xù)...
摘要:然后準(zhǔn)備再去抓下拉勾網(wǎng)的招聘數(shù)據(jù),這也是個(gè)相對優(yōu)秀的專業(yè)招聘網(wǎng)站了,數(shù)據(jù)也相當(dāng)多,想當(dāng)初找實(shí)習(xí)找正式工作,都是在這兩個(gè)上找的,其他的網(wǎng)站幾乎都沒看。 原文地址:http://www.jtahstu.com/blog/s... Pyhton爬蟲實(shí)戰(zhàn) - 抓取BOSS直聘職位描述 和 數(shù)據(jù)清洗 零、致謝 感謝BOSS直聘相對權(quán)威的招聘信息,使本人有了這次比較有意思的研究之旅。 由于爬蟲持續(xù)...
摘要:數(shù)據(jù)開源直聘拉勾網(wǎng)崗位和招聘信息數(shù)據(jù)可視化工具數(shù)據(jù)都是用導(dǎo)出來的,如果用不了,可以先試試這個(gè)軟件。 數(shù)據(jù)開源 - Boss直聘、拉勾網(wǎng)崗位和招聘信息數(shù)據(jù) OS:MacBook Pro , macOS High Sierra 10.13.2Database:MongoDB v3.4.7Mongo可視化工具:MongoBooster v4.1.3 數(shù)據(jù)都是用MongoBooster導(dǎo)出來的...
閱讀 861·2023-04-26 00:11
閱讀 2658·2021-11-04 16:13
閱讀 2106·2021-09-09 09:33
閱讀 1477·2021-08-20 09:35
閱讀 3823·2021-08-09 13:42
閱讀 3611·2019-08-30 15:55
閱讀 1056·2019-08-30 15:55
閱讀 2221·2019-08-30 13:55