Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

隨著各行各業都在進行數字化轉型,資料方面的人才也成為了各家企業招聘的重點物件,不同資料型別的崗位提供的薪資待遇又是如何的?哪個城市最需要資料方面的人才、未來的發展前景與錢途又是怎麼樣的?今天小編抓取了某網際網路招聘平臺上面的招聘資訊,來為大家分析分析。我們大致會講

資料抓取的流程與步驟資料清洗的流程與步驟視覺化的結果與分析

資料抓取的步驟

我們用Python當中的requests模組來發送與接收請求,然後用BeautifulSoup模組也解析返回的資料,程式碼如下

解析資料的程式碼如下

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

然後最後將收集到的資料匯出到excel當中,程式碼如下

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

小編這次所抓取的崗位分別有“資料分析師”、“資料探勘工程師”、“資料產品經理”、“大資料開發工程師”以及“資料運營助理”等等,接下來我們就針對所收集到的資料進行清洗與進一步的處理吧

資料的清洗與處理

我們用到的是Pandas模組,首先先匯入所有收集到的資料

我們來看一下最終的資料集長什麼樣子

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

刪除重複項

資料集當中或許存在重複的內容,我們用drop_duplicates()方法來進行重複項的去除

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

刪除缺失值

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

對薪資資料的清洗

接下來為了方便對薪資資料進行統計分析,我們對此也需要進行相對應的處理

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

視覺化分析結果

薪資的不同

我們先來看薪資上面的差距,根據不同的職位名稱來看,例如我們來看“資料產品經理”這個崗位

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

較多的是集中在20K-40K這個範圍當中,具體我們可以透過下面這個視覺化的結果來看

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

我們可以發現的是整體的市場中“資料產品經理”這個崗位的整體待遇是相對更好一點的,其次便是“資料探勘工程師”這個崗位,薪資一般也比較容易達到20K-40K之間的區間

哪個城市的需求最多

接下來我們來看一下哪些城市對資料方面的人才需求是最多的,

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

可以看到的是對於資料方面的人才需求最旺盛的仍然是北京,上海排在第二,與此同時呢,杭州在這方面的需求上面已經超過了廣州,位列第四,同時在前十名當中成都、南京以及武漢與西安都紛紛上榜

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

哪個行業所需要的資料崗位最多呢?

接下來我們來看一下哪個行業所需要的資料方面的人才最多,

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

從上面的結果中看到,除了“資料服務”行業之外,還有“內容諮詢、短影片”領域、“軟體服務”、“科技金融”、“電商平臺”、“IT技術服務”等領域對於資料方面的人才都有著相當旺盛的需求

對於學歷的要求是什麼樣的呢?

我們來看一下各家公司對於資料方面的人才,在學歷上又有何種要求呢?

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

一般來說僅僅是“本科”的學歷就可以了,當然還有少數的公司對於學歷的要求是侷限在碩士之上

崗位的簡短介紹

各家公司為了吸引越來越多的人才前往加入公司,也打出了各色各樣的標語,小編做了彙總,並且做成詞雲圖,首先我們用jieba模組對文字資料進行分詞

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

接著我們使用stylecloud模組來進行詞雲圖的繪製

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

Python抓取2500份招聘需求,資料顯示未來最吃香的崗位是這個

源:關於資料分析與視覺化

頂部