通過采集招聘網站大數據職位信息、利用數據清洗、數據分析、結巴分詞、數據挖掘完成整體項目的開發(fā)工作。任務包含爬取招聘網站大數據職位信息、使用BeautifulSoup清洗職位信息網頁、使用PySpark對智聯數據進行分析、對招聘職位信息進行探索分析、使用結巴分詞對崗位描述進行分詞并將關鍵詞統(tǒng)計、利用Echarts將職位分析結果進行可視化、建立職位模型對應聘人員進行相似度的計算