通過采集招聘網(wǎng)站大數(shù)據(jù)職位信息、利用數(shù)據(jù)清洗、數(shù)據(jù)分析、結(jié)巴分詞、數(shù)據(jù)挖掘完成整體項目的開發(fā)工作。任務包含爬取招聘網(wǎng)站大數(shù)據(jù)職位信息、使用BeautifulSoup清洗職位信息網(wǎng)頁、使用PySpark對智聯(lián)數(shù)據(jù)進行分析、對招聘職位信息進行探索分析、使用結(jié)巴分詞對崗位描述進行分詞并將關(guān)鍵詞統(tǒng)計、利用Echarts將職位分析結(jié)果進行可視化、建立職位模型對應聘人員進行相似度的計算