基于大数据技术的大学生就业技能需求分析系统

作     者：李海波 张睿 张志明 刘轶韬 

作者机构：江苏开放大学信息工程学院江苏南京210017 

基　　金：江苏省大学生创新创业训练计划项目(202114000008Y) 江苏省高校哲学社会科学研究一般项目(2019SJA0674) 江苏开放大学(江苏城市职业学院)“十三五”科研规划课题(2020-J-08) 

出 版 物：《工业控制计算机》 (Industrial Control Computer)

年 卷 期：2022年第35卷第10期

页      码：127-130页

摘      要：针对大学生很难从海量网络招聘信息中获取有价值的就业技能信息问题,设计并实现了一种基于大数据技术的大学生就业技能需求分析系统。使用Scrapy爬虫框架采集职位信息,存储于Hadoop分布式集群,使用MapReduce程序进行处理,利用Hive从招聘职位的多个维度进行提炼和分析,最后将结果进行可视化展示。实践表明,该系统能够帮助大学生更有针对性地学习就业所需技能,为职位规划提供更有效的决策。

主 题 词：网络招聘 就业技能 Scrapy爬虫 Hadoop分布式集群 数据分析 数据可视化 

学科分类：040106[040106] 12[管理学] 0401[教育学-教育学类] 04[教育学] 1201[管理学-管理科学与工程类] 

D　O　I：10.3969/j.issn.1001-182X.2022.10.047

馆 藏 号：203115323...