职位描述:
1.负责项目大数据平台数据挖掘与分析工具的设计工作;
2.在项目大数据基础上,通过建模、分析和挖掘,完成数据挖掘与分析报告;
3.能根据数据和项目特点选择最合适的数据挖掘算法,并做调优;
4.能选择合适的数据分析软件进行分析并进行良好的可视化展示;
5.利用数据挖掘技术,构建文本特征模型,进行影响力评价及趋势预测;
要求:
1.统计学、计算机及相关背景专业毕业,学习并掌握数据挖掘与数据分析基本原理;
2.具备大数据分析相关工作经验,熟悉常用的数据分析方法和挖掘算法;
3.能利用数据挖掘与分析相关的常用工具,灵活运用到实践工作中,以便有效的开展数据分析;数据敏感性强,具备抽象和建模能力,能够通过数据察觉到背后的潜在变化和问题;
4.具有大数据挖掘、分析相关项目实施经验,参加过完整的数据挖掘项目并有成功案例优先;
5.乐于不断学习数据挖掘与分析相关新知识。
具体的:
1)会基本的数据管理,如SQL数据库的基本操作;
2)会用脚本语言进行数据分析,如:Python或R;
3)有获取外部数据的能力优先,如爬虫;
4)会基本的数据可视化技能,能撰写数据报告;
5)熟悉常用的数据挖掘算法,会根据需要选择合适的数据挖掘的学习模型,如监督学习、半监督学习和无监督学习的模型,并选择对应的算法及工具进行数据处理;
6)有大数据处理经验,熟悉分布式集群开发平台如:Hadoop集群环境,Spark集群环境优先。
|