1、大数据开发工程师
主要负责大数据技术开发,如编写离线处理程序、数据采集、数据ETL等。
2、大数据运维工程师
主要负责公司大数据平台的维护,如管理、监控Hadoop集群、监控运行状态等。
3、大数据架构师
主要负责公司大数据平台的设想,如技术选择和技术安装。
4、大数据分析师
结合行业经验,负责公司各业务单元的数据分析,如财务分析、生产分析、销售分析等。
5、大数据算法工程师
主要负责机器学习相关算法开发,如推荐系统算法开发。
6、大数据实时计算开发工程师
主要负责公司实时计算系统开发,如实时风控系统Flink开发,基于Spark Streaming的实时指标分析开发。
7、数据挖掘工程师
主要负责基于大数据平台的数据挖掘、特征提取、挖掘模型选择和评价。例如,用户肖像挖掘类型标签的开发。
8、BI开发工程师
主要工作是搭建公司的商业智能平台,包括各种数据可视化报告的制作,以及仪表盘大屏生产的ETL开发工程师。
负责数据挖掘、数据清理及相关预处理。例如,从文本数据中清除一些非法数据。
大数据的未来发展前景是值得肯定的,但是现在大数据人才出现了供不应求的情况。大数据行业就业市场较为活跃的地区主要集中在京津冀、长三角、珠三角、成渝等区域,但是从目前招聘数据来看,大数据人才还是不能满足市场的需求,因此现在学大数据未来的发展前景是非常好的。
大数据作为一门基础科学,无论在数据开发及分析还是在物联网和人工智能算法训练领域,都有着强大的需求。随着数据规模不断增大,企业需求持续增长,大数据人才成了刚性需求。
大数据的就业领域是很宽广的,不管是科技领域,还是食品产业,零售业等等,都是需要大数据人才进行大数据的处理,以提供更好的用户体验,因为未来大数据人才就业面很广,就业机会很多,发展前景也是非常好的。