大数据开发高级工程师

folder_open技术

杭州 5-10年 本科

岗位职责:
1.负责包括数据采集、推荐系统、实时/离线计算、数据仓库、调度系统、BI系统等模块和大数据基础技术平台设计、规划、部署、监控、系统优化等;
2.负责基于Hadoop平台的推荐系统的实施和演进;
3.领导初/中级工程师完成服务设计及开发,解决技术难点;
4.大数据相关技术平台服务部署及运维基本技能;
5.按要求输出代码及文档。

任职要求:
1.计算机、数学相关专业本科及以上学历,5年以上设计、开发经验;
2.大数据相关技术平台服务部署及运维基本技能;
3.掌握常用的推荐算法,包含不限于ItemCF/UserCF/ALS/TF-IDF,熟知原理和实现过程,具有结合业务进行调整和二次开发的能力;
4.掌握大数据相关技术栈编程,并熟知组件原理,包含不限于HDFS/Spark/Kafka/Yarn/Hive/HBase/Flume;
5.精通JAVA、scala及一门以上脚本语言(shell/perl/python等),熟练掌握linux常规命令与工具;
6.有较强的学习、协调、沟通、表达能力。

 

菜单