- 发布日期：
- 2018-12-04 10:48:59
- 职位名称：
- 大数据架构师
- 所属行业：
- 所在省份：
- 深圳
- 薪资范围：
- 联系方式：
- jobs@dsi.com.cn
职位描述
岗位职责：
电商数据处理和机器学习流程，为搜索和推荐引擎输送实时数据更新，直接影响在线排序，提升成交转化。
任职要求：
电商数据处理和机器学习流程，为搜索和推荐引擎输送实时数据更新，直接影响在线排序，提升成交转化。
任职要求：
1、对Linux操作系统熟练掌握，熟悉shell脚本编程；
2、深入理解 Hadoop/Hive/Oracle 等数据管理系统的原理、运维、性能调优方法；
3、深刻理解hadoop相关技术的原理和开发方法，熟练hadoop平台的搭建部署、调优、故障诊断、运行维护的方法和工具；
4、精通storm及其开发 5.熟练掌握Map/Reduce、HBASE、HIVE、PIG、Mahout中两种以上开发技术，并有实际产品的上线应用；
5、对集群有着深刻的了解，能深入的了解hadoop集群及其周边常用各个模块；
6、搭建维护hadoop集群并进行必要的troubleshooting, 保障系统正常运行；
7、能利用集群实现对数据的分析和处理