大数据开发工程师(高级及以上)

上海

技术

职位描述:

工作职责:

负责数据集群统一的资源分配和管理;
负责大数据实时检索分析平台的开发、建设和优化;
基于业务场景,推进批处理、实时流计算框架的研发优化;
跟踪开源大数据框架、新算法框架的技术选型及平台化预研及架构。

职责要求:

5年以上大数据系统开发,设计,架构经验;
精通Java/ Scala/ Golang中至少一门语言;
熟悉大数据相关技术:Hadoop, Hive, HBase, ZooKeeper, Spark, ELK, Kafka,并阅读过相关源码;
管理过数据量上T级别,大规模数据集群,开发,优化并管理过上T级别的大数据作业;
有机器学习、统计学背景的优先。

工作地址:

上海

发布日期:

2019-08-23