spark大数据开发工程师

时间：2017-09-05 10:45 浏览次数: 发布者:runtimewh 来源:未知

岗位职责：
1. 负责数据仓库和大数据处理模块的架构设计和开发；
2.负责基于Hadoop/Spark生态系统，海量数据的处理、分析、统计、挖掘工作；
3. 基于Spark框架的数据仓库的设计，开发，维护，数据建模。
4. 负责Hadoop/Spark集群调优；
任职要求：
1. 本科及以上学历，计算机、数学及相关专业；
2. 熟悉Spark、Kafka、Akka、ZooKeeper、Flume、ELK等相关技术，至少有2年的Spark开发经验；优良的Trouble Shooting能力；
3. 熟悉linux开发环境；熟练掌握Java、Scala、Python、Shell中的一种或多种
4. 精通Java/Scala程序开发(至少一种)，熟悉Linux/Unix开发环境
5. 熟悉Scala语言，对Scala原理、底层技术有深入研究者优先；
6. 熟悉常用开源分布式系统，Hadoop/Hive/Spark/Yarn/Flume/Kafka/ZooKeeper/Redis，精通源代码，在开源社群活跃并有积极贡献者优先；
7. 熟悉数据仓库原理，熟悉SQL语言；
8.有过海量数据系统开发经验者优先。

职能类别：数据库工程师/管理员系统架构设计师

关键字：大数据软件工程师仓库

上一篇：C/C++软件研发工程师

下一篇：初级网络工程师

开班时间

相关推荐

spark大数据开发工程师

岗位职责： 1. 负责数据仓库和大数据处理模块的架构设计和开发； 2.负责基于Hadoop/Spark生态系...

Java软件开发工程师(中级)

岗位职责： 1.参与产品需求分析、系统设计,数据库设计，框架设计； 2.参与功能代码设计、审...

红帽RHCE讲师

职位要求: 1,大专以上学历,精通红帽RHCE课程体系,有二年以上丰富的教学经验. 2,动手能力强,具...

中级网络工程师

职位描述： 1、计算机通信、通信工程或相关专业，大专以上学历。 2、有相关证书(ccnp、ccie...