(就业动态,
一、招聘岗位
高级大数据开发工程师
二、薪资待遇
18万-25万
三、岗位职责
1.基于Spark框架的流式计算功能的设计、开发、调优实施。
2. 独立承担系统设计、落地;并提供规范化的体系文档。
3. 对Spark集群进行性能调优。解决代码运行瓶颈。
4.负责大数据平台的运维,包括部署、管理、优化等,保障平台稳定运行。
5.负责针对不同业务场景设计不同的大数据实施方案。
开发自动化运维、监控报警、故障处理所需的脚本和工具。
四、岗位要求
1.计算机或相关专业本科或以上学历,精通Linux操作系统。
2.具有2年以上基于Scala语言的Spark streaming开发经验.具有处理TB级数据体量经验。
3.熟练在开发中使用Redis,ELK,Hbase,kafka等大数据组件。
4.熟练使用HIVE SQL。
5.熟悉Spark集群性能调优,精通Spark 集群环境下的代码性能优化,掌握Hadoop、Hive相关知识。
6.熟悉大数据集群运行基本原理及集群高可用性方案,精通CDH,TIDB相关架构及运维。
7.熟悉Prometheus监控软件的配置。
8. 熟悉大数据平台各个技术组件,包括 Hive, Spark, Hbase, Sentry, Kafka,ELK,Kerberos的运行原理和维护命令。
9. 熟悉JAVA语言开发,有Hadoop生态系统组件二次开发能力优先。
18-35
五、公司地址
德平路289号



