大数据研发工程师

到岗时间：1个月之内 婚况要求：不限婚况 职位描述： 1. 参与和主导大数据平台的开发和设计， 数据产品的落地， 包括但不限于数据采集、调度引擎、开发平台、数据治理、数据服务等 2. 参与和主导平台的技术攻坚， 解决平台的疑难杂症， 包括但不限于： 故障的定位与修复、 资源及性能的优化 3. 参与和主导平台技术的选型，新技术的预研， 主流前沿技术的引入和落地， 包括但不限于： 存储、（流批）计算引擎、多维分析及直接支持应用的各类数据产品 4. 参与和主导团队CodeReview 5. 参与开发流程的优化改造， 包括自动化测试等 技能要求： 1. 3年以上数据平台开发经验， 至少完整负责过下列模块之一： 数据集成调度引擎开发平台任务运维数据服务 2. 3年以上的Java开发经验， 可熟练开发MapReduceSparkFlink之一， 熟悉java的IO并发容器内存模型。 3. 数据hadoop生态环境， 深入理解过下列组件中的两个以上（包括功能和原理）： HbaseKafkaHadoopHiveSparkFlinkES。 阅读过源码、 有过二次开发经验者尤佳 4. 熟练操作Shell， 可独立使用命令行解决集群问题 5. 具备快速学习、团队合作及高效沟通的能力 6. 有过PB级数据平台经验者加分 7. 熟悉MongoRedisMysqlKylinDruidFlumeZookeeper 等开源产品者加分 8. 熟悉Spring BootSpring Cloud， 熟悉Web开发者加分 9. 熟悉PythonGo语言者加分 10. 有搭建数据中台经验者加分 11. 熟悉前端开发， 有ReactiveAntDesigner经验者加分 12. 有用户标签画像推荐等数据产品开发经验者加分 13. 了解数据挖掘流程者加分 14. 熟悉k8s docker者加分