大数据开发

职位描述： 1、熟悉Hadoop生态圈，包含但不限于Hbase/Hadoop/Zookeeper/Spark/Kafka/Flink/ClickHouse等，能够独立负责部署、性能优化、扩容等运维操作； 2、负责hadoop集群的监控、数据备份、数据监控、报警、故障处理； 3、负责大数据平台底层技术架构的规划、设计、实施与优化，为海量数据和大规模业务系统提供可靠的基础设施。 4、负责实时数仓建设，以及相关组件开发，精通flink相关 4、负责进行大数据相关技术整体解决方案，负责大数据专业服务项目设计与交付（数据治理、数据建模、数据分析挖掘等），参与制定离线、实时代码规范、测试规范，建立起实时开发质量控制方法 职位要求： 1、统招本科及以上学历，计算机、软件工程、数学/应用数学专业优先，5年以上大数据相关经验； 2、较为丰富的数据仓库及数据平台架构经验，能够通过对业务的深入理解，进行数据仓库、数据体系和数据价值的建设和优化； 3、有从事分布式数据存储与计算平台应用开发经验，熟悉Hive,Kafka,yarn,Spark，Flink等相关技术并有相关开发经验，对流式计算系统有深入的了解（必须），有Flink源码经验优先； 4、深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的