职位详情
微信扫码分享
举报
5-10年本科Java要求数据开发经验Spark原理/源码大数据引擎开发经验Flink原理/源码Kafka计算机相关专业数据平台开发经验HBase原理/源码HiveHive原理/源码Spark数据开发
大数据岗位
人力外包-长期
远程或者现场面试
办公地点:阳光城办公,通州潞苑北大街
要求:
1.具备保险行业相关背景
2.有Hive大数据平台开发经验(重点)
3.拥有关系型数据库使用经验(Oracle、MySQL)
岗位职责:
1、承担大数据平台ETL流程的开发工作,运用Java/Python搭建高效稳定的数据处理管道
2、基于Spark/FlinkSQL实现离线与实时计算任务,并对ClickHouse集群查询性能进行调优
3、通过Shell脚本完成自动化运维操作及任务调度管理
4、参与Hadoop生态组件(Hive/HBase/Kafka等)的性能优化与问题排查
5、依据业务需求设计并落地数据仓库的分层架构模型
技术能力:
必须项:
3年以上大数据开发工作经验,熟练掌握Java与Python编程语言
精通Spark框架,具备RDD/DataFrameAPI的实际应用能力
有FlinkSQL与ClickHouse在项目中的实际落地经验
熟练编写Shell脚本,熟悉Linux系统环境下的日常操作
了解主流ETL工具(如Kettle/DataX)或企业自研数据同步框架的使用
职位总结围绕职位描述,归纳工作内容、招聘要求

陈女士IP:广东广州
恒生保泰
·人事经理通州区
相同职位推荐
企业招聘
职位大全
相关搜索

