职位详情
微信扫码分享
举报
3-5年本科JavaHive要求数据开发经验数据中台Spark计算机相关专业数据平台开发经验Python数据开发
任职要求
硬性条件:
本科及以上学历
核心技能
具备大数据组件源码级别开发经验(需熟练掌握以下2-3项):
Spark:深入理解Spark Core/SQL执行引擎、内存管理机制及任务调度模块的底层实现
Hive:熟悉Hive SQL解析流程、执行计划优化策略(如CBO)、MetaStore架构设计
Trino/Presto:掌握分布式查询执行原理、Connector开发机制及性能优化手段(如动态过滤)
Ranger:了解权限管理体系、策略引擎工作原理,具备插件扩展开发能力
Doris:熟悉MPP架构、列式存储格式与查询优化器的技术实现
编程能力:
精通 Java/Scala,具备高性能、高并发场景下的代码开发实践
熟悉 Python(用于脚本编写或工具开发)者更佳
深刻理解分布式计算模型(MapReduce/DAG)、分布式存储系统(HDFS/S3)以及资源调度框架(YARN/K8s)
熟悉主流大数据生态组件(Flink/Kafka/HBase/ClickHouse等)
性能优化经验:
能够通过JVM调优、SQL改写、并行度调整等方式提升系统性能
熟练运用 Profiling 工具(如Arthas/Async Profiler/JMX)进行性能瓶颈定位与分析
加分项:
有开源社区参与经历(提交PR、修复Issue、担任Committer等)
具备PB级数据规模集群的运维与调优实战经验
了解云原生大数据技术架构(如Spark on K8s、存算分离方案)
发表过技术文章、论文或主导过内部/外部技术分享
软性要求:
对技术有强烈热情,能持续关注并学习大数据领域前沿进展
具备出色的问题排查能力,善于应对复杂生产环境中的疑难问题
拥有良好的团队合作意识和跨团队沟通协作能力
工作地点优先考虑成都、北京,远程办公可酌情评估
岗位聚焦方向:大数据开发、开源组件二次开发
请严格按关键词筛选候选人:数据中台开发 / Spark源码开发 / Hive源码开发 / Presto源码开发 / Trino源码开发
自10月底启动招聘以来,尚未匹配到合适人选,多数候选人缺乏数据中台相关开发经验,请勿随意推送简历
职位总结围绕职位描述,归纳工作内容、招聘要求

王女士IP:北京
联想利泰
·人事经理成都
相同职位推荐
企业招聘
职位大全
相关搜索

