中级数据开发工程师

职位概述 我们正在寻找一名具备5年及以上数据开发相关经验的资深工程师,精通数据开发全流程、数据作业 调度、数据库性能调优及数据仓库模型架构设计,具备扎实的数据建模、数据治理功底和丰富的实战 经验。具备独立负责企业级数仓搭建与优化的能力,熟悉数据开发工程化实践;具备良好的业务敏感 度、跨团队协作能力和问题攻坚能力,能够结合业务需求打造高效、可靠、可扩展的数据体系,支撑 业务决策与数字化升级。 岗位职责 1.主导公司数据仓库(数仓)的整体架构设计、分层建模(ODS、DWD、DWS、ADS等),制定 数仓建模规范、数据标准与开发流程,保障数仓的合理性、可扩展性和可维护性; 2.负责核心数据开发工作,包括数据源接入、数据抽取(ETL/ELT、数据清洗、转换、加载等全流 程开发,编写高效、健壮的SQL脚本、数据处理程序,支撑业务报表、数据服务及数据分析需求; 3.负责数据作业调度体系的设计、开发与运维,搭建高效、可靠的调度流程,优化作业依赖关系, 监控作业运行状态,处理作业异常,保障数据产出的及时性准确性和完整性; 4.主导数据库(关系型、非关系型)的性能调优,包括SQL语句优化、索引设计、分区管理、参数 调整等,解决数据查询、存储、计算过程中的性能瓶颈,提升数据处理效率; 5.负责数据质量管控体系的搭建与落地,设计数据质量校验规则,监控数据质量,排查数据异常, 推动数据问题闭环,保障数据的准确性、一致性和完整性; 6.熟练运用DBT(Data Build Tool)进行数据模型开发、测试与部署,优化数据开发工程化流程,提升开发效率与代码复用性(会DBT者优先,无经验但学习能力强者可培养); 7.与业务、数据分析、数据运维等跨团队紧密协作,深入理解业务需求,将业务需求转化为数据方 案,提供高质量的数据支撑,推动数据驱动业务决策; 任职要求 1.本科及以上学历,计算机、统计学、大数据等相关专业5年及以上数据开发、数仓建模相 关工作经验,有大型企业级数仓搭建实战经验者优先; 2.精通数据开发全流程,熟练掌握ETL/ELT开发思路与方法,能独立完成复杂数据处理场景的开发与优化; 3.精通数据仓库模型架构设计,深入理解分层建模理念、维度建模(星型、雪花模型)等方法,具备从0到1搭建企业级数仓的能力,能结合业务场景优化数仓架构: 4.精通数据作业调度,能独立设计调度策略、优化作业依赖,具备调度体系故障排查与性能优化经验; 5.精通关系型数据库(MySQL、PG等)的原理与应用,熟练进行数据库设计、SQL优化、索引优化、分区管理,具备复杂场景下的数据库调优实战经验; 6.熟悉至少一种脚本语言(Python、Shell等),能编写脚本实现数据自动化处理、作业监控等需求; 7.优先要求:熟练使用DBT工具进行数据模型开发、测试、部署与维护,了解DBT最佳实践,能通过DBT优化数据开发流程; 8.具备良好的数据质量意识和数据治理思维,能设计合理的数据质量校验规则,推动数据质量提升; 9.具备优秀的问题分析与攻坚能力,能独立解决数据开发、数仓建模、调度、调优等过程中的复杂 加分项 1.精通DBT工具,有丰富的DBT项目实战经验,能主导DBT在团队中的落地与优化; 2.熟悉数据治理、数据血缘分析、元数据管理相关工具与实我,有数据治理项目经验 惯和文档编写能力,能编写清晰的技术文档点、开发文档,参与团队代码审查与