职位详情
微信扫码分享
举报
3-5年大专要求数据开发经验Doris/DruidETL开发经验数据平台开发经验SQL数据开发
核心技术与技能栈
1. 数据管道设计与开发
熟练掌握汉得HDSP数据服务平台,深入理解其数据集成、开发及任务调度等核心功能模块。
精通Apache Doris架构原理,熟练运用其多种数据模型(聚合模型、唯一模型、重复模型)及表结构设计方法(分区、分桶、RollUp物化视图)。
熟悉主流ETL/ELT工具(如DataX、SeaTunnel、Kettle、Spark SQL等),具备将其与HDSP平台协同使用的实际经验。
2. 数据集成与同步
具备对接多种关系型数据库(如Oracle、MySQL、SQL Server等)并完成数据抽取与处理的能力。
精通基于HDSP与Doris构建的离线数据链路架构,能够高效实现T+1模式下的数据同步流程。
3. 数据处理与开发
熟练编写高质量SQL语句,具备出色的SQL性能分析与调优能力。
有使用Doris完成复杂数据清洗、转换和聚合逻辑开发的实际项目经验者优先考虑。
4. 数据建模理论
深刻理解数据仓库分层架构(ODS、DWD、DWS、ADS),能结合具体业务需求进行合理的层级划分与模型设计。
掌握维度建模方法论,熟练应用星型模型与雪花模型,熟悉事实表、维度表及缓慢变化维等关键概念。
5. Doris专项能力
精通Doris作为OLAP引擎的查询机制与优化策略,可根据典型查询场景设计高性能的数据模型与物化视图。
具备Doris集群部署规划能力,涵盖节点配置、库表拆分策略以及数据备份恢复方案制定。
6. 数据治理与质量保障
熟悉数据治理主要方向,包括元数据管理、数据血缘追踪、数据质量规范、数据安全控制等。
有参与数据治理平台建设或实际应用经验,能够借助HDSP或其他工具推动数据资产目录与数据标准的落地实施。
职位总结

陈女士IP:江苏南京
芯知科技
·人事经理福州
相同职位推荐
企业招聘
职位大全
相关搜索

