hadoop大数据开发工程师

岗位职责： 1、参与银行大数据基础平台（Hadoop、Spark、Flink、Kafka等）的部署、运维、性能优化及日常开发工作，确保平台运行的稳定性、高效性与安全性 2、负责银行数据仓库的架构设计、开发与持续维护，推进ODS、DWD、DWS、ADS等各层级数据模型建设，打造清晰、可靠、可扩展的数据体系 3、从银行核心系统、信贷系统、渠道系统等多类业务系统中完成批量与实时数据的采集、清洗、转换和加载（ETL）；编写高效的HQL、Spark SQL（Scala/Java/Python）脚本，处理大规模结构化与非结构化数据；构建并维护基于Flink/Spark Streaming的实时数据流处理通道，支撑实时风控、实时营销等业务场景 4、为风险控制、精准营销、客户画像、监管报送、报表分析等关键应用提供高质量的数据服务与模型支持；与数据分析师及业务部门密切协作，深入理解需求，并转化为可落地的技术方案 5、参与数据标准制定与数据治理流程实施，开发数据质量监控工具与自动化脚本，保障数据的准确性、一致性与完整性 任职要求： 1、熟练掌握Java、Spark、Hadoop技术栈，具备Shell脚本编写能力 2、熟悉SpringBoot+MVC框架开发，精通Java语言，了解HTML、JS基础语法 3、有金融领域信息系统开发背景及SQL性能调优实际经验者优先