数据开发工程师

职位描述 •Java •Spark •Flink •计算机相关专业 •大数据开发经验 •数仓建设经验 岗位职责： 1.负责专利数据的加工与生产，执行日常维护及更新，及时处理数据异常与问题 2.承担数据仓库的设计、搭建与持续运维，保障架构稳定，推动技术迭代升级 3.参与专利数据治理体系优化，主导相关工具的研发与落地 任职要求： 1.具备6-10年数据生产领域工作经验，掌握扎实的数据处理理论，精通数据建模与数据仓库建设方法 2.Java技术能力优秀，熟练运用主流Java框架、微服务架构及分布式系统开发，具备较强的Python开发能力 3.精通Spark、Flink、Kafka等Hadoop生态组件，具备实际的大数据平台调优经验 4.熟悉mongodb、DynamoDb、mysql、Hbase等数据库系统，至少精通一种以上数据库操作，SQL能力突出，有TIDB使用经验者优先 5.熟悉AWS、腾讯云或阿里云中任一平台的生产环境部署，具备云原生技术理解者优先 6.熟练使用docker容器化技术，掌握K8S集群管理，具备CICD工程化部署实践能力 7.掌握常用数据挖掘算法与理论，了解主流数据分析工具的应用场景 8.具备良好的英语听说交流能力 9.具备优秀的沟通协调能力、需求分析能力以及高强度工作环境下的抗压能力 10.了解当前主流大语言模型技术，有模型训练实践经验者优先录用