大数据研发工程师

岗位职责： 1.负责专利数据的加工与生产，日常维护更新及数据问题的排查与修复 2.承担数据仓库的搭建与运维，系统框架的监控与架构迭代升级 3.参与专利数据治理体系优化及相关工具的研发工作 任职要求： 1.具备6-10年数据生产相关经验，掌握扎实的数据处理理论基础，熟悉数据建模与数仓建设流程 2.精通Java技术栈，熟练运用主流Java应用框架、微服务架构及分布式系统开发，具备良好的Python数据处理能力 3.熟练使用Spark、Flink、Kafka等Hadoop生态组件，具备一定的性能调优实践经验 4.熟悉mongodb、DynamoDb,mysql,Hbase等数据库，精通至少一种数据库操作，具备优秀的SQL能力，有TIDB使用经验者优先 5.熟悉AWS、腾讯云或阿里云中任一云平台的生产环境部署，具备云原生技术理解者优先 6.熟练掌握docker容器化技术，了解K8S集群管理，具备CICD工程化部署能力 7.掌握数据挖掘常用算法，了解数据分析主流工具的应用场景 8.具备良好的英语听说交流能力 9.具备较强的沟通协调能力、需求分析能力以及抗压适应能力 10.了解当前主流大语言模型技术，有模型训练实际经验或接触经历者优先