职位详情
微信扫码分享
举报
3-5年本科JavaPythonAPACHEARK、HADOOP、数据中台开发数据库开发数据开发
岗位职责
1、数据采集与整合：
负责从多种数据来源（如关系型数据库、非关系型数据库、API接口等）获取数据，并完成数据的清洗、转换及集成工作。
2、数据质量保证：
保障数据的准确、一致与完整，通过建立和执行数据质量管理流程，持续维护高水平的数据质量。
3、数据分析与建模：
结合实际业务需求，运用统计方法与机器学习算法开展深度数据分析，构建有效模型以支撑业务决策与洞察。
4、数据架构设计：
依据业务场景，规划并优化数据架构体系，涵盖数据仓库、数据湖等组件，确保数据存储与查询的高效性。
5、数据流程自动化：
编写自动化脚本并搭建数据处理流程，提升数据作业效率，降低人工操作频率。
6、技术支持与咨询：
为团队提供数据处理方面的技术协助，及时响应并解决成员在数据相关任务中遇到的问题。
7、技术研究与创新：
关注数据处理领域的前沿技术与发展趋势，评估并引入适用的新技术手段，持续增强数据处理能力。
技术要求
1、编程语言：
熟练掌握至少一门编程语言，如Python或Java，具备扎实的编码实践经验。
2、数据库管理：
精通SQL语言，熟悉主流数据库管理系统，如阿里MySQL、PostgreSQL等。
3、数据处理框架：
熟悉常用大数据处理框架，包括Apache Spark、Hadoop、Flink、Kettle、DataX等。
4、数据仓库技术：
理解数据仓库建设的基本原则，有Amazon Redshift、Google BigQuery等平台的实际使用经验。
5、数据可视化：
能够使用至少一种可视化工具（如FineBI/FineReport、Tableau、Power BI、Matplotlib等）呈现分析成果。
6、版本控制：
掌握Git等版本控制工具的使用，具备良好的代码管理习惯。
职位总结围绕职位描述，归纳工作内容、招聘要求
王女士IP：四川成都
德科信息有限公司
·人事经理
广州
相同职位推荐
企业招聘
职位大全
相关搜索
