大数据运维工程师

工作职责 1. 负责Hadoop、Spark等分布式大数据平台的日常维护与性能调优，确保数据处理流程稳定高效运行。 2. 设计并实施数据备份及容灾方案，保障芯片研发与生产过程中数据的完整性和安全性。 3. 持续监控集群资源使用状态，结合日志分析和系统优化提升整体数据处理效能。 4. 协同数据团队推进数据仓库的搭建与运维，满足业务侧在数据分析方面的实际需求。 任职要求 1. 本科及以上学历，计算机、电子信息等相关专业背景，具备3年以上大数据平台运维经验。 2. 熟练掌握Hadoop生态组件（HDFS、YARN、Hive）以及Spark、Flink等计算引擎的运维管理。 3. 熟悉Linux操作系统，能够运用Shell或Python编写脚本，有自动化运维工具实践经验。 4. 具备良好的故障排查能力，可快速识别并解决系统异常与数据问题。 5. 熟悉半导体领域数据处理特性，具有制造业大数据系统运维经历者优先考虑。