Hadoop中级运维支持

岗位要求： 1、计算机或相关专业本科及以上学历，5年以上通信、互联网或大中型企业Hadoop集群部署、运维、监控及管理经验。 2、具备CDH、CDP、HDP及开源Hadoop等主流大数据平台的建设、维护、运营及版本升级实践经历。 3、熟悉的大数据技术体系涵盖Linux、Hadoop、Kafka、Hive、Yarn、Flink、Spark、Tez、Ranger、Sentry、HBase、Redis、MySQL、Alluxio和LDAP等相关组件。 4、掌握常见中间件技术，如Spring Cloud Gateway、LVS、Keepalived、Nginx、HAProxy等，具备实际应用与调优能力。 5、熟悉常用安全技术工具，包括Iptables、Firewall、Knox、Kerberos等，能有效支撑平台安全策略实施。 6、精通Linux系统配置、管理与性能调优，具备独立定位并解决操作系统层面各类问题的能力；熟练掌握内存、CPU、磁盘、网络等系统资源的性能分析方法。 7、熟练运用Python、Shell等脚本语言开发自动化运维工具，提升运维效率。 8、责任心强，善于从问题中总结规律，具备主动思考与独立解决问题的能力，适应高强度工作压力。 9、具备良好的沟通协作能力，逻辑清晰，学习能力强，具有较强的团队合作意识。 10、积极主动，擅长问题发现与分析，可根据业务需求独立组织并推进工作任务落地。 11、持有大数据相关专业认证者优先考虑。 岗位职责： 1、承担大数据集群的日常运维工作，包含系统监控、告警响应、事件处理及值班任务。 2、负责集群突发故障的应急处置、根因排查、性能优化、安全加固及潜在风险治理。 3、主导大数据集群的部署实施、规模调整、版本迭代与数据迁移工作。 4、编写运维自动化脚本，输出标准化运维文档，推动运维流程规范化。 5、开展租户账号管理、资源分配、低利用率治理及资源回收等运营支持工作。 6、参与大数据平台7×24小时轮值保障，重大节假日及重点活动期间执行专项值守任务。