大数据运维工程师

岗位职责：

1、负责大数据平台的部署、管理、优化、监控报警，保障平台服务7*24稳定可靠高效运行；
2、作为售后一线人员，及时响应业务部门要求，做好需求整理及梳理工作；
3、负责Hadoop/spark／Kafka/PG数据库等服务的业务监控、应急响应、容量规划等；
4、能够协助完成系统的数据备份、配置核查工作；
5、找出软件中存在的隐患和问题，能够提出合理的解决方案 ；
6、负责Hadoop及相关组件维护，包括客户投诉处理、故障处理、巡检管理、系统优化工作；
7、负责各类数据库配置核查、备份、日常维护、性能调优。

任职要求：

1、5年以上系统运维经验，熟悉linux常用命令，能够快速处理系统常见问题，至少熟悉一门脚本语言；
2、熟悉PG基础架构设计、高可用架构设计、分布式架构设计等；
3、对高并发、复杂SQL及数据库集群系统有深入理解，具备较强的故障定位和解决能力；
4、对大数据相关开源技术(Hadoop、Hive、Kafka、Storm、ElasticSearch)较为熟悉；
5、搭建、调优并维护过spark、Hive、Storm、Kafka、Redis、ES等服务；
6、熟练使用shell ，熟练使用python、php、perl之一，能独立进行脚本编程测试；
7、熟悉IT系统基础架构及网络原理，有实际大数据集群运维经验；
8、熟悉MySQL、zabbix（或其他监控软件）、Tomcat、消息队列等主流软件的配置及故障处理。