岗位职责查询
岗位职责及工作标准

大数据运维工程师岗位职责及工作内容

招聘大数据运维工程师的工作内容和职责,应聘做大数据运维工程师需要具备什么条件,大数据运维工程师的岗位职责是做什么工作的
大数据运维工程师岗位职责

大数据运维工程师工作职责描述范本,大数据运维工程师招聘条件要求会做什么,应聘大数据运维工程师需要做什么工作

大数据运维工程师需要做什么工作

大数据运维工程师工作职责

岗位职责:

1、负责公司大数据平台的部署、管理、优化、监控报警,保障平台服务7*24稳定可靠高效运行;

2、深入理解公司大数据平台架构,发现并解决性能瓶颈,支撑业务和数据量的快速增长;

3、开发大数据自动化运维、监控报警、故障处理相关脚本和工具;

4、负责Hadoop/spark/Kafka等集群服务、业务监控、持续交付、应急响应、容量规划等。

任职要求:

1、3年以上互联网运维相关工作经验,2年以上大数据平台运维相关工作经验;

2、具备一定的故障排查能力,有良好的技术敏感度和风险识别能力,精通一门以上脚本语言(shell/python等),熟悉Http/Https、TCP/IP、SMTP等协议;

3、熟悉Linux(redhat/centos)软硬件环境、系统管理和优化,熟练部署、优化各种常用服务。熟练使用Linux命令和常用的ssh、ftp、git、maven等开发工具;

4、熟悉Hadoop大数据生态圈,包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impala/Hue/Sqoop/Elasticsearch/kibana/MySQL/Oracle等;

5、熟悉Hadoop各组件的原理和实现,有实际部署维护、管理(包括元数据管理)及优化经验。并拥有持续调优能力,运维管理过大规模数据平台;

6、熟悉掌握常用的安全协议和组件服务,对hadoop各组件的权限、安全、kerberos进行配置管理。熟悉SSL、ACL、kerberos等在大数据环境场景的使用;

7、熟悉常用运维监控工具(nagios/ganglia/zabbix/grafan/openfalcon等)和相关插件的开发。比如邮件、短信、微信报警插件等;

8、熟悉常用nginx/haproxy/varnish/netscaler等代理工具的使用和优化;

9、具备良好的服务意识,善于主动思考,自我驱动力强。有良好的沟通、协调能力,富有团队精神,有较强的文档编写能力;

10、有大数据开发经验和阅读源码能力者优先。

招聘大数据运维工程师的工资一般是多少

大连机器人工程师 ¥9850元

湘潭运维工程师 ¥5750元

中级工程师 ¥11380元

机器视觉算法工程师 ¥17740元

深圳设备工程师 ¥8970元

深圳软件测试工程师 ¥10070元

上海协议分析工程师 ¥24290元

南宁安全服务工程师 ¥4600元

光学设计工程师 ¥13470元

无锡造价工程师 ¥10610元