IT-大数据平台CDH开发运维工程师_中意人寿保险有限公司人才招聘信息

职位详情
岗位职责：
1、负责公司大数据平台的部署、管理、优化、监控报警，保障平台服务7*24稳定可靠高效运行；
2、深入理解公司大数据平台架构，发现并解决性能瓶颈，支撑业务和数据量的快速增长；
3、开发大数据自动化运维、监控报警、故障处理相关脚本和工具；
4、负责Hadoop-CDH/spark/Kafka等集群服务、业务监控、持续交付、应急响应、容量规划等；
5、根据业务需要，进行Hadoop-CDH/spark等平台数据服务功能的开发测试；

任职要求：
1、2年以上大数据平台运维相关工作经验；
2、具备一定的故障排查能力，熟悉一门以上脚本语言(shell/python等)，熟悉Http/Https、TCP/IP；
3、熟悉Linux(redhat/centos)软硬件环境、系统管理和优化，熟练部署、优化各种常用服务；
4、熟悉Hadoop大数据生态圈，包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impala/Hue/Sqoop/Elasticsearch/MySQL/Oracle等；
5、熟悉Hadoop各组件的原理和实现，有实际部署维护、管理( 包括元数据管理)及优化经验；
6、熟悉掌握常用的安全协议和组件服务，对hadoop各组件的权限、安全、kerberos进行配置管理；
7、熟悉常用运维监控工具（nagios/ganglia/zabbix/grafan/openfalcon等）和相关插件的开发；
8、熟悉常用nginx／haproxy/varnish/netscaler等代理工具的使用和优化；
9、有大数据开发经验和阅读源码能力者优先。