发布网友 发布时间:2022-04-19 17:04
共1个回答
热心网友 时间:2023-06-29 17:18
大数据运维工程师是对大数据系统的维护,在现在大数据发展态势良好的前提下,大数据运维工程师就业是非常有优势的,并且随着大数据的发展与利用率的提高,前景也是比较好的。
1、负责软件系统的部署运行;
2、负责业务数据系统接入的规划和实施;
3、理解行业业务,梳理业务数据模型;
4、完成项目实施过程中各类文档的编写、收集、整理、归档;
5、与客户保持密切沟通,建立良好的客户关系,保障良好的客户满意度;
有效的分析和控制客户需求,解决项目实施过程中遇到的质量问题和管理问题。
1、精通基于Linux系统的常用服务配置,快速部署;熟悉RHEL或CentOS系统,理解RHEL系统规范,了解epel的rpm打包规范;
2、熟悉OS工作原理,掌握常用系统性能诊断工具;对CPU、MEM、IO、NET四大子系统内核参数以及程序性能优化;
3、熟悉Hadoop生态常用开源项目的部署升级、扩容缩容、性能和管理优化、问题排查等(主要包括Hadoop/Zookeeper/HBase/Hive、Spark、Presto/Kafka、Flume/DataX、Sqoop/Storm、Flink等);
4、熟悉JVM,熟悉大数据周边并有实践经验者优先(主要包括数据系统:MySQL,Redis,Elasticsearch,NewSQL等;机器学习:TensorFlow等);
5、熟练使用shell及python,并有一定开发经验。