大数据运维工程师的主要职责说明 篇1
职责:
1. 管理公司大数据集群,提供高可用、高性能大数据集群系统,并保障系统稳定运行
2. 负责大数据集群性能监控与优化,故障处理,数据备份及灾难恢复
3. 负责大数据集群自助平台的高可用架构设计和负载均衡的设计和实现
4. 负责业务系统大数据集群管理,包括数据库日常维护,系统数据安全以及权限管理、故障处理、日常错误情况处理等
5. 负责依据业务需求优化数据存储结构,负责数据库系统部署方案的计划、设计和实施
6. 负责系统大数据集群定期检查,进行性能分析与调优,充分保证信息系统数据的安全及系统高效运行
任职资格:
1. 全日制本科及以上学历,计算机或相关专业,1年以上hadoop运维经验
2. 熟悉Hadoop生态圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安装配置和优化
3. 熟悉MySQL等关系型数据库的部署与优化,了解MongoDB或Cassandra等NoSQL数据库
4. 熟悉Linux类操作系统的基础命令操作,能够编写脚本开展日常运维工作
5. 熟悉Linux开发环境,会使用Shell/Java/Python中的一门脚本语言
6. 熟悉常见开源工具如Nginx、Zabbix、Grafana等的安装配置和使用
大数据运维工程师的主要职责说明 篇2
职责:
1、响应及解决客户的技术要求、疑问以及系统使用过程中的各种问题;
2、负责服务过程中问题现象和处理方案的收集撰写,形成知识库,并对知识库进行维护更新;
3、及时反馈技术处理过程中的异常情况,及时向上级反馈告警,同时主动协调资源推动问题解决;
4、定期对所有服务问题进行分析,并对服务效率有影响的问题提供反馈意见,提升服务支撑团队专业度。
5、能够独当一面,具备独立思考和处理问题的能力,并能够与客户建立良好的关系。
6、明确工作范围,定期与客户沟通工作量,并获取客户回执,及时归档。
7、能够快速熟悉参与项目中的业务,总结后与研发定期沟通。
岗位要求:
1、3年及以上工作经验,计算机相关专业本科及以上学历;
2、熟悉weblogic中间件的安装部署;
3、熟悉Oracle数据库的增删改查操作;
4、了解ETL相关内容,如Informatica、kettle等,具备基础操作技能;
5、了解BI报表相关内容,如cognos、tableau、自助式分析工具等,具备基础操作技能;
6、掌握基本的windows/linux操作命令;
7、熟练操作Office办公软件;具有较强的文档理解与编写能力,具有较强的语言表达及沟通协调能力;
8、熟悉电网业务优先。
大数据运维工程师的主要职责说明 篇3
1、参与设计、审核、优化公司IT系统以及各应用系统的体系架构;
2、全面负责公司运维项目的系统升级、扩容需求与资源落实,配合开发需求,测试、调整运维平台;
3、负责网络以及服务器的网络设置、维护和优化、网络的安全监控、系统性能管理和优化、网络性能管理和优化;
4、建立面向开发部门,业务部门的服务流程和服务标准;
5、负责IT运维相关流程的规划、设计、推行、实施和持续改进;
6、负责内部分派下发,对实施结果负责。
7、负责日常网络及各子系统管理维护。
8、负责设计并部署相关应用平台,并提出平台的实施、运行报告。
9、负责配合开发搭建测试平台,协助开发设计、推行、实施和持续改进。
10、负责相关故障、疑难问题排查处理,编制汇总故障、问题,定期提交汇总报告。
11、负责网络监控和应急反应,以确保网络系统有7*24小时的持续运作能力。
12、负责日常系统维护,及监控,提供IT软硬件方面的服务和支持,保证系统的稳定。
大数据运维工程师的主要职责说明 篇4
职责:
1、POS机销售系统、HR管理系统、仓库管理系统等公司IT系统的管理、维护及优化;
2、公司电子设备(计算机、打印机、扫描仪、传真机、复印机、投影仪等)软硬件的日常维护及管理;
3、公司网路和服务器升级,备份、恢复和问题解决;
4、公司电话、门禁、监控等弱电系统管理与维护,确保系统的稳定可靠运行;
职位要求:
1、计算机或IT相关专业,大专以上学历;
2、两年以上的企业网络管理、服务器网络管理等工作经验,能对网络故障进行快速定位和排除;
3、熟悉PC机硬件维护,各种网络设备基本维护;对服务器、路由器、防火墙能够熟练操作及维护,具备故障诊断和处理能力
4、熟悉各类网络协议和服务,比如:TCP/IP协议、各类路由协议、WEB服务、DNS服务、DHCP服务、HTTP服务等;
5、熟悉相关网络安全产品,如防火墙、IDS、防病毒,漏洞评估工具等;
6、熟悉网络布线、公司电话布线、电话主机配置和维护等;
大数据运维工程师的主要职责说明 篇5
职责:
1、负责大数据运维体系中的监控工作;
2、负责处理用户服务请求事件;
3、负责监控报警事件的处理;
4、负责协助完善监控体系;
5、负责监控平台运维工作,持续优化监控体系;
6、按时完成领导交办的其他相关工作。
任职要求:
1、大专及以上学历,计算机相关专业,1年以上大数据系统运维经验;
2、熟悉linux操作系统,熟悉hadoop、hive、hbase、yarn、spark、storm等组件的原理及运维方式;
3、熟悉中间件工作原理,对TOMCAT/jetty/nginx/微服务有一定了解,具备一定的操作能力;
4、至少熟悉python/bash/shell一种或多种语言,可独立编写维护及监控脚本;
5、有强烈的求知欲和钻研技巧,具有良好的独立分析问题与迅速解决问题的能力;
6、有良好的职业责任心和团队协作意识;
7、能适应7*24小时三班倒工作时间。
大数据运维工程师的主要职责说明 篇6
职责:
1、负责数据中心的日常维护、升级与部署、故障处理,保障数据中心的稳定运行;
2、负责制定与改进数据中心的、监控与冗余策略等,提高运维服务质量;
3、改进数据中心的服务架构,提高数据中心的性能和健壮性;
4、研究技术架构,发现潜在问题,制定数据中心系统调整和优化方案,提高系统的健壮性和效率;
岗位要求:
1. 本科及以上学历,理工科相关专业优先;
2. 具有3年以上相关工作经验;
3. 精通Linux系统如Redhat、Centos、Ubuntu 精通Apache、NginX、MySQL、FTP、 DNS等常用服务的安装、配置、调优和维护,及相应的集群、容灾、单点故障等解决方案;
4. 具备脚本编写能力,掌握常用脚本语言(shell,python,perl)中的一种或多种;
5. 熟悉sql语句,了解oracle的基本操作和优化;
6. 了解zabbix等运维监控和部署工具;
7. 了解lvs,nginx,proxy,cdn等web端技术,熟悉TCP/IP协议;
8. 有较强的语言沟通能力,具备较强学习能力; 工作态度认真、细致、负责;
9. 具有良好的文档写作能力,沟通协调能力、学习能力、团队精神和服务意识。
大数据运维工程师的主要职责说明 篇7
职责:
1、支持业务系统上线实施及业务系统的安装、调试、维护、监控和故障处理。
2、负责配合开发测试环境的搭建、应用的发布,以及对业务系统问题的跟踪与反馈。
3、负责服务器的规划、调试优化、日常监控、故障处理、数据备份、日志分析等工作。
4、参与运维流程制定,确保任何突发情况都能高效响应,负责服务器的规划部署,对服务器构架和网络进行优化和改进。
5、负责技术运维相关的文档、手册、流程编写整理。
6、维护阿里云计算架构。
7、维护docker和jenkins持续集成。
任职要求:
1、本科以上学历。
2、5年以上Linux运维经验,有丰富的Linux系统参数设置、性能调优、系统安全、故障定位处理经验。
3、精通常用服务的安装及配置(Nginx/Tomcat/Redis/OpenVPN/Docker)。
4、具有大型系统平台的运维/架构经验、了解自动化运维和监控工具,在网络安全方面有一定经验。
5、精通Docker、Git的使用和jenkins持续集成。
6、熟悉WINDOWS SERVER/LINUX/UNIX操作系统,熟悉MYSQL、ORACLE、SQL SERVER等主流数据库。
7、熟悉shell编程或脚本语言(例如shell,Python,Perl等),能编写自动化运维脚本优先。
8、熟悉腾讯云计算架构、VMEsxi虚拟化。
9、对Linux和云计算安全有一定的认识,能够做到安全加固,随时留意最新漏洞等。
大数据运维工程师的主要职责说明 篇8
职责:
1、负责公司大数据集群的构建,任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;
2、负责集群容量规划、扩容、集群性能优化及日常巡检和应急值守,参与大数据基础环境的架构设计与改进;
3、深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的Hadoop、Spark运维技术及发展方向;
4、具备ownership,故障排查能力,有很好的技术敏感度和风险识别能力;
5、良好的服务意识,主动思考,自我驱动力。
任职资格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系统的配置、管理、内核优化。能够独立编写(Shell/Python)脚本语言,脚本开展日常服务器的运维;
2、熟悉hadoop生态圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安装、调试和运维经验; 熟悉分布式日志分析系统ELK及相关技术;
3、熟悉软硬件设备,网络原理,有丰富的大数据平台部署,性能优化和运维经验; 了解运维高容量、大流量、大并发Web系统的业务知识以及解决方案;
4、工作认真负责,有较强的学习能力,动手能力和分析解决问题的能力;
5、能够利用各种开源监控工具、运维工具,HA、负载均衡软件完成工作任务;
6、mongodb、mysql等配置、调优和备份。
大数据运维工程师的主要职责说明 篇9
职责:
1、负责中心机房设备、服务器设备、网络交换机与存储系统的维护管理,保障其安全稳定运行;
2、公司各信息系统的日常维护与管理,如安全加固、故障分析、性能优化、数据备份等;
3、规划运维制度,监督运维管理规范的执行情况;
4、协助信息安全工程师做好网络安全管理工作;
5、完成上级交办的工作。
任职要求
1、 具有丰富的IT维护管理工作经验;
2、精通微软软件产品(Windows系列操作系统)的安装部署、维护、故障排除;
3、精通大型、多层级windows域控管理与维护,有集团化部署经验;
4、熟悉unix、linux系统安装调试、配置管理以及故障排除;
5、熟悉常见网络协议,熟悉日常监控软件的使用;
6、能独立设计及维护大中型以太网,能搭建并维护FTP,MAIL等服务器,熟悉路由器、交换机、磁盘存储等设备的配置及维护,熟悉主流虚拟化平台;
7、能够独立判断并排除服务器、虚拟化平台和网络的各种故障,了解计算机病毒的传播途径及防治方法,能处理防范查常见计算机病毒、修复操作系统漏洞;
8、具备较强的计划、组织管理能力、沟通协调能力和问题解决能力。
9、具备MCSE、VCP、RHCE认证优先。
大数据运维工程师的主要职责说明 篇10
职责:
1.负责参与公司大数据基础架构平台规划,运维,监控和优化工作,保障数据平台服务的稳定性和可用性;
2.研究大数据前沿技术,改进现有系统的服务和运维架构,提升系统可靠性和可运维性;
3.负责公司Hadoop核心技术组件HDFS、Yarn、MapReduce、HBase、Storm大数据存储计算核心的监控和日常运维工作。
4.独立完成大数据运维过程中问题定位、问题解决、并进行总结及部门的大数据基础技能培训;
任职要求:
1. 计算机、信息系统、数学或相近专业本科以上学历;
2. 拥有至少3年以上Hadoop运维经验、具备基于CDH与HDP的维护经验;
3. 熟悉Hadoop大数据生态圈服务的工作原理,具备相关实战维护经验,包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少独立维护过中大型Hadoop集群系统服务;
5. 至少精通Python,shell中的一种,了解JAVA;有良好的系统性能优化及故障排除能力;
6. 有大数据架构师工作经验更佳;