大数据运维工程师的主要职责说明(精选17篇)
大数据运维工程师的主要职责说明 篇1
职责:
1、负责大数据运维体系中的监控工作;
2、负责处理用户服务请求事件;
3、负责监控报警事件的处理;
4、负责协助完善监控体系;
5、负责监控平台运维工作,持续优化监控体系;
6、按时完成领导交办的其他相关工作。
任职要求:
1、大专及以上学历,计算机相关专业,1年以上大数据系统运维经验;
2、熟悉linux操作系统,熟悉hadoop、hive、hbase、yarn、spark、storm等组件的原理及运维方式;
3、熟悉中间件工作原理,对TOMCAT/jetty/nginx/微服务有一定了解,具备一定的操作能力;
4、至少熟悉python/bash/shell一种或多种语言,可独立编写维护及监控脚本;
5、有强烈的求知欲和钻研技巧,具有良好的独立分析问题与迅速解决问题的能力;
6、有良好的职业责任心和团队协作意识;
7、能适应7*24小时三班倒工作时间。
大数据运维工程师的主要职责说明 篇2
职责:
1、响应及解决客户的技术要求、疑问以及系统使用过程中的各种问题;
2、负责服务过程中问题现象和处理方案的收集撰写,形成知识库,并对知识库进行维护更新;
3、及时反馈技术处理过程中的异常情况,及时向上级反馈告警,同时主动协调资源推动问题解决;
4、定期对所有服务问题进行分析,并对服务效率有影响的问题提供反馈意见,提升服务支撑团队专业度。
5、能够独当一面,具备独立思考和处理问题的能力,并能够与客户建立良好的关系。
6、明确工作范围,定期与客户沟通工作量,并获取客户回执,及时归档。
7、能够快速熟悉参与项目中的业务,总结后与研发定期沟通。
岗位要求:
1、3年及以上工作经验,计算机相关专业本科及以上学历;
2、熟悉weblogic中间件的安装部署;
3、熟悉Oracle数据库的增删改查操作;
4、了解ETL相关内容,如Informatica、kettle等,具备基础操作技能;
5、了解BI报表相关内容,如cognos、tableau、自助式分析工具等,具备基础操作技能;
6、掌握基本的windows/linux操作命令;
7、熟练操作Office办公软件;具有较强的文档理解与编写能力,具有较强的语言表达及沟通协调能力;
8、熟悉电网业务优先。
大数据运维工程师的主要职责说明 篇3
职责:
1、负责公司大数据集群的构建,任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;
2、负责集群容量规划、扩容、集群性能优化及日常巡检和应急值守,参与大数据基础环境的架构设计与改进;
3、深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的Hadoop、Spark运维技术及发展方向;
4、具备ownership,故障排查能力,有很好的技术敏感度和风险识别能力;
5、良好的服务意识,主动思考,自我驱动力。
任职资格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系统的配置、管理、内核优化。能够独立编写(Shell/Python)脚本语言,脚本开展日常服务器的运维;
2、熟悉hadoop生态圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安装、调试和运维经验; 熟悉分布式日志分析系统ELK及相关技术;
3、熟悉软硬件设备,网络原理,有丰富的大数据平台部署,性能优化和运维经验; 了解运维高容量、大流量、大并发Web系统的业务知识以及解决方案;
4、工作认真负责,有较强的学习能力,动手能力和分析解决问题的能力;
5、能够利用各种开源监控工具、运维工具,HA、负载均衡软件完成工作任务;
6、mongodb、mysql等配置、调优和备份。
大数据运维工程师的主要职责说明 篇4
职责:
1. 管理公司大数据集群,提供高可用、高性能大数据集群系统,并保障系统稳定运行
2. 负责大数据集群性能监控与优化,故障处理,数据备份及灾难恢复
3. 负责大数据集群自助平台的高可用架构设计和负载均衡的设计和实现
4. 负责业务系统大数据集群管理,包括数据库日常维护,系统数据安全以及权限管理、故障处理、日常错误情况处理等
5. 负责依据业务需求优化数据存储结构,负责数据库系统部署方案的计划、设计和实施
6. 负责系统大数据集群定期检查,进行性能分析与调优,充分保证信息系统数据的安全及系统高效运行
任职资格:
1. 全日制本科及以上学历,计算机或相关专业,1年以上hadoop运维经验
2. 熟悉Hadoop生态圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安装配置和优化
3. 熟悉MySQL等关系型数据库的部署与优化,了解MongoDB或Cassandra等NoSQL数据库
4. 熟悉Linux类操作系统的基础命令操作,能够编写脚本开展日常运维工作
5. 熟悉Linux开发环境,会使用Shell/Java/Python中的一门脚本语言
6. 熟悉常见开源工具如Nginx、Zabbix、Grafana等的安装配置和使用
大数据运维工程师的主要职责说明 篇5
职责:
1.负责参与公司大数据基础架构平台规划,运维,监控和优化工作,保障数据平台服务的稳定性和可用性;
2.研究大数据前沿技术,改进现有系统的服务和运维架构,提升系统可靠性和可运维性;
3.负责公司Hadoop核心技术组件HDFS、Yarn、MapReduce、HBase、Storm大数据存储计算核心的监控和日常运维工作。
4.独立完成大数据运维过程中问题定位、问题解决、并进行总结及部门的大数据基础技能培训;
任职要求:
1. 计算机、信息系统、数学或相近专业本科以上学历;
2. 拥有至少3年以上Hadoop运维经验、具备基于CDH与HDP的维护经验;
3. 熟悉Hadoop大数据生态圈服务的工作原理,具备相关实战维护经验,包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少独立维护过中大型Hadoop集群系统服务;
5. 至少精通Python,shell中的一种,了解JAVA;有良好的系统性能优化及故障排除能力;
6. 有大数据架构师工作经验更佳;
大数据运维工程师的主要职责说明 篇6
职责:
1、网络与电话线路搭建与维护;
2、机房设备、视频会议系统维护;
3、计算机、打印等日常办公设备维护与维修;
4、服务器、AD域、DNS、文件共享、IIS服务管理与维护;
5、固定资产日常管理及台账更新登记;
6、上级领导交办的其他工作。
任职资格:
1、本科及以上学历,计算机、网络维护等相关专业,两年以上大中型企业同岗位工作经验,熟悉建筑设计行业相关软件者优先。
2、工作责任心强,认真负责,具有良好的沟通协调及逻辑思维能力、踏实认真的工作态度。
3、具有良好的组织、协调能力和较强的团队管理能力。
大数据运维工程师的主要职责说明 篇7
职责:
1、负责银行各类应用系统的运维标准制定和运维管理等工作;
2、负责银行各类应用系统的运行情况及相关技术的整理、分析和总结等工作;
3、负责银行各类应用系统的应用监控、应用运维体系工具的建设和维护工作;
4、负责银行各类应用系统的自动化脚本编写和测试工作。
招聘要求:
1、全日制一本以及以上学历,理工类专业;
2、具备2年及以上应用系统运维或应用系统开发经验,有银行应用系统运维或开发经验者优先;
3、具备较强的文档编写、英语文档阅读能力;
4、具备良好的沟通表达能力和团队合作精神,具有较强的工作责任心和主动性;
5、至少具备以下二项技能:
(1)熟悉银行应用系统体系架构、应用运维标准化流程;
(2)熟悉AIX、LInux操作系统相关运维工作,具备熟练的SHELL脚本编程能力;
(3)熟悉应用软件持续集成和持续发布交付项目的整体流程,熟悉Jenkins、Nexus等相关Devops工具;
(4)熟练使用容器平台相关技术,有容器平台管理工作、应用容器打包的相关经验;
(5)熟练使用Golang或者Python编程。
大数据运维工程师的主要职责说明 篇8
职责:
1、负责建设、调试和维护公司的网络系统,包括网络相关的软硬件系统负责解决网络故障、优化网络性能;
2、对各种应用支持软件如数据库、中间件以及各种通用服务或特定服务的监控管理,如邮件系统、DNS、Web 等的监控与管理;
3、管理企业中各 IT 系统的资源资产情况,这些资源资产可以是物理存在的,也可以是逻辑存在的;
4、推行信息技术中心的软件配置化管理,保证公司主要业务系统配置安全;
5、负责业务系统SIT/PRE/PRD的环境的部署发布工作;
6、负责维护公司机房和服务器资源;
7、推行Devops,实现适合公司IT环境的持续集成、持续部署等自动化运维;
任职资格:
1、大学本科及以上学历,计算机或相关专业毕业,具有大型互联网公司三年以上运维经验;
2、精通Linux系统,熟悉常用的web服务器/数据库/中间件等软件的应用及运维管理,熟悉TCP/IP及常用应用层协议;
3、精通一门以上脚本语言(shell/perl/python等),具备自动化运维、CI/CD、DevOps项目实践等相关经验,熟悉Kubernetes、Docker等容器相关技术;
4、熟悉大型分布式系统(计算/存储)的架构设计及运维管理,具备QEMU/KVM、libvirt、openstack等虚拟化技术的开发/运维经验者优先;
5. 具备较强Trouble-shooting能力,能够快速排查系统各种异常、瓶颈等,并推动平台和产品的优化改进;
6、具备较强的客户服务意识,能够快速响应客户咨询、技术支持等问题,提供相关解决方案,协助客户进行应用系统架构设计、快速上云和迁移等相关工作;
7、积极主动,善于沟通与持续学习,拥有较强的责任心与团队协作意识,敢于接受挑战并能承受较强工作压力。
大数据运维工程师的主要职责说明 篇9
职责:
1、负责开发、测试、模拟、正式等环境中数据库环境搭建。
2、负责业务平台的上线、版本更新中数据库支撑工作。
3、负责制定数据库备份计划,撰写备份脚本,对各环境下数据库进行备份,定期检查备份结果及备份有效性测试。
4、负责撰写数据库巡检脚本,定期对数据库进行巡检,并监控数据库运行状态,及时处理数据库告警。
5、维护和更新开发、测试、模拟、正式等环境数据库用户资源,确保资料准确性。
6、负责业务系统平台的数据库故障诊断及优化数据存储结构,对性能有问题的SQL语句提出优化方案。
7、负责业务平台部分数据统计工作,为业务部门提供需要的数据。
8、完成领导安排的其他工作
技能:
(1)熟悉Oracle 11g数据库原理,能独立完成单机、RAC、DG的部署和日常维护,具有OCP或者以上相关证书;
(2)深入理解mysql InnoDB引擎,熟悉MySQL数据库应用运行体系及高可用解决方案;
(3)熟悉NOSQL数据库,至少掌握mongodb、redis中的一种,独立完成单机、集群安装部署、备份等;
(4)精通数据库运维监控,熟悉zabbix、nagios、cacti中至少一种,有Oracle、mysql数据库性能调优经验,对于Oracle会借用AWR报告分析定位问题;
(5)熟练掌握sql语言,有较强的SQL编写和调优能力,可以根据数据库设计文档等资料,完成特定的报表统计;
(6)熟练掌握shell、perl、python等脚本编程,熟练使用shell 脚本执行备份、巡检等数据库日常维护工作;
大数据运维工程师的主要职责说明 篇10
1.负责桌面计算机软硬件(计算机、显示器、电话、网络设施和其他附属硬件设施,如打印机、扫描仪)安装、配置、升级、运行维护与管理,保障桌面系统正常运行,满足日常工作的需要。
2.负责对网络设备、服务器及安全系统等运行监控与管理,负责对公司综合布线系统的维护与管理。
3.负责电话、视频会议系统的运行维护与管理。
4.撰写运维技术文档,统计整理运维数据。
大数据运维工程师的主要职责说明 篇11
职责:
1.维护数据库服务正常运行和应急响应。
2.为开发和业务人员提供相关数据库支持。
3.负责维护数据库的日常变更、备份、恢复校验、扩容、数据迁移和安全管理。
4.负责数据库性能分析及系统优化、问题跟踪和管理。
5.制定数据库规范流程、文档建设。
任职要求:
1.3年以上大型oracle、mysql数据库管理经验。
2.了解linux系统,掌握使用centos、Ubuntu等发行版本,可全linux环境工作。
3.熟练掌握oracle高可用架构,具备快速定位故障能力和优化能力。
4.熟练掌握mysql高可用架构,具备实际运维管理经验 。
5.熟悉EMC、HDS、DELL等存储硬件管理经验优先。
6.熟悉Golang, Python等系统开发语言,可以对数据库相关工具进行二次开发;有数据库开发经验优先。
大数据运维工程师的主要职责说明 篇12
职责:
1、负责项目内主机系统的日常运维、故障处理等工作,并提交相关报告;
2、负责中间件(如:Tomcat、nginx等)的部署、故障排除和调优等工作;
3、负责操作系统层面安全整改工作;
4、配合业务系统软件发布及客户定期进行的应急演练;
职位要求:
1、具有1年以上运维经验,计算机及相关专业专科以上学历;
2、精通Linux、Windows等操作系统的运维管理;
3、熟悉中间件产品,如:Tomcat、nginx,能熟练进行这些产品的安装、配置和调优等;
4、能够熟练使用shell、Python等任意一种语言编写自动化运维脚本;
5、积极主动,责任心强,有团队合作精神,有良好的人际沟通和表达能力;
大数据运维工程师的主要职责说明 篇13
职责:
1、负责计算机、局域网络、以及机房设备维护工作;
2、负责办公设备的日常维护及管理工作;
3、负责病毒的查杀,维护网络系统安全;
4、负责设备资产及配置信息登记与更新;
任职资格:
1、大专及以上学历,计算机相关专业;
2、具有运维管理、服务器网管工作经验;
3、具有较好的网络基础知识,熟悉网络搭建及常用设备的使用;
4、熟练使用主流电脑操作系统,能够处理常见的软件问题;
5、通过国家软考初、中级优先。
大数据运维工程师的主要职责说明 篇14
职责:
1. 负责大数据平台的稳定性和性能优化;
2. 负责大数据项目的运维工作;
3. 针对业务需求制定统一的运维解决方案;
4. 完善自动监控报警系统,对业务层面关键指标进行监控与报警通知;
任职要求:
1、熟练掌握hadoop平台搭建、维护,有平台优化经验;
2、熟悉HDFS、Hive、Spark、HBbase、Kafka、Flume等组件的原理,有阅读源码能力者优先;
3、熟悉腾讯云产品,有腾讯云EMR使用经验者优先考虑;
4、熟练掌握java、python语言,熟练使用SQL,并有一定的优化能力
大数据运维工程师的主要职责说明 篇15
职责:
1. 负责X86服务器、Suse Linux系统设备硬、软件的安装、问题分析、升级等运维工作;
2. 负责根据需求规划设备硬件配置,完成系统资源规划以及实施工作;
3. 负责根据硬件架构,对操作系统性能进行调优或者升级;
4. 相关技术文档的编写;
任职资格:
1. 全日制本科以上学历,计算机相关专业毕业;
2. 3年以上相关工作经验,有金融行业运维工作经验优先;
3. 具备Linux等操作系统的安装、问题分析、升级等工作经验,以及X86、储存等相关硬件的运维经验;
4. 熟悉Vmware等虚拟化技术,熟悉操作系统原理,熟练使用Shell脚本语言;
5. 有较强的逻辑思维能力,善于分析、归纳、解决问题, 能够独立或带队进行技术难题公关;
大数据运维工程师的主要职责说明 篇16
职责:
1.负责本部门系统运维管理工作,常见的维护,搭建,监控响应、负责系统的变更与发布工作,线上服务漏洞的排查,版本升级工作处理等等
2.参于解决系统技术方面的瓶颈,寻找可行的改进方案等突破性工作
3. 负责海外业务系统的方案设计、沟通协调等
4.负责领导交办的其他工作;
任职要求:
1. 计算机应用、网络管理、信息管理、计算机科学与技术等计算机相关专业;
2. 至少具备4年以上企业IT运维经验;
3 对Linux系统下的各类典型应用软件的性能、使用场景有深刻的认识;
4 精通Python/Shell等任意一种脚本语言,能高效进行日常维护工具开发;
5 对主流数据库(Mysql/Mongodb/Redis等)有深入了解,有实际部署与常见管理经验;
6 做事情严谨踏实,有责任心,团队协作能力强,能承受较强的工作压力,有服务意识式;
7 熟悉Java、Tomcat、Nginx、Mysql等软件的安装、配置、故障排查、性能调优等;
8 具备良好的思维逻辑,以及文档编制能力。
9 要求英文流利,能和外方用英文进行技术沟通、探讨,并能查看或编写英文技术文档。有外资公司技术工作经验者优先。
大数据运维工程师的主要职责说明 篇17
职责:
1.负责IT日常桌面运维工作,处理电脑及打印机、投影仪等办公设备各种软硬件故障,以及软件系统的安装配置等;
2.负责办公网络(包括有线网络、无线网络)的维护与支持;
3.配合进行IT资产管理,机房日常检查等工作 。
任职要求:
1、大专及以上学历,计算机相关专业;
2、具备优秀的计算机软、硬件知识,熟练掌握Windows、Mac及常用办公软件的安装配置和维护管理;
3、能独立分析处理常见的故障;
4、 具备网络基础知识,熟悉路由交换技术,并能对Cisco、华为、H3C等厂商设备安装与调试,了解弱电工程及综合布线。