大数据运维工程师岗位的基本职责描述（通用20篇）

大数据运维工程师岗位的基本职责描述 篇1

职责：

1、负责维护服务器的运行，包括巡检、故障排除、数据备份等业务，保证服务器高质量、高效率运行状态;

2、负责服务器漏洞整改及补丁升级;

3、负责hadoop运维相关工作;

4、负责大数据平台的日常部署、升级、扩容、迁移;

5、负责高并发，大存储和实时流的Hadoop/spark大数据平台规划，运维，监控和优化工作。

任职资格

1、2年左右服务器运维经验;

2、对linux基础运维命令熟悉，shell,python至少精通一种，如会scala语言可优先考虑;

3、熟悉Linux的维护和管理，熟悉bat及Shell脚本开发，能看懂Python/Scala优先;

4、做过大规模hadoop集群优先;

5、大数据项目：包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大数据生态的平台搭建，监控，运维，调优、生产环境hadoop集群trouble shooting 、hadoop版本升级管理及优化支持。

大数据运维工程师岗位的基本职责描述 篇2

职责：

1.负责大数据业务集群的运维工作(Hadoop/Hbase/Hive/ Yarn/ Spark/ Storm/ ES等大数据生态圈组件)确保高可用性。

2.负责集群容量规划、扩容及性能优化;

3.参入建设大规模分布式集群的运维、监控和管理平台;

4.参与业务架构设计，在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技及发展方向。

任职要求：

1.三年及以上大数据运维工作经验，熟悉hadoop、hbase、hive、Solr、ES等分布式相关技术，熟悉源码尤佳，至少掌握java/python/shell中的一种语言。

2.了解大数据平台应用架构，具备常见问题的基本分析和解决能力。

3.熟悉Linux操作系统的配置、管理及优化，能够独立排查及解决操作系统层面的问题;

4.熟悉nginx、tomcat等web应用及中间件的使用和配置

5.强烈的责任心和使命感，执行力强，富有团队合作精神;

6.对大数据方向运维有很高的热情和兴趣，能主动学习了解相关知识;

大数据运维工程师岗位的基本职责描述 篇3

职责

1、维护基于Linux的系统和相应的组件;

2、维护Hadoop集群，包括hdfs、hive、sqoop、kafka等核心生态系统，确保集群运行平稳;

3、基于实践，根据业务需求设计和优化Hadoop生态系统;

4、设计和维护Hadoop相关基础设施的监控;

5、维护技术文件;

6、根据业务需求设计和安装新的生态系统或技术组件，并制定最终解决方案。

任职资格

1、本科及以上，信息技术或相关专业;

2、2年以上企业Linux系统和Hadoop经验;

3、Hadoop生态系统的经验和知识(必须具备：HDFS, Yarn, Hive, HUE;倾向具备：MapReduce、Spark、Kafka、Logstash、Flume);

3、较强的事故分析和故障排除能力，较强的shell脚本编写能力;

4、了解HA机制者优先;有ITIL知识者优先;

5、有跨国工作经验者优先;

6、愿意学习新事物，解决问题。

大数据运维工程师岗位的基本职责描述 篇4

职责：

1、负责大数据基础架构平台(Hadoop/Spark/MPP DB)的自动部署;

2、负责线上数据平台的运维，保障服务的稳定性和可用性;

3、参与超大规模数据快速查询系统的架构设计和开发;

4、研究大数据前沿技术，改进现有系统的服务和运维架构，提升系统的运维效率。

任职要求：

1. 熟悉linux shell及SQL语言

2. 了解Hadoop等分布式技术，数据仓库技术;

3. 熟悉数据仓库数据流监控、故障自动化定位及运维;

4. 强烈的责任心与求知欲，愿意学习新技术并能快速应用;

5. 有较强的书面与口头沟通表达能力，独立分析、解决问题的能力;

6、做事认真负责，自学能力较强。

大数据运维工程师岗位的基本职责描述 篇5

职责：

1、负责云平台等基础环境规划及建设，虚拟化等技术实施;

2、负责机房物理设备的日常巡检，对云平台及大数据运行环境的日常维护，保证运行环境的安全和稳定，对突发事件进行快速处理和恢复;

3、负责Hadoop集群的部署及日常维护，熟悉Hadoop生态圈组件的配置与调优;

4、负责硬件设备和系统软件购买采购数的拟定，以及运维相关技术文档的整理和维护。

任职要求：

1、优先，30岁以下，计算机相关专业，统招本科及以上学历，3年以上中、大型云平台服务器运维经验。

2、具备基本的机房建设及管理能力，能对机房内服务器、交换机、路由器等物理设备巡检维护数据备份及恢复。

3、熟悉TCP/IP协议，熟练掌握CISCO路由器、防火墙、交换机配置，具备一定的网络规划和组网技术能力，负责VLan及子网划分，提供内外网及VPN连接等网络接入方式;

4、熟悉KVM/Docker等虚拟化技术，及基于VMWare/OpenStack云平台的搭建及运维;

5、有丰富的Hadoop生态系统运维经验，了解Hadoop、STorm、Spark、Kafka、zookeeper这些组件的原理，具备部署、实施、维护hadoop集群及相关组件的能力。

6、熟悉Zabbix、Nagios等开源运维监控系统，熟悉通过LVS/Keepalived/Hearbeat技术实现负载均衡，了解CDN技术。

7、有中大型云平台数据中心容灾建设方案(一城两中心、两地三中心)实施经验者优先;有思科认证(CCNA/CCNP/CCIE)证书者优先。

8、为人正直，有责任感，工作认真细心。

大数据运维工程师岗位的基本职责描述 篇6

职责：

1. 公司内部IT相关网络设备，服务器的管理和运维，保证系统正常运转;

2. 服务器，虚拟机，应用程序数据的备份、还原以及数据同步;

3. 负责搭建各系统测试环境，组织项目实施;

4. 负责私有云虚拟化平台及虚拟化服务器管理。

5. 撰写服务器、网络设备，应用程序操作说明、配置文档，GMP相关的计算机验证工作等 。

任职要求：

1. 计算机或相关专业, 全日制本科及以上学历;

2. 具有 2年以上IT系统运维，项目实施相关经验;

3. 精通windows server 20xx、20xx操作系统，熟练linux操作系统;

4. 能够对SQL SERVER/ORACLE数所库进行日常维护;

5. 具有较强的网络安全意识、较强的信息安全和保密意识;

6. 善于交流和沟通，具有良好的书面和语言表达能力。

大数据运维工程师岗位的基本职责描述 篇7

职责：

1、参与项目需求的调研、讨论，提出优化建议;

2、负责对接项目方开展项目的研发、实施，确保项目按时保质完成;

3、负责对内开展系统相关的培训工作;

4、及时响应并处理系统故障，保障系统的稳定运行;

5、负责公司的桌面运维工作;

6、完成领导交办的其他工作。

任职要求：

1、计算机或相关专业的全日制本科及以上学历;

2、1年及以上计算机软件的工作经验或优秀的应届毕业生，有承担软件项目经理工作经验者优先，有融资租赁行业经验者优先;

3、精通j2ee平台(webshpere,weblogic等)，了解SSO，精通B/S体系架构下的应用开发技术;熟悉主流网络设备的安装和调试，熟悉网络结构、服务器、Oracel数据库等技术;熟悉CMM软件开发管理过程，有良好的编程规范及开发技能;

4、具有良好的职业道德，较强的沟通协调及语言表达能力;

5、工作认真、细致、有责任心，待人热情有耐心。

大数据运维工程师岗位的基本职责描述 篇8

职责:

1. 负责各区块链节点的搭建部署。

2. 负责运维开发体系规划，架构设计

3. 负责基础设施运维平台系统设计和开发，(包括基础设施管理、构建发布、配置管理、监控告警等系统);

4. 推进自动化运维体系建设，提升运维工作效率。

5. 提供高效区块链节点服务。

任职要求：

1. 计算机相关专业，3-5年以上的工作经验。(大型互联网企业背景优先);

2. 有实际运维工作经验，熟悉Saltstack/Puppet/confd/ansible等自动化运维、配置管理工具;

3. 掌握shell、python脚本语言，并主导或参与过自动化运维平台项目的开发;

4. 了解区块链(btc,eth,eos等)技术，原理，编译和搭建部署

5. 有亚马逊平台使用经验。

6. 有高度网络安全防范意识。

7. 有较强的团队协作能力，学习能力，沟通协调能力，并能自我驱动.

大数据运维工程师岗位的基本职责描述 篇9

职责：

1、负责数据中心服务器操作系统日常管理与运维;

2、负责数据中心机房环境的日常巡检与维护;

3、负责对数据中心服务器、存储日常运维;

4、负责管理与维护数据中心运维管理平台;

5、负责数据中心网络安全与网络运维;

6、协助对数据中心建设进行规划设计与实施;

任职资格：

1、熟悉Linux服务器操作系统体系架构与日常运维管理;

2、熟悉Vmware虚拟化架构，熟悉Vmware虚拟化平台日常管理与运维;

3、熟悉IBM(联想)、DELL服务器体系架构;

4、熟悉Zabbix、Nginx等相关应用服务;

5、对WindowsAD域、DFS、DHCP等应用相应工作经验;

6、了解IBM、EMC、日立存储的日常管理与维护;

7、有2年以上数据中心服务器等设备日常管理和运维经验;

8、了解OSI七层模型和TCP/IP四层模型工作原理;

9、有较强的学习能力和语言表达能力;

10、具备一定的技术文档编写能力。

大数据运维工程师岗位的基本职责描述 篇10

职责：

1、负责公司各业务线服务器日常运维工作;

2、参与服务器网络架构设计，制定公司的安全方案和规范;

3、负责项目服务器安装调试，跟踪、测试网络项目实施过程中的问题，完成项目实施方案的编写及确认;

4、协助完善运维环境的安全建设和安全管理;

5、负责服务器网络攻击处理，及安全防护措施改进等;

任职要求：

1、211本科及以上，1年以上同岗位工作经验;

2、深入理解Linux系统，运维体系结构，精于容量规划、架构设计、性能优化,熟悉脚本语言，如Python, Shell等;

3、对网站自动化运维有浓厚兴趣，有大型网站自动化运维和抗恶意攻击经验者优先;

4、熟悉主流云计算平台，如阿里云、AWS等;

5、较强的网络安全意识，对信息安全技术(如：攻防、IDS、远程扫描等技术)有一定了解，能够熟练搭建有效的安全防护、监测工具系统;

6、具有大型互联网公司、大型金融机构运维工作经验，参与过电商、门户、社交等业务线上运维者优先;

7、1年以上中大规模集群环境下的Hadoop/Spark集群相关运维管理经验，熟悉基于Hadoop的大数据平台应用开发及调优，拥有Hadoop/Spark等大数据开源社区开发经验者优先;

大数据运维工程师岗位的基本职责描述 篇11

职责：

1、负责服务器的配置、维护、监控、调优，故障排除等。

2、运维自动化及运维脚本开发。

3、高可用性服务器系统部署方案的制定及实施与监控。

4、及时响应并处理线上故障。

5、推动及开发高效的自动化运维、管理工具，提升运维工作效率。

任职要求：

1、大学专科以上学历，有2年及以上互联网公司运维方面经验。

2、高度责任感，性格沉稳，心思缜密，有耐心，能积极应对压力，能接受并完成高重复性的事情。

3、熟练使用Linux和Mysql，熟悉nginx、tomcat、redis、mq、git的安装部署和优化。

4、至少掌握一种自动化运维工具(ansible、puppet、saltstack)。

5、熟悉TCP/IP、HTTP等协议，有良好的网络、数据传输、安全、计算机体系结构方面的知识。

6、高度的责任感，较强的故障分析及排查能力，善于在工作中学习，能承受工作压力。

7、认同DevOps文化，积极了解和学习自动化方式处理各种问题。

大数据运维工程师岗位的基本职责描述 篇12

职责：

1、负责应用系统的性能分析与架构优化，不断提高系统运行效率。

2、协同开发，测试，提高线上产品运行质量。

3、负责突发事件管理，问题跟踪与管理;能够运用主机监控，日志分析等工具进行复杂问题定位。

4、主动发现生产环境的问题和隐患，通过自动化运维工具来降低维护成本。

5、总结工作中遇到的问题，探索、完善运维方法、流程、文档，提高运维的效率和效果。

6、负责运维体系及信息安全制度建立，对网络安全、数据安全措施制定方案。

7、当发生信息安全事件时，快速进行事件的分析、定位及处置，确保事件得到有效处置。

8、Mysql或Oracle数据库日常管理，对数据备份及恢复。

9、负责系统容灾规划及搭建。

任职要求：

1、大专及以上学历， 3年以上相关工作经验。

2、熟悉Nginx，Redis，Tomcat，fpm， nodejs，等基础组件及配置。

3、熟悉Docker容器技术及相关的操作系统基础设施(文件系统,网络,cgroups等), 熟悉微服务架构。

4、熟悉kubernetes相关技术及原理，或有其他云平台工作经验。

5、系统工程能力扎实过硬，深入了解系统(linux)及上下游链路服务(网络/io等)，具有很强技术敏感度和故障排查经验。

6、熟悉Shell或python开发，能够根据需要快速编写各类服务器维护脚本。

7、熟悉Linux系统高可用集群的部署及原理(LVS、Haproxy、keepalived等)。

8、熟悉jenkins/ansible 等自动化部署、运维工具的使用，根据不同业务进行自动化代码发布，应用部署及运维。

9、熟悉TCP/IP和http协议，熟悉iptables原理及应用;熟悉网络安全知识，熟悉路由器，防火强配置。

10、熟悉云计算产品、有国内主流云平台如阿里云，腾讯云，金山云等云平台之一的运维经验者优先。

11、掌握WEB安全渗透和漏洞挖掘，了解漏洞的内在原理、检测方法、利用手段以及对应解决方案，熟悉者优先。

12、熟悉常见黑客攻防方法，熟悉者优先。

13、对生产环境的数据库进行全量和增量备份，在系统数据库出现异常时能够快速的进行数据恢复。

14、生产环境系统出现不可用时，系统可以自动切换到容灾环境，对用户无感知。

大数据运维工程师岗位的基本职责描述 篇13

职责：

1、负责软件项目或集成项目的实施及售后维护工作，处理服务器系统运行过程中的问题;

2、配合销售人员进行售前咨询、技术支持，引导用户需求并提出咨询建议方案，负责基本客户需求调研、介绍演示等工作;

3、熟悉应用系统底层架构，能通过深度隐患排查对应用架构、数据库架构或配置等进行优化;

4、有一定文档功底，能编写各类专项工作文档、技术文档;

5、反馈项目中遇到的问题，并以文档形式提交归档 ，积极与客户、项目管理人员沟通协调、汇报软件系统运行情况，跟踪运行状态及客户满意度。

任职要求：

1、专科及以上学历，计算机或相关专业。

2、具有良好的沟通协调能力和团队合作精神，能承受压力。

3、熟练掌握服务器Windows/Linu系统安装及系统日常运维、网络基础环境配置及系统安全策略的配置，独立操作服务器硬raid初始化调试，具备中间件(iis、redis、tomcat等)的安装配置维护及优化经验，包括中间件集群的安装配置和运维;

4、熟练使用数据库操作如Oracle、MySQL、SqlServer，熟悉sql语句、增删改查、联合查询、索引、表空间、表分区、存储过程等知识;

5、具备2年或以上集成项目软件实施、软件开发经验，智能交通行业经验者优先。

大数据运维工程师岗位的基本职责描述 篇14

职责：

1. 负责Linux服务器、Windows服务器，MySQL数据库服务器日常运维、优化等工作

2. 负责处理系统日常变更，控制突发情况，对疑难问题进行分析并解决，以及各类故障和事务的应急响应和技术支持

3. 监控服务器的运行状态、系统性能;保障产品服务器的稳定性、可用性以及安全性

4. 负责服务器及设备的安装、调试、维护、监控、备份等日常工作

5. 负责对服务器性能监测数据以及故障日志等的分析，协助研发进行相关问题查找

6.负责服务器日常管理维护，对系统进行性能分析、优化、问题跟踪

7.负责办公设备的日常维护及管理技术档案维护

任职要求：

1. 计算机相关专业，本科及以上学历.有2-3年以上服务器运维经验

2. 2年以上Linux系统运维工作经验，熟悉Linux的常用服务配置，并能够快速部署、配置

3. 熟悉linux平台常用服务器的部署，Apache Nginx Rync vsftp PHP MySQL Memcache Redis等，并且对服务器的安全优化和性能调优有一定的研究

4. 熟悉MySQLRedisMongoDB等主流数据库的基本应用、熟练编写sql语句、有实际sql调优经验优先，熟悉web中间件如WebLogic、Tomcat、Nginx等，对MySQL和web的高可用架构有一定的研究。

5. 对各类常用网络或系统检测、分析工具有一定的了解(nagioscactizabbix)

6. 熟悉ShellPerlPython编程(至少一种)，熟练使用脚本来完成日常系统运维工作

7. 熟悉公有云，如阿里云、AWS等。

8. 对网络安全和应用安全有一定的认知者优先

9. 要有耐心的工作态度，有很强的责任心，良好的沟通技巧和协调能力

10. 具有严密的逻辑思维能力，有进取心、团队协作精神，良好的沟通表达能力

大数据运维工程师岗位的基本职责描述 篇15

职责：

1、机房服务器监控

2、运维平台搭建

3、为其他团队提供服务器资源

4、服务器异常处理

5、持续改进提升运维团队效率

岗位技能：

1、Linux/Windows常用服务配置，Python或Shell;

2、VMware/Docker/OpenStack/ELK至少会其中某一平台实施;

3、本科及以上学历，三年及以上相关工作经验。

大数据运维工程师岗位的基本职责描述 篇16

职责：

1)负责桌面计算机软硬件(计算机、打印机、扫描仪等)

2)负责公司桌面计算机的安装、配置、升级、运行维护与管理，保障桌面系统正常运行，满足日常工作的需要;

3)负责常见网络故障的排查和处理;

4)负责日常视频会议的调试和开会保障工作;

5)负责桌面应用服务管理、加域、各种PC权限管理;

6)负责对公司常用办公应用系统(如OA系统、邮箱、浪潮、手机OA等)的安装、配置、维护工作;

7)负责办公环境(办公区、会议室等)的例行巡检;

8)负责撰写相关操作手册文档

9)完成公司领导安排其他相关任务。

任职要求：

1)大学本科及以上学历;

2)熟 练 掌 握 windows xp 、 windows7 、 windows10等操作系统，能够熟练安装、调试以上操作系统及相关软件。

3)熟练掌握计算机软硬件安装、调试、维护;

4)熟练掌握复印机、打印机、扫描仪及家用路由器的安装、调试、维护;

5)掌握word，excel，PPT、PDF等办公软件的操作使用和故障处理;

6)掌握office的软件中“宏”的编写和使用者优先;

7)掌握TCP/IP协议。熟悉IT机房设备上下架，综合布线，有基本的网络运维经验者优先;

8)做事耐心细致，工作敬业，责任心强，组织纪律好，具有良好的沟通能力、理解能力、学习能力和团队合作精神。

大数据运维工程师岗位的基本职责描述 篇17

职责：

1、负责系统运维，解答用户疑问，处理异常;

2、负责系统用户操作培训;

3、负责收集并统计用户系统需求及初步沟通及分析;

4、负责系统数据库的基本维护检查备份。

任职要求：

1、计算机或信息化管理等专业本科及以上学历;

2、熟悉SQL Server/Postgresql数据库，熟练掌握SQL 语句的运用;

3、有一定软件开发语言基础，熟悉C#语言者优先;

4、熟悉制造企业的生产流程，熟悉鞋服制造企业生产流程者优先;

5、抗压能力强;

6、良好的沟通及理解能力。

大数据运维工程师岗位的基本职责描述 篇18

职责：

1、协助计算机相关软、硬件的故障诊断，排错和升级工作;

2、协助外设设备维护：打印机、传真机、复印机设备维护工作;

3、现场紧急事件支持与协助;

4、完成上级交办的临时事务。

任职要求：

1、大专及以上学历，计算机相关专业;

2、具备基本的计算机硬件、网络配置等相关知识;

3、能对常见的电脑终端故障进行快速定位与排障;

4、具备良好沟通表达能力及团队合作能力。

大数据运维工程师岗位的基本职责描述 篇19

职责：

1、负责公司各项目Docker与k8s集群管理、监控及相关业务支撑;

2、负责容器云平台的监控、应急响应等，及时定位及解决性能瓶颈和疑难问题;

3、编写各种运维脚本，推动业务自动化运维，确保日常部署工具安全高效进行;

4、负责线上系统的监控报警系统的优化和开发，确保更佳准确及时的反映线上系统状态;

5、和团队成员共同承担线上7x24小时服务质量保障工作;

任职要求：

1、熟悉服务器、存储、网络等基础设施的管理和运维工作;

2、熟练使用Linux系统，具有Linux系统安装配置和系统参数优化经验，至少熟悉centos和ubuntu。

3、熟悉shell/python脚本语言，有脚本的开发经验;

4、熟悉虚拟化技术，至少熟悉一种虚拟化管理平台，如vmware、xen、kvm等;

5、熟悉容器化技术，熟悉docker的常用管理命令，熟悉docker的存储、网络管理方式，熟悉镜像仓库的搭建和管理。

6、熟悉Apache、Nginx、MySQL、Tomcat、Redis、RabbitMQ、ZABBIX等常用服务的安装、配置、维护、和调优;

7、熟悉Kubernetes、有生产环境kubernetes运维经验者优先;

8、工作认真严谨，责任心强，抗压能力强;

9、有阿里云，腾讯云，华为云等至少一家公有云使用经验优先考虑

大数据运维工程师岗位的基本职责描述 篇20

职责：

1、与开发团队一起构建高可用，高度灵活和高可扩展性的系统平台，参与系统架构设计;

2、及时响应并处理线上故障，快速处理运维事故，保障业务稳定运行;

3、负责运维体系的建立与完善，服务器管理，应用监控、容灾、备份机制，系统调优、安全方案，系统应急处理预案的制定等;

4、负责系统安全和数据安全相关的技术，并协助处理政策相关事务。

任职要求：

1、专科及以上学历，计算机相关专业;

2、2年以上互联网行业运维经验;

3、熟悉Linux环境中nginx/jenkins/elk/mongodb/mysql/redis/kafka/hadoop/spark缓存及队列服务等工具的配置维护，并掌握工作原理;熟练并掌握至少一种脚本编程语言;熟悉Docker，K8S 等容器技术;熟悉负载均衡技术，集群技术等;

4、掌握 Zabbix/Promethus至少一种开源监控工具的使用;

5、了解网络原理，熟悉 TCP/IP 协议。