九九范文帮

位置:首页 > 文秘 > 岗位职责

大数据运维工程师的具体职责描述(精选20篇)

大数据运维工程师的具体职责描述 篇1

职责

大数据运维工程师的具体职责描述(精选20篇)

1. 负责大数据ETL系统,运维及保障服务稳定可用;

2. 负责数据采集交换方案以及联调测试;

3. 负责采集交换任务的评审和上线;

4. 负责及时排除ETL流程故障,形成知识库,完善运维文档;

5. 负责监控和优化ETL的性能,持续性地提出改进自动化运维平台建议

技能要求

1. 计算机科学或相关专业本科及以上学历;

2. 熟悉Linux系统,熟练编写shell/perl/python一种或多种脚本语言;

3. 熟悉Hive、Hadoop、MapReduce集群原理,有hadoop大数据平台运维经验者优先;

4. 熟悉数据库的性能优化、SQL调优,有相应经验;

5. 抗压能力强,有强烈的责任心,良好的沟通能力、学习能力及团队合作能力。

大数据运维工程师的具体职责描述 篇2

职责:

1、负责大数据集群的日常维护、监控、异常处理等工作,保障集群稳定运行;

2、负责大数据批处理管理以及运维;

3、负责大数据集群的用户管理、权限管理、资源管理、性能优化等;

4、深入理解数据平台架构,发现并解决重大故障及性能瓶颈,打造一流的数据平台;

5、跟进大数据前沿技术,不断优化数据集群;

6、有华为大数据平台运维经验优先;

岗位要求:

1、1年以上大数据运维或开发经验;

2、有良好的计算机和网络基础,熟悉linux文件系统、内核、性能调优,TCP/IP、HTTP等协议;

3、熟悉大数据生态,有相关(HDFS、Hive、Hbase、Sqoop、Spark、Flume、Zookeeper、ES、Kafka)的运维及开发经验;

4、熟练使用shell、python等脚本语言开发相关运维管理工具;

5、良好的文档撰写习惯;

大数据运维工程师的具体职责描述 篇3

职责:

1、负责公司内部及项目中大数据集群的构建,任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;

2、负责集群容量规划、扩容、集群性能优化及日常巡检和应急值守,参与大数据基础环境的架构设计与改进;

3、深入研究大数据业务相关运维技术,探索新的运维技术及发展方向。

任职要求:

1、熟悉Linux基础命令操作,能够独立编写Shell脚本开展日常服务器的运维;

2、熟悉Hadoop生态圈Hadoop、Kafka、Zookeeper、Hbase、Spark的安装与调优;

3、熟悉软硬件设备,网络原理,有丰富的大数据平台部署,性能优化和运维经验;

4、工作认真负责,有较强的学习能力,动手能力和分析解决问题的能力;

5、能够利用各种开源监控工具、运维工具,HA、负载均衡软件完成工作任务;

6、熟悉JVM虚拟机调优;

8、1年及以上相关岗位经验,要有良好的安全和责任意识。

大数据运维工程师的具体职责描述 篇4

职责:

1、负责分布式大数据平台产品的运维和运维开发,保证其高可用和稳定性;

2、负责大数据系统架构的可运维性设计、容量规划、服务监控,持续优化服务架构、集群性能;

3、通过技术手段控制和优化成本,通过自动化工具及流程提升大数据平台运维效率;

4、为项目开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题;

任职资格:

1、三年以上大数据运维相关工作经验,有大型互联网公司工作经验者优先,全日制本科及以上学历;

2、熟练掌握至少一门开发语言,有Java或Python语言开发经验优先;

3、精通Hadoop生态及高性能缓存相关的各种工具并有实战经验,包括但不限于Hadoop、HBase、Hive、Presto、Kafka、Spark、Yarn、Flink、Logstash、Flume、ClickHouse等;

4、熟悉Mysql等常用关系数据库,熟练编写SQL语句,有分布式nosql数据库应用、性能调优经验优先;

5、熟悉Linux环境,能够熟悉使用shell脚本;

6、对大数据技术有强烈兴趣,有志于往大数据方向深层次发展;

7、具有很强的责任心、执行力、服务意识、学习能力和抗压能力;

8、具备较好的沟通能力、主动性及责任感。

大数据运维工程师的具体职责描述 篇5

职责:

1、负责数据平台的运维管理工作(部署、监控、优化、故障处理);

2、负责Hadoop/Spark/Flink/Elasticsearch/Kafka等系统的架构审核、容量规划、成本优化;

3、负责大数据平台的用户管理、权限分配、资源分配;

4、参与数据挖掘、机器学习平台的设计、并给出可执行的运维方案;

5、参与数据平台的相关工具开发(包括自动化部署、监控、ETL等);

6、深入理解数据平台架构,发现并解决故障隐患及性能瓶颈;

7、ETL工具、调度工具、关系型数据库的运维。

任职资格:

1、本科以上学历,计算机软件相关专业;

2、1年以上大数据相关组件运维经验(hadoop/yarn/hbase/hive/spark/kafka等),1年以上的CDH或HDP维护经验,3年以上系统运维相关经验;

3、深入理解Linux系统,能独立部署开源软件,熟练掌握一门以上脚本语言(shell/perl/python等),熟悉python开发语言优先;

4、逻辑思维能力强,做事有条理,责任心强,工作积极主动,执行力强,有良好的团队协作意识。

大数据运维工程师的具体职责描述 篇6

职责:

1、执行和监督执行服务器系统管理制度;

2、日常驻场维护工作:PC服务器设备维护,发现异常后的应急处理以及故障的排查和解决;针对PC服务器系统提出相应的软硬件优化方案;

3、客户服务、系统集成及相关工作;

4、运维服务文档,总结报告撰写等相关工作。

任职条件:

1、大专或以上学历;

2、两年以上PC服务器系统维护经验;

3、精通PC服务器硬件架构、Windows server、Linux等操作系统配置;

4、熟悉VMWARE虚拟机系统和配置。

大数据运维工程师的具体职责描述 篇7

职责:

1、负责在线系统的部署、维护和容量规划;

2、负责业务服务器的配置,维护,监控,调优,故障排除等,保障运行环境的稳定运行;

3、负责在线系统的上线、变更、优化等的方案制定及实施;

4、推动及开发高效的自动化运维、管理工具,提升运维工作效率;

5、负责服务器安全规划及实施;

6、日常运维文档的撰写整理工作。

岗位要求:

1、有大型网站运维经验,3-5年运维或系统管理经验;

2、有熟练的MYSQL操作及优化经验;

3、熟练掌握shell,python,等任一种语言;

4、熟悉常用服务软件(tomcat,nginx, redis,rabbitMQ等)的安装、配置、管理及优化;

5、熟悉Haproxy,LVS等负载均衡的配置与应用;

6、熟练zabbix,Nagios,catci等常用的监控软件;

7、对docker有实操经验者优先;

8、有较好的沟通能力和团队协作精神,具有高度责任心,能够严格遵守职业操守。

大数据运维工程师的具体职责描述 篇8

1) 熟悉 Windows 各种桌面操作系统,以及 Windows 系统下常用软件的安装调试和配置。

2) 熟悉苹果系统(包括 MAC OS、 Ipad 及手机 IOS 等系统)的相关配置及问题处理。

3) 了解 Windows Server 20xx&20xx 的安装,调试,配置和使用, 熟练配置 AD 管理端及客户端、 DNS

服务, DHCP 服务,文件共享,文件备份等 server 功能。

4) 熟悉台式机和笔记本基本硬件组成和配置,熟悉各种电脑外接设备和 OA 设备,了解复印机、网络打

印机和传真机简单的故障处理,故障判断,替客户报修。

5) 了解各种网络相关设备(路由器,交换机,防火墙, 无线 AP 等)的安装,调试和配置。

6) 了解语音电话交换系统,熟悉网络与电话水晶头制作、网络和电话交换机跳线及电话机维护,语音交

换机系统会另有语音专业人员进行维护。

7) 丰富的电脑终端桌面维护经验,和较强的终端故障解决能力,具备很好的网络常识和网络故障排除能

力。

8) 熟悉 ITSM

大数据运维工程师的具体职责描述 篇9

1、数据中心服务器计算与存储规划、建设和运维,

2、系统建设和优化项目管理,制订和实施网络优化方案,提升平台指标,提高业务系统的网络性能和速度,提升使用效率。

3、负责故障排查和应急处理,确保任何突发情况都能高效响应,保证系统7x24小时正常稳定运行;

4、制订服务器和存储相关系统建设标准,推进实现平台运维标准化管理。

5、网络安全推进和协同。

大数据运维工程师的具体职责描述 篇10

职责:

1.负责特定版块的内容采编、内容管理、网站发布和网站内容监控以及相关处理;

2.参与网站特定版块的策划、运营及推;

3.负责微信公众账号的日常运营和维护工作;

4.负责微信公众账号的内容更新、人群聚焦、话题发起、客户管理等工作;

5.完成部门主管安排的工作任务;

任职要求:

1、18-28周岁,大专及以上学历;

2、了解网站开发、运行及维护的相关知识,;

3、对运营有浓厚的兴趣、文笔优秀并有志于在此行业长远发展

4、有较强的逻辑推理能力,善于学习钻研,做事认真严谨;

5、有良好的沟通能力和执行能力,能独立解决问题;态度积极,工作认真负责,具有一定的应变能力及团队协作精神;

6、.服从上级安排,有良好的职业操守以及较强的客户服务意识。

大数据运维工程师的具体职责描述 篇11

1.负责公司网站的设计、改版、服务器;

2.负责公司产品的界面进行设计、编辑、美化等工作;

3.对公司的宣传产品进行美工设计,品牌设计。

4.负责公司微博、微信和官网的建设和日常运营,包括内容编辑和发布,活动策划,粉丝互动,信息监测等;

5.撰写各类项目推广宣传稿件(新闻稿、邀请函、合作函)、策划方案、报告等建立自己的企业文化、形象品牌;

6.编写公司用PPT稿件、方案、软文、公关稿件、新闻材料等资料;

7.公司业务方面的文字材料编写、宣传资料编写;

8.收集行业发展动态,新闻资料,制定营销方案、推广计划;

9.熟悉新媒体及移动互联网发展趋势,并对这一行业十分热衷者;

10.做好企业宣传、形象建立、品牌推广等方面的其他工作;

11.完成领导分配的其他工作任务。

大数据运维工程师的具体职责描述 篇12

职责:

1、设计和实施公司业务系统、搭建自动化测试、代码管理和正式运行等系统;

2、负责云平台的监控、应急响应等,及时定位及解决性能瓶颈和疑难问题;

3、负责研发自动化运维平台,提高运维、开发协作效率,规范操作流程;

3、负责docker、k8s、gitlab、jenkins的定制和调优工作,负责提升公司云平台整体稳定、安全、高可用等,优化平台性能;

4、负责编写相关的技术文档、单元测试;

岗位要求

1、统招本科及以上学历,很强的自学与操控能力;

2、精通Git/GitHab,通信协议 TCP/HTTP 及 RESTful 标准;

3、精通jenkins、harbor的管理,具备搭建和管理gitlab+jenkins+harbor+k8s自动化服务环境;

4、精通openvpn,具备独立管理vpn的网络服务;

5、至少一年及以上开发运维经验,至少熟悉 Python/Shell 其中一种脚本语言;

6、熟悉mysql数据库运维管理,熟悉SQL的编写优先考虑;

7、有丰富的 Linux 系统管理经验,有在生产环境使用 Kubernetes 容器技术经验优先考虑;

8、有使用 Aliyun, 腾讯或京东等国内、外主流云平台的经验。

大数据运维工程师的具体职责描述 篇13

职责:

1. 负责公司游戏项目的服务器接入、上线、新版本发布、维护等;

2. 负责与游戏运营项目组的日常沟通交流,接受并处理项目组提出的运维需求;

3. 负责项目组相关运营支撑工具的开发(python,shell)

4. 负责日常运维工作的自动化、工具化建设;

5. 负责监控网络游戏业务的运行状况并及时处理游戏运行中出现的故障。

职位要求:

1. 本科及以上学历,计算机类及相关专业;

2. 2年以上互联网行业经验,3年以上服务器维护经验;

3. 熟悉linux系统管理;

4. 熟悉apache,iptables,nginx,mysql,php,ftp的基本配置和维护;

5. 熟悉mysql,redis,mongodb等基础应用;

6. 熟悉shell,perl,python至少一门脚本语言;

7. 有游戏行业运维经验优先;

8. 有较强的抗压能力,沟通能力,推动能力;

大数据运维工程师的具体职责描述 篇14

职责

1、熟悉公司运维流程和系统,对于系统性的问题处理流程具有概念性的理解。

2、熟练掌握公司各个应用系统,为用户提供技术支持,解决用户问题,并完善作业指导书;

3、定期分析和总结用户请求,不断完善常见问题解决方法;

4、执行和反馈,维护公司的各个新、旧系统上线或升级工作,并推动实施;

5、定期及时的提供数据报表或提取相应的分析数据;

任职资格:

1.计算机、电子及相关专业,大学本科以上学历,英语CET-4以上;

2.具有计算机软件领域1年以上的工作经验,具有大型IT系统实施和运维管理经验者优先考虑;

3.专业技能: 熟练主流的主机、网络、安全、数据库系统产品,精通各种办公软件;

4.具备较强的分析、判断能力;较强文字、语言表达能力;以及善于团队管理和培训工作;

5.能够承受较强的工作压力,能适应团队协作工作环境,适应快节奏的工作;

以下经验者优先考虑:

1.能够使用中文和英语进行流利的书面沟通和口头沟通。

2.具有IoT物联网,Java软件部署实施经验为佳;

3.有相关开发经验,了解J2EE架构,或有自动化测试经验者为佳;

4.对于Linux系统运维和系统架构有相关监控和维护的经验。

5.具有撰写公司内部文档和流程的经验和能力。

大数据运维工程师的具体职责描述 篇15

职责:

1.负责软件系统日常维护工作,确保系统安全运行;应用环境的各类服务软件的搭建和维护工作;

2.负责参与软件的培训与实施上线工作;

3.负责系统运维,日常软件故障排除、系统优化、安全优化、网络故障诊断及排除等各类技术故障处理;

4.负责对客户在线支持、软件运行过程中问题解答、应急现场支持等;

5.对已有的运维项目进行维护、更新及管理;

任职要求:

1.计算机相关专业,大专及以上学历;1-3年相关经验

2.了解计算机网络、硬件及常用软件的相关知识;熟悉数据库的基础知识;

3.具备较强的沟通、合作能力;有强烈的责任心,工作踏实认真、积极主动;善于思考,学习能力强,能够快速掌握专业知识;

4.熟练操作oracle或者Mysql者优先。

5.熟悉一门开发语言者优先,如java等。

大数据运维工程师的具体职责描述 篇16

职责:

1、负责公司大数据/Hadoop/hive/hbase/flink等离线实时数据平台运维保障;

2、负责内部大数据自动化运维以及数据化运营平台开发工作;

3、负责Hadoop/Hbase等系统的业务监控、持续交付、应急响应、容量规划等;

4、深入理解数据平台架构,发现并解决故障及性能瓶颈,打造一流的数据平台;

5、持续的创新和优化能力,提升产品整体质量,改善用户体验,控制系统成本。

6、善于表达、理解客户数据服务需求,具备数据需求转化落地能力。

任职要求:

1、大学本科及以上学历,计算机或者相关专业;

2、深入理解linux系统,运维体系结构,精于容量规划、性能优化;

3、具备一定的开发能力,精通一门以上脚本语言;(shell/perl/python等),熟悉java等开发语言一种及以上优先;

4、具备很强的故障排查能力,有很好的技术敏感度和风险识别能力;

5、能够承受较大的工作压力,以结果和行动为准则,努力追求成功;

6、熟悉hadoop、hbase、hive、spark、tez等原理并具备管理,配置,运维经验;

7、熟悉分布式系统设计范型,有大规模系统设计和工程实现的了解者优先。

8、具有运营商流量数据加工处理经验者优先。

大数据运维工程师的具体职责描述 篇17

职责:

1、制定并实施公司产品的SEO优化方案

2、有效提升网站的收录、权重及PR值,提升网站关键词的搜索排名;

3、搜索引擎广告推广账户维护工作,包括推广数据统计、分析,关键词跟踪,推广效果监测等;

4、分析制定新媒体公众账号的关键词解决方案;

任职要求:

1、大专及以上学历,1年以上互联网行业SEM/SEO推广工作经验,有技术背景优先;

2、精通搜索引擎优化的原理和策略,擅长开发工具来驱动排名及流量的增长,并为数据分析提供强有 力的技术保障,有成功案例;

3、能够快速地监控各种搜索引擎的微观调整变化,从而采取更好的应对手段;

4、较强的学习能力,团队合作意识强,擅于沟通;

5、打字速度60字/分钟以上者优先;

大数据运维工程师的具体职责描述 篇18

职责

1、进行业务系统的维护

2、指导用户正确使用操作软件各业务模块;

3、分析并解决软件使用过程中的问题,对软件故障进行测试定位;

4、处理相关数据;

5、配合项目经理完成相关任务目标;

任职资格:

1、计算机相关专业,本科以上学历;

2、优秀应届毕业生可考虑;有税务行业信息化相关工作经验者可破格录取;具备软件开发能力者优先。

3、熟悉JAVA编程语言及熟练操作SQL,具备一定数据库知识。

4、能熟练使用所负责的软件模块;

5、良好的良好的沟通能力、团队合作精神。

大数据运维工程师的具体职责描述 篇19

职责:

负责提供IBM/HP/SUN等品牌的小型机、X86服务器、存储及相关操作系统、软件等产品的维保服务和技术支持工作。

负责IBM/HP/SUN等品牌产品的故障维修,硬件更换以及现场排错。

负责售前和售后的安装,配置,巡检和交付工作;

负责日常客户的月度或者季度巡检并完成巡检报告。

任职要求:

大专及以上学历,具有3-5年相关小型机运维工作经验,SUN小机或者HP小机工作经历优先考虑;

精通SUN-solaris操作系统,有丰富的系统问题解决经验和系统维护经验;同时了解HP-UNIX、IBM-AIX架构及运维技术的优先考虑;

精通SUN、IBM、HP等软硬件操作,能独立进行操作系统安装配置,双机配置与维护,处理故障、变更操作、性能调优;

良好的硬件故障定位、分析以及问题解决能力;

责任心强,具有良好的沟通协调能力及团队协作精神,有较强的客户服务意识和创新学习能力,能接受短期出差;

大数据运维工程师的具体职责描述 篇20

职责:

1、参与测试网络的规划、建设、实施和维护;

2、参与公有云生产环境规范编写、制定及建设运维工作;

3、参与数据中心日常网络变更需求的评审;

4、参与网络运维自动化体系建设,致力于实现网络运维标准化、工具化、自动化;

5、参与下一代新数据中心的设计和建设;

6、其他运维性事务的工作

任职要求:

1、计算机网络及相关专业本科以上毕业;

2、熟悉主流交换机、路由器、防火墙、负载均衡等网络设备。有2年以上网络维护相关工作经验,掌握多种网络环境搭建,具备较强的技术基础;

3、熟悉思科、华为等主流网络产品的规划,安装,设置和维护,有CCIE/CCNP及同等证书优先;有较强的沟通协调能力及高度责任心。

4、熟悉思科、华为SDN的配置和管理的优先考虑;

5、熟悉vmware、kvm、openstack、docker、kubernetes的优先考虑;

6、熟悉公有云优先;