九九範文幫

位置:首頁 > 文祕 > 崗位職責

大資料運維工程師崗位的主要職責(精選21篇)

大資料運維工程師崗位的主要職責 篇1

1) 承擔團隊的日常管理,如值班安排、工作分配、日常考評等;

大資料運維工程師崗位的主要職責(精選21篇)

2) 組織制訂、完善與本部門相關的管理制度、標準操作手冊SOP、維護操作MOP和應急預案等;

3) 組織制定中心基礎設施保養計劃,做好相關計劃的實現、控制及優化工作;

4) 稽核、報批、組織實施各類變更申請、事件報告工作,做好相關應急工作的指揮與處理;

5) 組織開展資料中心基礎設施執行維護相關培訓、訓練與演練;

6) 協助商務部與外包服務商洽談相關維護服務合同,監督服務實施並要求進行稽核與考評,確保相關基礎設施的穩定執行;

7) 負責資料中心基礎設施資源統計、容量預警工作,做好每月用水用電統計、PUE統計與分析;

8) 配合資料中心進駐客戶的場地選址、平面佈局、改造實施、進駐管理等支援協調工作;

9) 基礎設施月報、環境報告的編寫和提交;

10) 資料中心基礎設施的持續優化和改善;

11) 負責上級主管領導交辦的其它工作。

大資料運維工程師崗位的主要職責 篇2

職責:

1.負責大資料管理平臺產品的運維支撐工作,包括專案實施(安裝、調優、培訓)、專案聯調以及其他日常維護等;

2.負責大資料管理平臺產品的自動化運維相關指令碼的開發、維護等;

3.參與大資料管理平臺其他相關工作;

4.領導交付的其他事宜任職要求

任職要求:

1.熟悉Linux(redhat/centos)軟硬體環境、系統管理和優化,熟練部署、優化各種常用服務,熟練使用Linux 命令;

2.具備一定的故障排查能力,能夠獨立排查及解決作業系統層的各類問題,有良好的技術敏感度和風險識別能力,熟悉一門以上指令碼語言(Shell/Python等);

3.熟悉Hadoop大資料生態圈,包括但不限於Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;

4.熟悉Hadoop各元件的原理和實現,有實際部署維護、管理( 包括元資料管理)及優化經驗,並擁有持續調優能力,運維管理過大規模資料平臺經驗者優先考慮;

5.熟悉掌握常用的安全協議和元件服務,對hadoop各元件的許可權、安全、kerberos進行配置管理。熟悉SSL、ACL、kerberos等在大資料環境場景的使用;

6.大型節假日需低頻次維護各專案,可以調休;

7.具備良好的服務意識,善於主動思考,自我驅動力強。有良好的溝通、協調能力,富有團隊精神,有較強的文件編寫能力;

8.本科或碩士畢業於211、985等國內知名高校者優先(注意,僅是加分項,不是必須);

9.有實際工作經驗者優先;

大資料運維工程師崗位的主要職責 篇3

職責:

根據產品需求,完成產品功能的設計、編碼、測試和釋出;

現場專案支援工作,對現場反饋工單問題進行分析、定位和解決;

對現場專案提出的新需求進行分析、設計並完成;

根據產品和技術發展要求,完成平臺的設計、開發和支援維護工作。

職位要求:

本科及以上學歷,計算機、軟體工程相關專業,3年以上相關工作經驗;

精通sql、greenplum/postgresql、impala、oracle、mysql至少1種技術、可融匯貫通靈活轉換使用;

熟悉hadoop平臺zookeeper、hdfs、spark、MR及hbase等常用元件的執行原理;

基於linux/unix平臺進行shell、python的常用指令碼開發。

大資料運維工程師崗位的主要職責 篇4

職責:

1、負責公司大資料平臺自動化運維開發、監控和優化工作,保障資料平臺服務的穩定性和可用性;

2、負責公司Hadoop核心技術元件日常運維工作 ;

3、負責公司大資料平臺現場故障處理和排查工作;

4、研究大資料前沿技術,改進現有系統的服務和運維架構,提升系統可靠性和可運維性;

任職要求:

1、本科或以上學歷,計算機、軟體工程等相關專業,3年以上相關從業經驗

2、精通Linux運維命令,熟悉Linux的維護和管理,熟悉Shell/Python指令碼開發,掌握Scala/JAVA優先;

3、熟悉大資料專案實施:包括不限於Kafka、Hadoop、Hive、Hbase、Spark等大資料生態的平臺搭建,監控和調優;

4、良好團隊精神服務意識,溝通協調能力;

大資料運維工程師崗位的主要職責 篇5

職責:

1、負責Hadoop、HBase、Hive、Spark等大資料平臺 規劃、部署、監控、系統優化等,確保高可用;

2、負責公司大資料平臺的運維管理工作,叢集容量規劃、擴容及效能優化;

3、處理公司大資料平臺各類異常和故障,確保系統平臺的穩定執行;

4、設計實現大規模分散式叢集的運維、監控和管理平臺;

5、深入研究大資料業務相關運維技術,持續優化叢集服務架構,探索新的大資料運維技及發展方向。

任職要求:

1、熟悉Hadoop/HBase/Hive/Spark/Kafka/Zookeeper等開源專案的安裝與除錯,升級擴容;

2、熟悉Hadoop大資料生態圈,包括但不限於HDFS、YARN、Hive、HBase、Spark、Kafka、Flume等;

3、精通一門以上指令碼語言(shell/perl/python等),熟練掌握Linux系統及常規命令與工具,熟練的Shell指令碼編寫能力。

大資料運維工程師崗位的主要職責 篇6

職責:

1. 負責公司專案的運維保障。

2. 負責配置測試環境和線上環境部署,並進行維護、升級;

3. 負責公司伺服器的規劃與監控、資料分析、日誌分析、排除故障等工作;

4. 優化運維體系並保證伺服器可靠、可擴充套件的運維環境。

5. 自動化指令碼的開發

職位要求:

1. 本科及以上學歷,計算機及相關理工科專業畢業

2. 1年以上linux/unix系統管理經驗,熟悉網路整體的架構,能熟練使用系統命令

3. 熟悉bash,csh等unix/linux shell指令碼,熟悉ORACLE資料庫基本操作,熟悉svn基本命令

4. 良好文件編寫和文字表達能力和團隊合作精神

5. 有很強的責任心和學習能力。

大資料運維工程師崗位的主要職責 篇7

職責:

1、軟體產品及專案的部署、安裝、升級、維護,確保系統正常穩定執行;

2、專案資料庫維護、確保資料庫正常執行;

3、及時解決客戶在系統使用過程的各種問題,維護好客戶關係以及客戶培訓工作;

4、收集客戶在系統過程遇到的問題,進行分析和確認,並反饋至相關負責人;

5、完成上級安排的其他任務;

任職要求:

1、計算機相關專業,專科及以上學歷;

2、掌握計算機基礎知識,熟悉常用軟體的安裝與使用;

3、對軟體開發有一定的瞭解;

4、瞭解病毒防護、系統漏洞、防護牆等網路安全知識;

5、具有良好的溝通和語言表達能力,邏輯思維能力強,有責任心,工作態度端正、積極,有團隊意識及良好的操作規範意識。

大資料運維工程師崗位的主要職責 篇8

職責:

1、 負責協助銷售人員、代理商售前技術講解、產品安裝、除錯等工作;

2、 負責客戶端網路環境搭建、伺服器配置;

3、 負責售後為客戶提供技術服務、培訓;

4、 負責收集、分析、反饋客戶技術需求與產品意見;

5、負責公司伺服器資料的更新與維護工作;

任職資格:

1、 計算機相關專業,大專及以上學歷;

2、 一年以上相關工作經驗,熟悉Linux、Windows的IIS,Apache, Nginx環境部署;

3、 對PHP、Mysql、Js開發語言熟悉者優先考慮;

4、 具有良好的溝通能力、學習能力、較有敬業精神,適應短期出差工作性質;

大資料運維工程師崗位的主要職責 篇9

1.負責高併發,大儲存和實時流的Hadoop/spark大資料平臺規劃,運維,監控和優化工作;

2.保證Hadoop/spark平臺各核心服務執行的穩定、高效;

3.對Hadoop/spark平臺運維不斷優化,提升資料產品的質量和響應速度;

4.開發各種Hadoop大資料自動化運維與監控工具;

5.平臺大資料環境的部署維護和技術支援;

6.應用故障的處理跟蹤及統計彙總分析;

7.應用安全,資料的日常備份和應急恢復。

大資料運維工程師崗位的主要職責 篇10

職責

1、伺服器的配置,維護,監控,調優,故障排除等;

2、大使用者量下高效能伺服器系統部署方案的制定及實施;

3、保障伺服器與資料庫安全,檢查並消除安全漏洞;

4、資料備份、資料監控、應急響應、故障排除、編寫資料分析報告等;

5、能夠熟練排查運維過程中出現的服務故障、系統故障、網路故障;

6、負責公司計算機硬體的安裝、配置以及維護修理

任職要求

1、本科學歷,計算機應用或網路相關專業,有1~2年相關工作經驗者優先考慮;

2、精通shell/Python/bat等1至2種程式語言;

3、熟悉常見的監控軟體zabbix;

4、熟悉網路基礎知識;

5、熟悉使用Linux/Unix作業系統;

6、能熟練的進行PostgreSQL資料庫運維管理操作,並能熟練的解決較嚴重資料庫故障;

7、精通資料庫的各種備份及恢復方法,能進行資料庫備份方案的設計,並能進行方案的實施和維護;

8、工作積極主動、踏實、認真,有較強的責任心和服務意識,良好的表達及溝通協調能力。

大資料運維工程師崗位的主要職責 篇11

職責:

1、參與專案需求分析, 制定開發計劃,承擔專案的架構設計和詳細設計工作,並承擔專案核心模組的開發任務,確保按時完成既定的開發內容;

2、參與軟體開發的整體規劃及實施,分析並解決軟體開發過程中的技術問題,為公司的業務開展提供支援;

3、完成軟體系統程式碼的實現,編寫程式碼註釋和開發文件,進行系統的功能定義,程式設計;

4、根據設計文件或需求說明完成程式碼編寫,除錯,測試和維護;

5、根據需要不斷修改完善軟體,負責現有系統的重構、優化、維護等工作;

7、對系統資料庫進行日常管理,統計資料庫中相關資訊;

8、負責網路執行的安全性、可靠性及穩定性;

9、配合專案經理完成相關任務目標。

相關要求:

1、計算機或相關專業大專學歷以上;

2、2年以上軟體開發經驗;

3、具備需求分析和系統設計能力,以及較強的邏輯分析和獨立解決問題的能力;

4、熟練使用photoshop、flash、dreamweaver等工具,熟悉ASP,JAVA,SQL,HTML等開發語言;

5、具有良好的溝通領悟能力及團隊協作能力,有進取心,強烈的責任感和認真細緻的工作態度,善於學習,具備良好的團隊意識。

大資料運維工程師崗位的主要職責 篇12

1. 負責客戶AD或Exchange系統日常維護及監控,提供系統功能方面的服務和支援

2. 負責客戶各應用系統相關故障、疑難問題排查處理,編制彙總故障、問題情況說明

3. 維護客戶關係,提高客戶滿意度

4. 負責部分應用系統的升級上線工作

5. 整理現場需求,做成系統改善提案

大資料運維工程師崗位的主要職責 篇13

職責:

1、負責建設、除錯和維護公司的網路系統,包括網路相關的軟硬體系統負責解決網路故障、優化網路效能;

2、對各種應用支援軟體如資料庫、中介軟體以及各種通用服務或特定服務的監控管理,如郵件系統、DNS、Web 等的監控與管理;

3、管理企業中各 IT 系統的資源資產情況,這些資源資產可以是物理存在的,也可以是邏輯存在的;

4、推行資訊科技中心的軟體配置化管理,保證公司主要業務系統配置安全;

5、負責業務系統SIT/PRE/PRD的環境的部署釋出工作;

6、負責維護公司機房和伺服器資源;

7、推行Devops,實現適合公司IT環境的持續整合、持續部署等自動化運維;

任職資格:

1、大學本科及以上學歷,計算機或相關專業畢業,具有大型網際網路公司三年以上運維經驗;

2、精通Linux系統,熟悉常用的web伺服器/資料庫/中介軟體等軟體的應用及運維管理,熟悉TCP/IP及常用應用層協議;

3、精通一門以上指令碼語言(shell/perl/python等),具備自動化運維、CI/CD、DevOps專案實踐等相關經驗,熟悉Kubernetes、Docker等容器相關技術;

4、熟悉大型分散式系統(計算/儲存)的架構設計及運維管理,具備QEMU/KVM、libvirt、openstack等虛擬化技術的開發/運維經驗者優先;

5. 具備較強Trouble-shooting能力,能夠快速排查系統各種異常、瓶頸等,並推動平臺和產品的優化改進;

6、具備較強的客戶服務意識,能夠快速響應客戶諮詢、技術支援等問題,提供相關解決方案,協助客戶進行應用系統架構設計、快速上雲和遷移等相關工作;

7、積極主動,善於溝通與持續學習,擁有較強的責任心與團隊協作意識,敢於接受挑戰並能承受較強工作壓力。

大資料運維工程師崗位的主要職責 篇14

1.對公司MES系統進行日常維護,確保系統正常執行;

2.對MES系統有一定了解,有相關係統實施或運維經驗佳;

3.針對業務部門提出的MES系統問題,進行trouble shooting,並找出解決方案;

4.熟悉資料庫基本操作,如MySQL、SQL、Server等;

5.對C≠、Delphi開發語言有一定了解、有相關開發經驗;

6.善於溝通,能同相關業務部門緊密合作,快速理解業務部門提出的需求或問題,並通過開發得以實現;

7.編寫系統操作手冊等文件;

8.完成領導佈置的其他工作。

大資料運維工程師崗位的主要職責 篇15

職責:

1.基於現在有開源產品和解決方案的能力,為團隊提供IT架構規劃和諮詢的服務;

2.提供雲上DevOPS體系建設方案的諮詢和實施服務,優化業務交付效率,加速團隊的數字化轉型;

3.在開發、測試和生產各階段配合業務架構師完成環境的搭建與演示,組織內部資源,幫助完成雲產品與技術方案的測試、諮詢與實施。

任職要求:

1. 計算機或通訊相關專業專科以上學歷,5年以上大規模業務系統研發、運維、專案交付經驗;

2. 針對大型分散式系統架構設計、容災高可用/業務多活/兩地三中心架構有深入理解和豐富的專案落地經驗;

3. 精通Linux/windows系統,對於常用的運維工具,開源軟體(Nginx、Tomcat、Hadoop、Hbase、zookeeper、MQ、Redis等)的部署及配置優化實踐經驗;

4. 精通MySQL、SQL Server、Oracle、PostgreSQL、Redis、Memcache等兩種以上主流資料庫和快取技術,有豐富的資料庫的優化/維護經驗;

5. 熟悉微服務、容器化架構,以及相關技術,對Istio、Docker、Kubernates,mesos等容器編排技術有豐富的實踐和落地經驗;

6. 熟悉主流公有云產品,有維護本地機房經驗;

7. 有大型綜合專案的交付和落地經驗,有較好的推動能力、風險識別意識和技術撐控判斷力;

8. 具備良好的客戶溝通能力及技巧,工作積極主動,認真負責,心理素質好,能承受較大工作壓力;

9. 具備英文閱讀、書寫和溝通能力。

大資料運維工程師崗位的主要職責 篇16

1、負責網路以及伺服器的網路設定、維護和優化、網路的安全監控、系統性能管理和優化、網路效能管理和優化;

2、負責日常系統維護,及監控,提供IT軟硬體方面的服務和支援,保證系統的穩定;

3、負責相關故障、疑難問題排查處理,編制彙總故障、問題,定期提交匯總報告;

4、負責編寫各類技術文件;

5、伺服器Linux系統的安裝和基本配置,具有網路方面的基本知識,對相關網路裝置及綜合佈線有一定了解;

大資料運維工程師崗位的主要職責 篇17

職責:

1.對泛微OA系統、SAP系統開發與維護,熟悉資料庫查詢;

2.對資料中心機房伺服器、網路等裝置進行安裝、硬體維護、故障處理等工作;

3.負責伺服器系統、資料庫安裝與維護管理;

4.負責公司網路平臺的執行監控與維護;

5.進行路由器等網路裝置的維護管理,並對網路優化及辦公室病毒查殺進行合理規劃;

6.對公司電腦、及IT周邊裝置故障維護;

7.負責VPN網路、VOIP網路建設和維護,技術檔案維護。

8.負責機房基礎設施及伺服器、交換機的日常維護巡檢,保持機房執行環境的良好狀態;

任職資格:

1.計算機相關專業,大專以上學歷; 2.3年以上的網路管理、伺服器管理、機房管理維護工作經驗;

3.熟悉伺服器系統、資料庫安裝,維護與使用;

4.熟悉企業級路由器、交換機、防火牆裝置的設定與維護管理;

5.熟悉應用系統架構,對OA系統、ERP軟體有維護經驗 ;

6.注重服務意識,責任心強,性格開朗,工作積極主動,能接受勤奮工作氛圍,有一定的抗壓能力,敢於承擔。

大資料運維工程師崗位的主要職責 篇18

職責:

1、 負責參與IT資訊系統硬體整合專案實施工作;

2、 負責處理計算機及辦公外設、監控、網路、的安裝及除錯工作,處理相關的故障問題及異常排除;

3、 綜合佈線及相關的工作;

4、 協助進行客戶使用培訓工作;

5、 具有良好的技術文件編制能力;

6、有IT售後服務經驗者優先考慮

崗位要求:

1、 大專及以上學歷,計算機類等相關專業;

2、 在學校有一定的弱電系統硬體整合系統實施經驗;

3、 瞭解專案管理和專案實施;

4、 良好的邏輯思維能力、人際溝通能力;

5、 積極主動,具備團隊意識,具有高度的責任心,能夠承受較強的工作壓力。

大資料運維工程師崗位的主要職責 篇19

職責:

1、負責資料平臺的運維管理工作(部署、監控、優化、故障處理);

2、負責Hadoop/Spark/Flink/Elasticsearch/Kafka等系統的架構稽核、容量規劃、成本優化;

3、負責大資料平臺的使用者管理、許可權分配、資源分配;

4、參與資料探勘、機器學習平臺的設計、並給出可執行的運維方案;

5、參與資料平臺的相關工具開發(包括自動化部署、監控、ETL等);

6、深入理解資料平臺架構,發現並解決故障隱患及效能瓶頸;

7、ETL工具、排程工具、關係型資料庫的運維。

任職資格:

1、本科以上學歷,計算機軟體相關專業;

2、1年以上大資料相關元件運維經驗(hadoop/yarn/hbase/hive/spark/kafka等),1年以上的CDH或HDP維護經驗,3年以上系統運維相關經驗;

3、深入理解Linux系統,能獨立部署開源軟體,熟練掌握一門以上指令碼語言(shell/perl/python等),熟悉python開發語言優先;

4、邏輯思維能力強,做事有條理,責任心強,工作積極主動,執行力強,有良好的團隊協作意識。

大資料運維工程師崗位的主要職責 篇20

1. 負責持續整合/自動化運維平臺搭建;

2. 產品上線部署與釋出;

3. 對系統、WEB、資料庫日誌收集分析,發現潛在隱患;

4. 伺服器日常監控及報警處理;

5. 突發情況應急預案、應急處理;

6. 阿里雲相關產品應用;

7. Docker映象製作,K8S環境搭建;

8. Nginx、MQ等中介軟體的搭建、配置、管理、優化和維護;

9. Centos、GitLab、MYSQL的安裝、配置、管理和維護;

10. mysql安裝、配置、排錯、備份還原、效能優化及監控;

11. 其他監控軟體搭建及應用;

大資料運維工程師崗位的主要職責 篇21

職責:

1、負責運維平臺的架構、設計、開發,提升運維質量及效率,達成運維自動化平臺、日誌平臺、快取平臺持續迭代建設;

2、負責監控告警系統的設計和開發,做到監控視覺化、故障自動化,7x24小時響應故障處理,對平臺的運維質量負責;

3、評估系統性能和執行狀態,建立量化指標,用資料指導優化,技術文件的整理和編寫;

4、業務服務支援,不限於桌面支援、技術支援、系統支援,實現資訊系統的自動化及業務管理系統自動化

5、資訊化系統的規劃和建設,不限於OA、客服、FMS、WMS、TMS、OMS、ERP等;

6、安全規劃和管理,不限於網路、系統、資料、操作等安全,組織定期或者不定期進行安全演練

7、網路和硬體規劃和管理:辦公、開發、測試、生產、門店、分公司網路建設,機房、伺服器、印表機、電腦、電話等基礎

8、負責運維和IT團隊的建設,負責業務上線,維護等日常運維工作,負責業務調優及配合開發人員解決問題;

崗位要求:

1、本科及以上學歷,計算機相關專業,5年以上運維工作經驗,2年以上網際網路運維工作經驗;

2、精通Linux作業系統,熟悉shell或python等語言,熟悉自動化運維,擅長ansible/puppet/SaltStack其中至少一項工具;

3、精通tomcat、nginx、lvs、 jenkins、sonar、dubbo、redis、memched、couchbase 、fdfs等軟體,熟練掌握自動化整合部署方案;

4、精通大型監控架構及原理,熟悉系統、應用,資料庫等元件的監控配置經驗,熟悉後臺分散式系統的架構及容災設計;熟悉軟體釋出,運維,優化,對軟體全生命週期管理有一定認識;

5、熟悉Mysql,能熟練掌握Mysql的基本操作,能對Mysql進行效能優化,監控Mysql日常執行情況,熟悉主備、主從、安全機制;

6、熟悉hadoop、Spark、Zookeeper等元件的原理及運維方式,有docker、kubernetes生產實踐經驗者優先;

7、具備快速故障排錯的能力,具備一定的大型應用系統的架構優化能力,優秀的全域性觀,對虛擬化、伺服器硬體、作業系統、網路、儲存、應用中介軟體的工作原理等方面的技術有深入的理解和經驗;

8、熟悉相關IT管理方法論,至少對ITILDevopsITOM中的兩種有較為深刻的認識。