大資料運維工程師的工作職責（精選21篇）

大資料運維工程師的工作職責 篇1

職責：

1、負責和參與公司大資料基礎架構平臺規劃，運維，監控和優化工作，保障資料平臺服務的穩定性和可用性;

2、研究大資料前沿技術，改進現有系統的服務和運維架構，提升系統可靠性和可運維性;

3、負責和參與自動化運維繫統及平臺的建設;

4、負責優化部門運維流程提升運維效率。

任職要求：

1、統招本科及以上學歷，計算機相關專業，2年以上網際網路運維工作經驗;

2、熟悉Linux作業系統及常見開源軟體(Nginx,Tomcat,Zabbix等)的配置，管理及優化，能夠獨立排查及解決作業系統層的各類問題;

3、熟悉Hadoop/Kafka/Hbase/Spark/Elasticsearch/Hive的元件原理及運維方式;

4、精通Python,shell,瞭解JAVA;有良好的系統性能優化及故障排除能力;

5、具有很強的責任心、執行力、服務意識、學習能力和抗壓能力;

6、具備較好的溝通能力、主動性和團隊合作精神。

大資料運維工程師的工作職責 篇2

1.負責公司大資料業務叢集的運維工作(Hadoop/Hbase/Hive/Yarn/Spark/impala/kudu等)確保叢集環境的穩定可用;

2.負責叢集容量規劃、擴容及效能優化;

3.負責大資料叢集效能監控與優化，故障處理，資料備份及容災恢復，叢集出現異常時，能快速定位問題，並及時給出解決方案;

4.設計實現大規模分散式叢集的運維、監控和管理平臺;

5.參與/主導業務架構設計，在設計階段給出可運維性改進建議;

6.深入研究大資料業務相關運維技術，持續優化叢集服務架構，探索新的大資料運維技術及發展方向;

7.參與例如伺服器維護、專案維護、監控維護等常見運維事務

大資料運維工程師的工作職責 篇3

職責：

1. 完成大資料平臺日常運維工作(上線/日常監控/問題定位/指令碼開發)，涉及HDP/Hadoop/Spark/Tensorflow/Flink/Storm/Presto/Kudu/Alluxio等開源元件;

2. 完成大資料自研平臺工具運營，比如報表平臺、排程平臺和效能監控平臺;

3. 提升系統可靠性，完善監控策略，優化運維流程，提升部門運維效率，保證7*24服務;

4. 參與開源社群建設，提升公司開源影響力;

任職條件：

1. 熟悉Hadoop工作原理，熟悉Hadoop、Hive、Storm、Presto、Flink、 Alluixo、Kudu等開源元件的搭建、維護以及問題定位;

2. 熟悉Linux作業系統，熟練掌握Linux常用命令,瞭解ansible/puppet;

3. 熟練掌握shell/python/java;

4. 熟悉hive/spark sql工作原理，熟悉SQL語法，掌握資料庫的維護工作;

5. 對自動化運維有一定見解，使用過各種開源工具完成日常運維工作;

6. 有大資料平臺維護經驗優先;

7. 掌握dockerfile，瞭解大資料與k8s結合者優先;

8. 參與開源社群，有程式碼貢獻或者高質量部落格文章者優先;

大資料運維工程師的工作職責 篇4

職責：

1、負責大資料平臺架構的規劃、設計、搭建;

2、負責大資料平臺的運維保障工作;

3、負責運維相關資料分析，以及報表產出;

4、為線上服務高效穩定執行負責，支撐業務和資料量的快速擴張;

5、深入理解大資料平臺架構，發現並解決重大故障及效能瓶頸;

6、研究跟進大資料架構領域新技術並分享。

工作要求：

1、熟悉大資料產品生態圈，包括但不限於HDFS、YARN、Hive、HBase、Spark等;

2、精通Linux/Unix系統;

3、有資料分析經驗優先，精通一門以上指令碼語言(shell/perl/python等)，熟悉java/C/C++/Golang等開發語言一種及以上;

4、有2年以上大資料平臺相關運維開發經驗，瞭解分散式平臺執行的原理，並有實際部署維護經驗;

5、學習能力和主動性強，具有鑽研精神，充滿激情，樂於接受挑戰;

6、良好的服務意識，善於團隊協作，專案管理，主動思考，自我驅動力強。

大資料運維工程師的工作職責 篇5

職責：

1、負責Hadoop、HBase、Hive、Spark等大資料平臺 規劃、部署、監控、系統優化等，確保高可用;

2、負責公司大資料平臺的運維管理工作，叢集容量規劃、擴容及效能優化;

3、處理公司大資料平臺各類異常和故障，確保系統平臺的穩定執行;

4、設計實現大規模分散式叢集的運維、監控和管理平臺;

5、深入研究大資料業務相關運維技術，持續優化叢集服務架構，探索新的大資料運維技及發展方向;

6、為資料倉庫、資料探勘建模等資料應用專案提供執行環境支援。

崗位要求：

1、掌握Linux作業系統的配置，管理及優化，能夠獨立排查及解決作業系統層的各類問題;

2、熟練掌握Python, shell中的至少一門語言，有Python運維工具開發經驗優先;

3、熟悉 Hadoop生態及高效能快取相關的各種工具並有實戰經驗，包括但不限於Hadoop、HBase、Hive、Spark、impala、zookeeper、kafka、Elasticsearch、oozie、yarn、Scribe、Flume、Storm等;

4、具有叢集運維經驗，以及大負載下的容量評估、問題定位、架構優化等能力優先;有分散式系統(計算/儲存)開發經驗優先;

5、熟悉zabbix/ganglia/Prometheus/grafana系統的組合構件及使用;

6、精通ELK系統，有過大規模ELK配置管理、調優經驗，有過ElasticSearch搜尋和分析引擎開發經驗者優先;

大資料運維工程師的工作職責 篇6

1. 負責應用系統的管理與維護。部署、監控、擴容。

2. 負責平臺故障的應急處理與跟蹤解決。

3. 負責伺服器的日常運維。

4. 參與運維工作的自動化建設。

大資料運維工程師的工作職責 篇7

職責：

1、負責公司應用等各種服務的部署、運維、優化等工作;

2、負責公司應用產品平臺和專案的運維、優化等工作(作業系統、網路、儲存、資料備份、日誌管理等方面);

3、負責公司應用產品平臺和專案，做到7*24快速響應;

4、負責處理系統方面日常變更、控制突發情況，對疑難問題進行分析並解決;

5、研究制定運維策略、預案和相關解決方案;

6、負責公司應用平臺和專案的上線部署;

7、負責現網伺服器規劃與維護。

任職要求：

1、本科以上學歷，計算機相關專業，5年以上工作經驗，精通各種常用linux中介軟體使用及調優，如tomcat，nginx，apache，memcache,varnish等;

2、熟悉分散式檔案系統，有應用實踐案例，如GlusterFS,Mogilefs,GFS,FastDFS等;

3、熟練應用OpenStack，Xen，Kvm，vmware，有私有云搭建經驗優先;

4、精通Shell程式設計，至少熟悉一門以下語言：Perl，python，php;

5、熟悉Nosql，如redis，MongoDB;

6、熟悉叢集、負載均衡，LVS，Haproxy，corosync,keepalive;

7、熟練應用各種系統管理工具：ansible，puppet與saltstack;

8、具有良好的團隊協作能力和服務意識，有一定的溝通、寫作能力，可以獨立撰寫報告。

大資料運維工程師的工作職責 篇8

職責：

1.負責機房基礎設施及伺服器、交換機的日常維護巡檢，保持機房執行環境的良好狀態;

2.對資料中心機房伺服器、網路等裝置進行安裝、硬體維護、故障處理等工作;

3.負責伺服器系統、資料庫安裝與維護管理;

4.負責公司網路平臺的執行監控與維護;

5.進行路由器等網路裝置的維護管理，並對網路優化及辦公室病毒查殺進行合理規劃;

6.對公司電腦、及IT周邊裝置故障維護;

7.負責VPN網路、VOIP網路建設和維護，技術檔案維護。

8.對泛微OA系統、SAP系統開發與維護

任職要求：

1.計算機相關專業，大專以上學歷;

2.3年以上的網路管理、伺服器管理、機房管理維護工作經驗;

3.熟悉伺服器系統、資料庫安裝與維護;

4.熟悉企業級路由器、交換機、防火牆裝置的設定與維護管理;

5.精通windows，AD域 、DHCP、DNS搭建與管理，熟悉exchange郵箱伺服器的管理

6.熟悉應用系統架構，對OA系統、ERP軟體有維護經驗

7.注重服務意識，責任心強，性格開朗，工作積極主動，能接受勤奮工作氛圍，有一定的抗壓能力，敢於承擔。

大資料運維工程師的工作職責 篇9

職責：

1、負責公司雲平臺伺服器、機房伺服器的管理、維護;

2、負責對公司相關業務平臺(APP、web 網站、資料庫等)的網路規劃、伺服器規劃;

3、負責對公司相關業務平臺執行的安全性和穩定性，對伺服器系統漏洞能及時發現和修補;使用指令碼對伺服器和專案的效能和資源進行監控;

4、負責網路伺服器資料備份、安全策略、穩定執行。

5、負責相關係統運維文件的撰寫、整理和更新。

崗位要求：

1、計算機等相關專業畢業，一年以上網路系統維護工作;

2、熟練掌握騰訊雲、阿里雲相關產品應用，包含但不限於雲伺服器、雲資料庫、負載均衡、CDN、檔案儲存、資料傳輸、伺服器安全等應用的配置搭建和操作;

3、熟悉常用伺服器系統軟體的部署和調優，常用網路監控軟體的部署和使用，具有良好的網路安全意識;

4、具備良好的溝通協調能力和團隊協作能力，具備良好的職業道德和職業操守。

大資料運維工程師的工作職責 篇10

職責：

1、負責為使用者提供相關核心業務系統的綜合性運維服務工作;

2、負責處理解決系統及相關裝置使用過程中所產生的各類技術和業務問題;

3、負責對客戶現場緊急事件進行響應支援，按照規定時間到達客戶現場;

4、熟悉客戶業務及系統執行情況，定期檢查客戶系統執行情況，提前預防問題的發生;

5、完成上級主管分配的任務、及時向上級主管反饋工作進度情況;

任職要求：

1、計算機或財務相關專業，大專以上學歷，年齡22～35歲;

2、具有表達能力和溝通能力，有良好的服務意識;

3、具有良好的學習能力，勤於鑽研、團隊意識強、抗壓能力強;

4、專業基礎紮實，能與技術開發人員進行技術邏輯方面的溝通;

6、會基本SQL語句，能從資料庫中查詢簡單問題;

7、從事過軟體實施、系統維護者優先考慮;

大資料運維工程師的工作職責 篇11

職責：

1、負責公司物流平臺專案的實施和維護工作。

2、負責現有軟體系統的執行維護及監控，提供IT軟硬體方面的服務和支援，保證系統的穩定，包括但不限於日常巡檢、問題排查、跟蹤和統計;

3、負責使用者終端電腦(作業系統、軟體更新、防毒、木馬查殺等)、印表機的維護;

4、負責系統相關外設的資產管理和維護，包括但不限於手持終端、條碼印表機、掃描槍、行動式印表機等;

5、完成領導佈置的其他工作。

要求：

1、 計算機或電子商務相關專業，本科以上學歷;

2、 熟悉TMS系統，有一定的程式設計能力為佳;

3、 具有良好的工作責任心和團隊合作精神;

4、 語言表達清晰、善於溝通，有較好的文件編寫能力;

5、 二年以上專案實施經驗，有物流行業工作背景優先錄用。

大資料運維工程師的工作職責 篇12

職責：

1、負責日常桌面維護，負責公司內部伺服器的維護，包括公司電話系統，視訊會議系統，安防系統，辦公電腦，印表機、投影儀等周邊裝置;

2、負責網路的維護、管理、故障排除等日常工作，負責公司機房裝置的日常巡檢，確保網路日常的正常運作;

3、執行公司資訊保安策略、日常操作規範和制度;

4、維護公司計算機、伺服器系統軟體和應用軟體，同時為其他部門提供軟硬體技術支援;

5、解決排除各種軟硬體故障，編制彙總故障、問題，定期提交匯總報告;

6、資料資料庫的常用操作和維護，並根據要求形成相關統計報告。

7、IT運維相關流程的規劃、設計、推行、實施和持續改進。

任職資格：

1、通訊、計算機等相關專業，本科或以上學歷，有相關工作經驗者優先;

2、善於維護網路的安全，可熟練進行網路裝置的基本維護和故障處理;

3、英語良好;

4、較強的分析能力;

5、良好的溝通技巧及團隊合作能力。

大資料運維工程師的工作職責 篇13

職責：

1. 負責完成資料中心日常運維，巡檢，記錄等工作

2. 負責完成資料中心相關硬體日常維護，包括網路、系統、儲存、資料庫、安全、雲平臺等

3. 負責完成資料中心溝通及配合業務上線

4. 負責完成領導交辦的其他事項

任職資格：

1. 本科以上學歷

2. 一年以上IT運維相關工作經驗

3. 熟悉路由器、交換機、防火牆等網路裝置(H3C，華為等)。

4. 熟練掌握常見DELL、浪潮等伺服器基本操作。

5. 熟練運用常見作業系統，如Linux,windows

6. 基本瞭解浪潮等常見儲存

7. 基本瞭解常見安全裝置，如IPS、IDS、WAF、Soc等。

8. 基本瞭解常見資料庫，如oracle Mysql

9. 熟練使用ppt、excel、word等office軟體

10.工作認真負責，踏實穩重。

11.良好的理解能力，表達能力

大資料運維工程師的工作職責 篇14

職責：

1、 負責維護簡訊管理平臺的系統部署、日誌監控、應急響應、平臺升級以及日常的維護等;

2、 負責linux伺服器的日常維護及檔案備份，保護檔案安全和許可權分配，維護系統的正常運作，Linux應用程式的配置，管理;

3、 負責對接落地資源、接入資源;配置客戶資料，為客戶提供技術支援;優化落地線路、資源排程，使客戶質量指標達到。

4、 檢測簡訊通道的執行情況，遠端重啟簡訊平臺伺服器，啟用簡訊通道;

5、 用mysql進行各種業務的資料統計分析。

任職資格：

1、 計算機或相關專業大專以上學歷，1年以上系統運維或相關工作經驗;

2、 熟練使用VOS系統、linux、mysql、shell等指令碼命令;

3、 對公有云產品(阿里雲)有一定的經驗和了解;

4、 豐富的IT平臺監控、系統運維經驗;

5、 熟悉Mysql、oracle資料庫以及redis程式設計者優先;

6、 熟悉Java/Shell/PHP/Python等一種語言者優先;

7、 有團隊精神，具有鑽研精神、具有較強的自主學習性;

8、 溝通能力強，有強烈的客戶服務意識;

9、 具有較強的責任心，能夠在一定壓力下工作，積極主動、認真踏實、獨立解決問題的能力。

大資料運維工程師的工作職責 篇15

1、負責OA系統的實施與維護;

2、負責各類資料庫系統的運維及資料備份,保障相關業務系統的正常運作;

3、對自開發系統的需求收集分析，實施培訓，後期運維等工作;

4、對系統優化的內容進行彙總，優化後進行系統培訓，以及釋出優化後的操作文件;

5、執行上級領導交代的任務。

大資料運維工程師的工作職責 篇16

職責：

1、負責公司軟硬體系統的日常維護及管理工作並及時解決相關技術問題，瞭解監控系統、綜合佈線、廣播系統、門禁等;

2、負責集團網路的管理及維護，確保通訊順暢、系統穩定;

3、負責區域網絡搭建及維護，對使用者終端提供相應的技術支援;

4、總部機房管理，日常伺服器維護檢查運維等。

任職資格：

1、電子資訊，計算機等相關專業、可接受應屆生 實習生;

2、掌握常用網路及通訊裝置的安裝及配置，具備良好的動手能力和排障能力，較強的學習能力。

3、具有較強的溝通協調能力、團隊意識、吃苦精神以及責任心;

4、良好的語言表達能力，溝通能力，能夠適應出差安排。

大資料運維工程師的工作職責 篇17

職責：

1、負責智慧機器人後臺服務系統的日常維護，保證使用者正確、有效地使用系統。

2、負責對系統的執行狀態進行監控，發現並排查系統出現的故障。

3、負責系統的維護工作進行收集、整理和深入分析，發現系統運營中存在的問題和隱患，及時提出系統優化建議。

4、負責開發、測試和生產環境版本釋出。

5、公司日常資訊系統的維護。

任職資格：

1、全日制本科及以上學歷，計算機相關專業。

2、二年以上系統維護崗位工作經驗，有網際網路公司IT工作經驗。

3、掌握Linux作業系統的常用命令及基本操作、熟悉MongoDB資料庫的常用操作，熟悉資料庫的Sql語句(Sql常用語法)、對J2EE架構有基本的瞭解，具備JAVA開發經驗者優先。

4、理解負載均衡架構等領域技術工作原理及其異常診斷、調優，熟悉nginx，tomcat，keepalive，zookeeper等)。

5、做事有條理，對待工作認真負責，溝通能力強，有良好的服務意識

大資料運維工程師的工作職責 篇18

職責：

1、負責公司大資料叢集的構建，任務排程、監控預警，持續完善大資料平臺，保證穩定性、安全性;

2、負責叢集容量規劃、擴容、叢集效能優化及日常巡檢和應急值守，參與大資料基礎環境的架構設計與改進;

3、深入研究大資料業務相關運維技術，持續優化叢集服務架構，探索新的Hadoop、Spark運維技術及發展方向;

4、具備ownership，故障排查能力，有很好的技術敏感度和風險識別能力;

5、良好的服務意識，主動思考，自我驅動力。

任職資格：

1、熟悉RedHat、CentOS、Ubuntu系列Linux系統的配置、管理、核心優化。能夠獨立編寫(Shell/Python)指令碼語言，指令碼開展日常伺服器的運維;

2、熟悉hadoop生態圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、除錯和運維經驗; 熟悉分散式日誌分析系統ELK及相關技術;

3、熟悉軟硬體裝置，網路原理，有豐富的大資料平臺部署，效能優化和運維經驗; 瞭解運維高容量、大流量、大併發Web系統的業務知識以及解決方案;

4、工作認真負責，有較強的學習能力，動手能力和分析解決問題的能力;

5、能夠利用各種開源監控工具、運維工具，HA、負載均衡軟體完成工作任務;

6、mongodb、mysql等配置、調優和備份。

大資料運維工程師的工作職責 篇19

職責：

負責運維平臺的開發，推進自動化運維體系建設

負責制定運維流程，負責運維技術文件編寫

負責新技術架構測試研究，推動架構和部署優化

參與公司私有云建設規劃

職位要求：

計算機相關專業，3年以上linux系統運維工作經驗

熟練使用python，至少熟悉一種web框架flask/django/tornado框架

具有持續整合和持續交付經驗，熟悉Jenkins等工具

熟悉saltstack,ansible等配置管理工具，並能進行二次封裝開發

具有網路/系統/web安全等方面的理論基礎，具備惡意程式碼檢測、入侵檢測，安全漏洞分析能力

具有良好的文件編寫習慣和技術分享意識

熟悉容器技術虛擬化技術者優先

大資料運維工程師的工作職責 篇20

職責：

1、企微雲平臺的日常執行管理，處理各種運維事故及事件;

2、負責企微雲應用的部署;

3、負責伺服器的規劃、除錯優化、日常監控、故障處理、資料備份、日誌分析等工作;

4、參與運維流程制定，確保任何突發情況都能高效響應;

5、整理各類運維文件，沉澱經驗。

工作要求：

1、本科及其以上學歷，3年以上網際網路公司Linux運維相關經驗;

2、精通zabbix監控系統的搭建和維護，能夠開發自定義指令碼;

3、熟悉Nginx/Apache/Tomcat等Web應用伺服器部署、優化;

4、熟悉資料MySQL資料庫叢集的部署，監控，優化;

5、有Elastic Search、Mongodb、Hbase等部署、監控、優化經驗的優先考慮。

大資料運維工程師的工作職責 篇21

職責：

1、負責綜合經營管理系統的事件處理、問題解決、知識積累，配合執行變更釋出、配置管理、資料維護;參與系統安裝、交接測試等工作;

2、負責根據業務部門提出的優化(bug修訂)、變更、改進、完善等新需求，在現有應用系統的基礎上從事分析設計、程式設計開發、測試交付等工作。

任職要求：

1、大學本科以上學歷，三年以上工作經驗，至少一年開發經驗;

2、精通(C#)、JQuery，XML、CSS、AJAX等語言或Web技術，能獨立完成系統bug修訂，系統優化，包含需求變更修改;

3、熟悉Windows Service、Web Service/WCF以及多執行緒程式設計技術;

4、理解多層機制， 熟練掌握B/S模式開發;

5、熟悉SQL20xx資料庫系統，能使用SQL進行程式設計，能對資料庫效能進行優化;

6、有較強的自學能力，有良好的職業素養;

7、熟悉Microsoft Dynamics CRM、Sharepoint20xx開發經驗者優先考慮;

8、善於並樂於各式溝通，具備極強的團隊精神和工作熱情。