大資料運維工程師崗位的主要職責(精選21篇)
大資料運維工程師崗位的主要職責 篇1
1) 承擔團隊的日常管理,如值班安排、工作分配、日常考評等;
2) 組織制訂、完善與本部門相關的管理制度、標準操作手冊SOP、維護操作MOP和應急預案等;
3) 組織制定中心基礎設施保養計劃,做好相關計劃的實現、控制及優化工作;
4) 稽核、報批、組織實施各類變更申請、事件報告工作,做好相關應急工作的指揮與處理;
5) 組織開展資料中心基礎設施執行維護相關培訓、訓練與演練;
6) 協助商務部與外包服務商洽談相關維護服務合同,監督服務實施並要求進行稽核與考評,確保相關基礎設施的穩定執行;
7) 負責資料中心基礎設施資源統計、容量預警工作,做好每月用水用電統計、PUE統計與分析;
8) 配合資料中心進駐客戶的場地選址、平面佈局、改造實施、進駐管理等支援協調工作;
9) 基礎設施月報、環境報告的編寫和提交;
10) 資料中心基礎設施的持續優化和改善;
11) 負責上級主管領導交辦的其它工作。
大資料運維工程師崗位的主要職責 篇2
職責:
1.負責大資料管理平臺產品的運維支撐工作,包括專案實施(安裝、調優、培訓)、專案聯調以及其他日常維護等;
2.負責大資料管理平臺產品的自動化運維相關指令碼的開發、維護等;
3.參與大資料管理平臺其他相關工作;
4.領導交付的其他事宜任職要求
任職要求:
1.熟悉Linux(redhat/centos)軟硬體環境、系統管理和優化,熟練部署、優化各種常用服務,熟練使用Linux 命令;
2.具備一定的故障排查能力,能夠獨立排查及解決作業系統層的各類問題,有良好的技術敏感度和風險識別能力,熟悉一門以上指令碼語言(Shell/Python等);
3.熟悉Hadoop大資料生態圈,包括但不限於Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;
4.熟悉Hadoop各元件的原理和實現,有實際部署維護、管理( 包括元資料管理)及優化經驗,並擁有持續調優能力,運維管理過大規模資料平臺經驗者優先考慮;
5.熟悉掌握常用的安全協議和元件服務,對hadoop各元件的許可權、安全、kerberos進行配置管理。熟悉SSL、ACL、kerberos等在大資料環境場景的使用;
6.大型節假日需低頻次維護各專案,可以調休;
7.具備良好的服務意識,善於主動思考,自我驅動力強。有良好的溝通、協調能力,富有團隊精神,有較強的文件編寫能力;
8.本科或碩士畢業於211、985等國內知名高校者優先(注意,僅是加分項,不是必須);
9.有實際工作經驗者優先;
大資料運維工程師崗位的主要職責 篇3
職責:
根據產品需求,完成產品功能的設計、編碼、測試和釋出;
現場專案支援工作,對現場反饋工單問題進行分析、定位和解決;
對現場專案提出的新需求進行分析、設計並完成;
根據產品和技術發展要求,完成平臺的設計、開發和支援維護工作。
職位要求:
本科及以上學歷,計算機、軟體工程相關專業,3年以上相關工作經驗;
精通sql、greenplum/postgresql、impala、oracle、mysql至少1種技術、可融匯貫通靈活轉換使用;
熟悉hadoop平臺zookeeper、hdfs、spark、MR及hbase等常用元件的執行原理;
基於linux/unix平臺進行shell、python的常用指令碼開發。
大資料運維工程師崗位的主要職責 篇4
職責:
1、負責公司大資料平臺自動化運維開發、監控和優化工作,保障資料平臺服務的穩定性和可用性;
2、負責公司Hadoop核心技術元件日常運維工作 ;
3、負責公司大資料平臺現場故障處理和排查工作;
4、研究大資料前沿技術,改進現有系統的服務和運維架構,提升系統可靠性和可運維性;
任職要求:
1、本科或以上學歷,計算機、軟體工程等相關專業,3年以上相關從業經驗
2、精通Linux運維命令,熟悉Linux的維護和管理,熟悉Shell/Python指令碼開發,掌握Scala/JAVA優先;
3、熟悉大資料專案實施:包括不限於Kafka、Hadoop、Hive、Hbase、Spark等大資料生態的平臺搭建,監控和調優;
4、良好團隊精神服務意識,溝通協調能力;
大資料運維工程師崗位的主要職責 篇5
職責:
1、負責Hadoop、HBase、Hive、Spark等大資料平臺 規劃、部署、監控、系統優化等,確保高可用;
2、負責公司大資料平臺的運維管理工作,叢集容量規劃、擴容及效能優化;
3、處理公司大資料平臺各類異常和故障,確保系統平臺的穩定執行;
4、設計實現大規模分散式叢集的運維、監控和管理平臺;
5、深入研究大資料業務相關運維技術,持續優化叢集服務架構,探索新的大資料運維技及發展方向。
任職要求:
1、熟悉Hadoop/HBase/Hive/Spark/Kafka/Zookeeper等開源專案的安裝與除錯,升級擴容;
2、熟悉Hadoop大資料生態圈,包括但不限於HDFS、YARN、Hive、HBase、Spark、Kafka、Flume等;
3、精通一門以上指令碼語言(shell/perl/python等),熟練掌握Linux系統及常規命令與工具,熟練的Shell指令碼編寫能力。
大資料運維工程師崗位的主要職責 篇6
職責:
1. 負責公司專案的運維保障。
2. 負責配置測試環境和線上環境部署,並進行維護、升級;
3. 負責公司伺服器的規劃與監控、資料分析、日誌分析、排除故障等工作;
4. 優化運維體系並保證伺服器可靠、可擴充套件的運維環境。
5. 自動化指令碼的開發
職位要求:
1. 本科及以上學歷,計算機及相關理工科專業畢業
2. 1年以上linux/unix系統管理經驗,熟悉網路整體的架構,能熟練使用系統命令
3. 熟悉bash,csh等unix/linux shell指令碼,熟悉ORACLE資料庫基本操作,熟悉svn基本命令
4. 良好文件編寫和文字表達能力和團隊合作精神
5. 有很強的責任心和學習能力。
大資料運維工程師崗位的主要職責 篇7
職責:
1、軟體產品及專案的部署、安裝、升級、維護,確保系統正常穩定執行;
2、專案資料庫維護、確保資料庫正常執行;
3、及時解決客戶在系統使用過程的各種問題,維護好客戶關係以及客戶培訓工作;
4、收集客戶在系統過程遇到的問題,進行分析和確認,並反饋至相關負責人;
5、完成上級安排的其他任務;
任職要求:
1、計算機相關專業,專科及以上學歷;
2、掌握計算機基礎知識,熟悉常用軟體的安裝與使用;
3、對軟體開發有一定的瞭解;
4、瞭解病毒防護、系統漏洞、防護牆等網路安全知識;
5、具有良好的溝通和語言表達能力,邏輯思維能力強,有責任心,工作態度端正、積極,有團隊意識及良好的操作規範意識。
大資料運維工程師崗位的主要職責 篇8
職責:
1、 負責協助銷售人員、代理商售前技術講解、產品安裝、除錯等工作;
2、 負責客戶端網路環境搭建、伺服器配置;
3、 負責售後為客戶提供技術服務、培訓;
4、 負責收集、分析、反饋客戶技術需求與產品意見;
5、負責公司伺服器資料的更新與維護工作;
任職資格:
1、 計算機相關專業,大專及以上學歷;
2、 一年以上相關工作經驗,熟悉Linux、Windows的IIS,Apache, Nginx環境部署;
3、 對PHP、Mysql、Js開發語言熟悉者優先考慮;
4、 具有良好的溝通能力、學習能力、較有敬業精神,適應短期出差工作性質;
大資料運維工程師崗位的主要職責 篇9
1.負責高併發,大儲存和實時流的Hadoop/spark大資料平臺規劃,運維,監控和優化工作;
2.保證Hadoop/spark平臺各核心服務執行的穩定、高效;
3.對Hadoop/spark平臺運維不斷優化,提升資料產品的質量和響應速度;
4.開發各種Hadoop大資料自動化運維與監控工具;
5.平臺大資料環境的部署維護和技術支援;
6.應用故障的處理跟蹤及統計彙總分析;
7.應用安全,資料的日常備份和應急恢復。
大資料運維工程師崗位的主要職責 篇10
職責
1、伺服器的配置,維護,監控,調優,故障排除等;
2、大使用者量下高效能伺服器系統部署方案的制定及實施;
3、保障伺服器與資料庫安全,檢查並消除安全漏洞;
4、資料備份、資料監控、應急響應、故障排除、編寫資料分析報告等;
5、能夠熟練排查運維過程中出現的服務故障、系統故障、網路故障;
6、負責公司計算機硬體的安裝、配置以及維護修理
任職要求
1、本科學歷,計算機應用或網路相關專業,有1~2年相關工作經驗者優先考慮;
2、精通shell/Python/bat等1至2種程式語言;
3、熟悉常見的監控軟體zabbix;
4、熟悉網路基礎知識;
5、熟悉使用Linux/Unix作業系統;
6、能熟練的進行PostgreSQL資料庫運維管理操作,並能熟練的解決較嚴重資料庫故障;
7、精通資料庫的各種備份及恢復方法,能進行資料庫備份方案的設計,並能進行方案的實施和維護;
8、工作積極主動、踏實、認真,有較強的責任心和服務意識,良好的表達及溝通協調能力。
大資料運維工程師崗位的主要職責 篇11
職責:
1、參與專案需求分析, 制定開發計劃,承擔專案的架構設計和詳細設計工作,並承擔專案核心模組的開發任務,確保按時完成既定的開發內容;
2、參與軟體開發的整體規劃及實施,分析並解決軟體開發過程中的技術問題,為公司的業務開展提供支援;
3、完成軟體系統程式碼的實現,編寫程式碼註釋和開發文件,進行系統的功能定義,程式設計;
4、根據設計文件或需求說明完成程式碼編寫,除錯,測試和維護;
5、根據需要不斷修改完善軟體,負責現有系統的重構、優化、維護等工作;
7、對系統資料庫進行日常管理,統計資料庫中相關資訊;
8、負責網路執行的安全性、可靠性及穩定性;
9、配合專案經理完成相關任務目標。
相關要求:
1、計算機或相關專業大專學歷以上;
2、2年以上軟體開發經驗;
3、具備需求分析和系統設計能力,以及較強的邏輯分析和獨立解決問題的能力;
4、熟練使用photoshop、flash、dreamweaver等工具,熟悉ASP,JAVA,SQL,HTML等開發語言;
5、具有良好的溝通領悟能力及團隊協作能力,有進取心,強烈的責任感和認真細緻的工作態度,善於學習,具備良好的團隊意識。
大資料運維工程師崗位的主要職責 篇12
1. 負責客戶AD或Exchange系統日常維護及監控,提供系統功能方面的服務和支援
2. 負責客戶各應用系統相關故障、疑難問題排查處理,編制彙總故障、問題情況說明
3. 維護客戶關係,提高客戶滿意度
4. 負責部分應用系統的升級上線工作
5. 整理現場需求,做成系統改善提案
大資料運維工程師崗位的主要職責 篇13
職責:
1、負責建設、除錯和維護公司的網路系統,包括網路相關的軟硬體系統負責解決網路故障、優化網路效能;
2、對各種應用支援軟體如資料庫、中介軟體以及各種通用服務或特定服務的監控管理,如郵件系統、DNS、Web 等的監控與管理;
3、管理企業中各 IT 系統的資源資產情況,這些資源資產可以是物理存在的,也可以是邏輯存在的;
4、推行資訊科技中心的軟體配置化管理,保證公司主要業務系統配置安全;
5、負責業務系統SIT/PRE/PRD的環境的部署釋出工作;
6、負責維護公司機房和伺服器資源;
7、推行Devops,實現適合公司IT環境的持續整合、持續部署等自動化運維;
任職資格:
1、大學本科及以上學歷,計算機或相關專業畢業,具有大型網際網路公司三年以上運維經驗;
2、精通Linux系統,熟悉常用的web伺服器/資料庫/中介軟體等軟體的應用及運維管理,熟悉TCP/IP及常用應用層協議;
3、精通一門以上指令碼語言(shell/perl/python等),具備自動化運維、CI/CD、DevOps專案實踐等相關經驗,熟悉Kubernetes、Docker等容器相關技術;
4、熟悉大型分散式系統(計算/儲存)的架構設計及運維管理,具備QEMU/KVM、libvirt、openstack等虛擬化技術的開發/運維經驗者優先;
5. 具備較強Trouble-shooting能力,能夠快速排查系統各種異常、瓶頸等,並推動平臺和產品的優化改進;
6、具備較強的客戶服務意識,能夠快速響應客戶諮詢、技術支援等問題,提供相關解決方案,協助客戶進行應用系統架構設計、快速上雲和遷移等相關工作;
7、積極主動,善於溝通與持續學習,擁有較強的責任心與團隊協作意識,敢於接受挑戰並能承受較強工作壓力。
大資料運維工程師崗位的主要職責 篇14
1.對公司MES系統進行日常維護,確保系統正常執行;
2.對MES系統有一定了解,有相關係統實施或運維經驗佳;
3.針對業務部門提出的MES系統問題,進行trouble shooting,並找出解決方案;
4.熟悉資料庫基本操作,如MySQL、SQL、Server等;
5.對C≠、Delphi開發語言有一定了解、有相關開發經驗;
6.善於溝通,能同相關業務部門緊密合作,快速理解業務部門提出的需求或問題,並通過開發得以實現;
7.編寫系統操作手冊等文件;
8.完成領導佈置的其他工作。
大資料運維工程師崗位的主要職責 篇15
職責:
1.基於現在有開源產品和解決方案的能力,為團隊提供IT架構規劃和諮詢的服務;
2.提供雲上DevOPS體系建設方案的諮詢和實施服務,優化業務交付效率,加速團隊的數字化轉型;
3.在開發、測試和生產各階段配合業務架構師完成環境的搭建與演示,組織內部資源,幫助完成雲產品與技術方案的測試、諮詢與實施。
任職要求:
1. 計算機或通訊相關專業專科以上學歷,5年以上大規模業務系統研發、運維、專案交付經驗;
2. 針對大型分散式系統架構設計、容災高可用/業務多活/兩地三中心架構有深入理解和豐富的專案落地經驗;
3. 精通Linux/windows系統,對於常用的運維工具,開源軟體(Nginx、Tomcat、Hadoop、Hbase、zookeeper、MQ、Redis等)的部署及配置優化實踐經驗;
4. 精通MySQL、SQL Server、Oracle、PostgreSQL、Redis、Memcache等兩種以上主流資料庫和快取技術,有豐富的資料庫的優化/維護經驗;
5. 熟悉微服務、容器化架構,以及相關技術,對Istio、Docker、Kubernates,mesos等容器編排技術有豐富的實踐和落地經驗;
6. 熟悉主流公有云產品,有維護本地機房經驗;
7. 有大型綜合專案的交付和落地經驗,有較好的推動能力、風險識別意識和技術撐控判斷力;
8. 具備良好的客戶溝通能力及技巧,工作積極主動,認真負責,心理素質好,能承受較大工作壓力;
9. 具備英文閱讀、書寫和溝通能力。
大資料運維工程師崗位的主要職責 篇16
1、負責網路以及伺服器的網路設定、維護和優化、網路的安全監控、系統性能管理和優化、網路效能管理和優化;
2、負責日常系統維護,及監控,提供IT軟硬體方面的服務和支援,保證系統的穩定;
3、負責相關故障、疑難問題排查處理,編制彙總故障、問題,定期提交匯總報告;
4、負責編寫各類技術文件;
5、伺服器Linux系統的安裝和基本配置,具有網路方面的基本知識,對相關網路裝置及綜合佈線有一定了解;
大資料運維工程師崗位的主要職責 篇17
職責:
1.對泛微OA系統、SAP系統開發與維護,熟悉資料庫查詢;
2.對資料中心機房伺服器、網路等裝置進行安裝、硬體維護、故障處理等工作;
3.負責伺服器系統、資料庫安裝與維護管理;
4.負責公司網路平臺的執行監控與維護;
5.進行路由器等網路裝置的維護管理,並對網路優化及辦公室病毒查殺進行合理規劃;
6.對公司電腦、及IT周邊裝置故障維護;
7.負責VPN網路、VOIP網路建設和維護,技術檔案維護。
8.負責機房基礎設施及伺服器、交換機的日常維護巡檢,保持機房執行環境的良好狀態;
任職資格:
1.計算機相關專業,大專以上學歷; 2.3年以上的網路管理、伺服器管理、機房管理維護工作經驗;
3.熟悉伺服器系統、資料庫安裝,維護與使用;
4.熟悉企業級路由器、交換機、防火牆裝置的設定與維護管理;
5.熟悉應用系統架構,對OA系統、ERP軟體有維護經驗 ;
6.注重服務意識,責任心強,性格開朗,工作積極主動,能接受勤奮工作氛圍,有一定的抗壓能力,敢於承擔。
大資料運維工程師崗位的主要職責 篇18
職責:
1、 負責參與IT資訊系統硬體整合專案實施工作;
2、 負責處理計算機及辦公外設、監控、網路、的安裝及除錯工作,處理相關的故障問題及異常排除;
3、 綜合佈線及相關的工作;
4、 協助進行客戶使用培訓工作;
5、 具有良好的技術文件編制能力;
6、有IT售後服務經驗者優先考慮
崗位要求:
1、 大專及以上學歷,計算機類等相關專業;
2、 在學校有一定的弱電系統硬體整合系統實施經驗;
3、 瞭解專案管理和專案實施;
4、 良好的邏輯思維能力、人際溝通能力;
5、 積極主動,具備團隊意識,具有高度的責任心,能夠承受較強的工作壓力。
大資料運維工程師崗位的主要職責 篇19
職責:
1、負責資料平臺的運維管理工作(部署、監控、優化、故障處理);
2、負責Hadoop/Spark/Flink/Elasticsearch/Kafka等系統的架構稽核、容量規劃、成本優化;
3、負責大資料平臺的使用者管理、許可權分配、資源分配;
4、參與資料探勘、機器學習平臺的設計、並給出可執行的運維方案;
5、參與資料平臺的相關工具開發(包括自動化部署、監控、ETL等);
6、深入理解資料平臺架構,發現並解決故障隱患及效能瓶頸;
7、ETL工具、排程工具、關係型資料庫的運維。
任職資格:
1、本科以上學歷,計算機軟體相關專業;
2、1年以上大資料相關元件運維經驗(hadoop/yarn/hbase/hive/spark/kafka等),1年以上的CDH或HDP維護經驗,3年以上系統運維相關經驗;
3、深入理解Linux系統,能獨立部署開源軟體,熟練掌握一門以上指令碼語言(shell/perl/python等),熟悉python開發語言優先;
4、邏輯思維能力強,做事有條理,責任心強,工作積極主動,執行力強,有良好的團隊協作意識。
大資料運維工程師崗位的主要職責 篇20
1. 負責持續整合/自動化運維平臺搭建;
2. 產品上線部署與釋出;
3. 對系統、WEB、資料庫日誌收集分析,發現潛在隱患;
4. 伺服器日常監控及報警處理;
5. 突發情況應急預案、應急處理;
6. 阿里雲相關產品應用;
7. Docker映象製作,K8S環境搭建;
8. Nginx、MQ等中介軟體的搭建、配置、管理、優化和維護;
9. Centos、GitLab、MYSQL的安裝、配置、管理和維護;
10. mysql安裝、配置、排錯、備份還原、效能優化及監控;
11. 其他監控軟體搭建及應用;
大資料運維工程師崗位的主要職責 篇21
職責:
1、負責運維平臺的架構、設計、開發,提升運維質量及效率,達成運維自動化平臺、日誌平臺、快取平臺持續迭代建設;
2、負責監控告警系統的設計和開發,做到監控視覺化、故障自動化,7x24小時響應故障處理,對平臺的運維質量負責;
3、評估系統性能和執行狀態,建立量化指標,用資料指導優化,技術文件的整理和編寫;
4、業務服務支援,不限於桌面支援、技術支援、系統支援,實現資訊系統的自動化及業務管理系統自動化
5、資訊化系統的規劃和建設,不限於OA、客服、FMS、WMS、TMS、OMS、ERP等;
6、安全規劃和管理,不限於網路、系統、資料、操作等安全,組織定期或者不定期進行安全演練
7、網路和硬體規劃和管理:辦公、開發、測試、生產、門店、分公司網路建設,機房、伺服器、印表機、電腦、電話等基礎
8、負責運維和IT團隊的建設,負責業務上線,維護等日常運維工作,負責業務調優及配合開發人員解決問題;
崗位要求:
1、本科及以上學歷,計算機相關專業,5年以上運維工作經驗,2年以上網際網路運維工作經驗;
2、精通Linux作業系統,熟悉shell或python等語言,熟悉自動化運維,擅長ansible/puppet/SaltStack其中至少一項工具;
3、精通tomcat、nginx、lvs、 jenkins、sonar、dubbo、redis、memched、couchbase 、fdfs等軟體,熟練掌握自動化整合部署方案;
4、精通大型監控架構及原理,熟悉系統、應用,資料庫等元件的監控配置經驗,熟悉後臺分散式系統的架構及容災設計;熟悉軟體釋出,運維,優化,對軟體全生命週期管理有一定認識;
5、熟悉Mysql,能熟練掌握Mysql的基本操作,能對Mysql進行效能優化,監控Mysql日常執行情況,熟悉主備、主從、安全機制;
6、熟悉hadoop、Spark、Zookeeper等元件的原理及運維方式,有docker、kubernetes生產實踐經驗者優先;
7、具備快速故障排錯的能力,具備一定的大型應用系統的架構優化能力,優秀的全域性觀,對虛擬化、伺服器硬體、作業系統、網路、儲存、應用中介軟體的工作原理等方面的技術有深入的理解和經驗;
8、熟悉相關IT管理方法論,至少對ITILDevopsITOM中的兩種有較為深刻的認識。
-
委派會計的崗位職責十篇
委派會計的崗位職責篇11、能獨立操作一般納稅人企業外貿會計和進出口業務賬目,熟悉進出口企業會計處理流程和方法,能夠獨立完成整套的財務處理及財務核算;2、熟悉進出口貿易結算、結匯、退稅等作業,能夠獨立、熟練、準確的完成進出口外匯核銷、出口退免稅申報、進...
-
學校校醫工作職責(通用8篇)
學校校醫工作職責篇1一、做好校醫室對外宣傳(黑板報、電教、廣播)工作,參加校醫室每週例會、學校組織的政治學習、本系統組織的業務學習,及時發現、處理工作中的問題。二、做好正常的師生門診,包括學生一般疾病的診療、轉診工作,以及教工一般疾病的診療,接受全校師生...
-
續保專員崗位職責十篇
續保專員崗位職責篇11、受理客戶投、續保業務,分析客戶車輛型別,結合保險產品品種向客戶推薦險種,計算相關資費。2、檢視客戶上年度的車險保單,收集客個人或企業車輛辦理保險的行駛證、上年度保單、個人身份證或企業營業執照等材料的影印件辦理交強險或車輛商業保...
-
物業保安崗位職責(通用5篇)
物業保安崗位職責篇11、負責管轄區內的安全巡檢,主動發現及處理安全隱患;2、負責及時處理突發事件,做好現場的安全消防工作;3、負責做好工作記錄和備案;4、負責落實商場每天開、關門和清楚等工作;5、巡檢督促各商場、部門落實安全生產、治安防範的各措施;6、檢查...