大資料開發工程師的崗位職責（精選19篇）

大資料開發工程師的崗位職責 篇1

職責:

1、負責所分管團隊的團隊建設和日常管理工作;

2、負責核心技術問題攻關和效能優化，持續維護和引進最新的大資料技術到城市大資料平臺中，支撐城市級大資料平臺業務;

3、承擔城市資料標準編制和資料模型的設計;

4、承擔專案中資料相關方案設計及資料團隊管理;

5、參與城市大資料專案中資料採集、加工過程、分析挖掘模型演算法的實施工作。

任職資格:

1、1年以上資料開發工作經驗，熟練使用SQL查詢引擎;

2、熟悉Hadoop、Mpp、Oracle等至少一種資料倉庫工具

3、具備良好的程式語言基礎如：java/python/scala/c++/shell等

4、二本以上學歷，計算機相關專業或者有相關培訓經歷者優先

5、 個人素質要求：目光長遠、態度誠懇、崗位有穩定性，能夠長期培養、具備很強的自學能力、承壓能力強、接受出差支援專案等工作。對資料工作具備濃厚的興趣並有明確職業規劃，優秀的學習能力和團隊溝通協作能力，對新技術有濃厚興趣並有鑽研精神。

大資料開發工程師的崗位職責 篇2

職責：

1、負責資料分析、加工、清理，相關處理指令碼和程式的開發;

2、負責開發大資料工具，如報表平臺、多維度分析工具、ETL平臺、排程平臺的研發;

3、負責分散式大資料平臺應用開發(Hadoop/Spark/Hive/HBase等);

4、負責大資料相關平臺的維護、優化。

任職要求：

1、本科及以上學歷，計算機相關專業，具有5年及以上的大資料ETL或資料開發經驗，熟悉大資料元件的維護以及調優;

2、熟練掌握Java或Python程式語言，熟悉大資料架構體系，熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技術中的一個或者多個，熟悉Sqoop、DataX等資料匯入工具;

3、能熟練使用Hive、HBase、Spark等加工和處理資料，有海量資料處理經驗;

4、有資料倉庫開發經驗/BI系統開發經驗優先;

5、有電商行業資料處理與分析平臺開發經驗者優先。

大資料開發工程師的崗位職責 篇3

職責：

1、從事Hadoop、Spark、Hbase、hive等分散式大資料產品的設計和開發;

2、針對部門大資料業務進行大資料分析、挖掘等產品應用的開發;

3、大資料平臺各類資料業務抽象及模型化;

4、參與大資料管理平臺的開發及維護;

5、負責大資料平臺數據及相關的應用開發，調優及維護;

6、為專案相關開發人員提供大資料技術指導及解決大資料平臺應用中遇到的技術難題;

7、良好的團隊合作與溝通能力。

任職要求：

1、本科及以上學歷，2年以上大資料應用開發經驗;

2、具備Java、Python、Scala其中兩種語言的開發經驗;

3、瞭解泛Hadoop大資料生態圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術，並有實際的專案開發經驗，有相關原始碼研究者優先;

4、具備ETL開發與運維能力，有Flume、kettle經驗優先;

5、熟悉大資料平臺的搭建過程，熟悉資料處理流程，有TB級以上資料處理經驗優先，有實時資料處理經驗者優先;

6、熟悉離線和實時資料處理流程，熟練使用Spark，Flink處理TB級資料優先;

7、熟悉Linux系統環境，有shell等指令碼編寫經驗，熟悉Mysql、PostgreSql、Oracle等常用關係資料庫，熟練編寫SQL語句;

8、熟悉Yarn,Kubernetes,Azkaban等資源排程框架者優先;

9、熟悉Datax的二次開發，並有實際開發經驗優先。

大資料開發工程師的崗位職責 篇4

職責

1、負責基於hadoop/spark生態系統、億級別資料的全文檢索，搜尋引擎的產品研發;

2、基於海量使用者行為資料和其他資料，分析和研究資料與實際業務的關聯關係，並與實際業務應用相結合開發;

3、負責大資料分析需求設計和開發，承擔資料抽取、清洗、轉化等資料處理程式開發。

任職要求：

1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技術及其生態圈，具備相關專案開發經驗，有資料實時計算專案經驗優先;

2、有搜尋引擎全文檢索開發經驗 ，如：elasticsearch、solr;

3、熟悉python、R任意一門開發語言;

4、有SAAS，PAAS企業級應用平臺或者網際網路，金融等大型應用平臺開發經驗優先考慮;

5、 本科及以上學歷，計算機/軟體工程/統計學/數學等相關專業，網際網路/金融等行業3年以上工作經驗;

6、擁有良好的程式碼習慣，要求結構清晰、命名規範、邏輯性強、程式碼冗餘率低，程式碼註釋清晰;

7、熟悉使用svn，禪道等專案管理工具，有良好的團隊協作開發經驗.

大資料開發工程師的崗位職責 篇5

職責：

1、依據客戶需求完成大資料專案的資料分析及建模;

2、進行大資料核心演算法的編寫;

3、參與專案的需求分析、系統設計、編碼工作;

4、參與開發過程中相關新技術的研究和驗證。

5.協助承擔架構性的體系設計和改造工作，配合制定技術實施方案，按照總體設計組織子系統的設計和開發。

任職要求：

1、精通資料建模、資料體系建設，具備資料倉庫架構設計、模型設計和處理效能調優等相關經驗;

2、具有豐富的基於hadoop體系的資料平臺、資料倉庫建設經驗，精通基於hadoop原始碼的開發、優化改造及成功應用案例;

3、精通hadoop生態體系各項技術，如kafka、flume、hive、impala、hbase、spark等，具有100+節點hadoop叢集的開發、運維經驗;

4、具有對大型hadoop叢集的硬體規劃能力;

大資料開發工程師的崗位職責 篇6

職責：

1、根據產品設計文件和UI原型，利用HTML5相關技術開發移動端的web前端頁面;

2、基於HTML5.0標準進行頁面製作，編寫可複用的使用者介面元件;

3、持續的優化前端體驗和頁面響應速度，並保證相容性和執行效率。

崗位要求：

1、計算機或相關專業專科及以上學歷，1年以上的HTML5開發經驗;

2、具有獨立完成前端開發工作的能力;

3、熟悉移動端的前端開發、多瀏覽器相容及移動端機型適配方式;

4、熟練掌握web系統開發技術，熟悉javascript、jquery、CSS3、HTML5、Ajax，能快速定位解決瀏覽器相容性問題;

5、熟悉常見頁面佈局方式，移動端響應式頁面佈局方式，熟悉css效能優化方式。

大資料開發工程師的崗位職責 篇7

職責：

1、 參與軟體自動化測試等系統的開發、測試等過程，負責工程中主要功能的程式碼實現。

2、 具有良好的協調、溝通能力，並能夠根據規劃需求制定相關技術與產品的解決方案。

3、 研究新技術，積極進取，對新技能容易上手。

4、 協助專案經理完成系統的構建和運維。

5、 服從公司的工作安排。

技能要求：

1、本科或以上學歷，計算機相關專業，3年以上Java開發工作經驗。

3、熟練使用 Java後端開發語言和技術框架：Spring Boot、Spring Data、Spring MVC等技術。

4、熟悉J2EE技術架構體系，具備面向物件設計思維與能力。

5、熟練使用JavaBean、Servlet、Jsp、WebService等開發技術。

6、具有強烈的責任心和良好的溝通能力，優秀的團隊合作精神，抗壓能力強。

7、有微服務DevOps模式開發經驗優先，有ext js專案開發經驗優先，有解決跨域問題的經驗優先。

大資料開發工程師的崗位職責 篇8

職責：

1、參與銀行、支付、保險等系統的開發工作;

2、參與需求分析，系統設計和開發等各項工作;

3、能按時、獨立、高質量的完成工作，對自己的程式碼嚴格要求;

4、能指導初級程式設計師工作，並負責CodeReview;

5、能解決複雜的技術問題;

任職要求：

1、3-5年JAVA實際開發經驗，計算機相關專業大專以上學歷(硬性要求：學歷必須學信網可查)

2、熟悉Java主流框架，能夠獨立完成功能模組設計和開發;

3、掌握HTML、JavaScript、CSS、Ajax、JQuery等前端技術;

4、熟悉Oracle、MySql等主流資料庫的使用，熟悉儲存過程及SQL的效能優化;

5、熟悉Tomcat、JBoss等應用伺服器的應用部署和配置，有Linux操作經驗;

6、具備良好的表達和溝通能力，能很好的融入團隊工作;

7、有銀行、支付、保險等相關係統開發經驗優先;

大資料開發工程師的崗位職責 篇9

職責：

1、負責保理業務系統的需求設計、開發、測試驗收和升級完善。

2、負責與軟體系統開發商對接，制定專案計劃，合理控制專案實施進度，確保按時、高質量的完成符合業務需求和高質量的產品;

3、負責對應用運維崗位人員的進行培訓、協調解決使用中遇到的技術問題。

任職資格：

1、3年左右保理、供應鏈金融、小貸網貸系統等開發經驗;

2、有熟悉新技術和成熟技術，對系統在金融業務應用方面有較深入的瞭解;

3、熟悉金融業務系統架構，具有較強的使用者需求分析能力和系統研發能力;

4、有金融公司系統運維經驗，對銀行業務較熟悉，有在金融機構工作的經歷，懂金融保理業務更佳。

大資料開發工程師的崗位職責 篇10

職責：

1.獨立完成專案的系統分析、設計、並主導完成詳細設計和編碼的任務，確保專案的進度和質量;

2.針對業務，進行資料庫設計和優化;

3.時刻關注並學習新技術，並能夠在實踐中應用，帶領後端團隊共同進步，完成每月的常規釋出任務;

4.能夠帶領團隊解析需求，商討具體開發方案，對技術團隊的開發質量把關 。

任職要求：

1.3-5年java開發經驗，java基礎紮實，熟悉I/O、多執行緒、集合等基礎框架。

2.熟悉linux、虛擬化以及容器技術及雲服務的發展方向。

3.熟悉web開發、熟練使用Spring家族框架。

4.精通使用常用的設計模式。

5.責任心一定要強，逆商要高。

6.能接受保險專案的外包(工作地還是在本公司)。

7.要有一定的管理、協調能力，能夠迅速定位問題並推進直至解決。

大資料開發工程師的崗位職責 篇11

1.依據產品需求完成高質量的Web前端開發和維護;

2.對具體的產品進行效能優化，實現極致的Web載入、執行和渲染時間;

3.在理解前端開發流程的基礎上，結合前端實際建立或優化提升工作效率的工具;

4.負責微信開放平臺和騰訊雲相關應用的開發;

5.在理解產品業務的基礎上，結合前端技術建立或優化Web的互動方式。

6.負責H5和android/ios原生程式碼的對接和開發。

大資料開發工程師的崗位職責 篇12

職責：

1、負責電商平臺Java Web系統的開發編碼工作;

2、負責重點難點技術問題的研究及解決，編寫較規範和高質量的設計文件;

3、對國中級開發人員提供技術上的指導，幫助專案組成員進行詳細設計和開發。

任職要求：

1、計算機或相關專業優先;

2、三年以上JAVA研發和軟體設計經驗;

3、熟練html5、javaScript,jquery等web前端技術;

4、參與過大中型專案的核心功能開發工作，有良好的系統規劃能力，制定系統架構，編寫技術規範和專案開發文件;

5、熟悉SpringBoot、SpringCloud、SpringMVC、MyBatis、hibernate等開源框架;

6、熟悉MySQL、Oracle或NoSQL資料庫技術，熟悉SQL調優機制，有大型資料庫軟體開發經驗者優先;

7、熟悉分散式、快取、訊息、資料分析等工作機制，具有大型分散式、高併發、高負載、高穩定性的系統設計開發經驗優;

8、表達能力好，思維清晰敏捷，工作認真負責，善於學習、具有分析、解決問題的能力，創新意識強，有團隊精神;

9、有參與過醫藥行業專案經驗優先。

大資料開發工程師的崗位職責 篇13

職責：

1)負責後臺系統的研發，及時解決專案涉及到的技術問題。

2)參與架構設計、方案討論和技術調研;

3)參與系統需求分析與設計，負責完成核心程式碼編寫，介面規範制定

4)帶領3至4人團隊，進行日常開發和測試工作，解決開發中的技術問題;

崗位要求：

1)計算機相關專業畢業，精通spring框架，閱讀過spring原始碼，熟悉其事務機制

2)有良好的編碼習慣及嚴謹的邏輯思維，熟悉GIT等版本管理軟體

3)熟練掌握Spring、SpringMVC、mybatis、JavaScript、JQuery、CSS3、XML、AJAX等知識，能夠靈活運用

4)熟悉軟體設計流程和軟體工程規範，具備編寫良好而規範的設計和技術文件的能力

5)資料建模經驗豐富，能夠獨立完成單個專案的資料建模工作

6)熟悉Oracle、sql server、mysql等大型資料庫一種或多種，熟練編寫SQL語句及sql優化，能夠跟蹤診斷典型的線上問題

7)對技術有激情，喜歡鑽研，能快速接受和掌握新技術，有較強的獨立、主動的學習能力，良好的溝通表達能力和團隊協作能力。

大資料開發工程師的崗位職責 篇14

1、從事軟體產品模組的功能設計、資料庫設計工作；

2、從事軟體功能的程式碼開發及測試；

3、從事專案在現場環境的安裝、部署與除錯；

4、從事專案開發過程所需的文件編寫工作。

大資料開發工程師的崗位職責 篇15

職責：

1.電商平臺技術架構設計和系統框架搭建;

2.電商平臺核心程式碼編寫，注重編碼規範和系統性能;

3.搭建小程式訂單系統+即使通訊系統，有關商城及即時通訊經驗優先考慮。

4.參與開發過程的程式碼設計、稽核和檢查。

職位要求：

熟練掌握PHP開發語言;熟悉PHP/Ajax/JavaScript/XML/Webservice;

對B2B,B2C等電商平臺系統有深入的瞭解，有過1個以上電商平臺系統的開發經驗，並帶領過專案組完成過至少一個電商平臺系統的開發工作;

掌握架構設計理論，實踐，掌握多種可重用架構機制和模式，掌握流行技術框架和工具;

有大型分散式專案開發經驗、微服務架構經驗優先、有高併發的系統核心研發經驗優先。熟悉入口網站的基本系統架構，對內容釋出系統、視訊直播點播技術、網站統計分析系統、網站電子商務系統有深入瞭解;

有良好的溝通能力，具有跨部門協作的經驗、推進能力強，責任心強;

熟練掌握快取技術，網站優化，伺服器優化，分散式叢集技術，負載均衡，訊息中介軟體等;

掌握PHP及MVC架構技術，具備在Linux平臺下使用PHP開發網站的經驗，可在伺服器系統配置php+mysql執行環境;

具有PHP快取技術、靜態化設計方面的經驗;

學習能力強, 能快速上手新接觸的技術. 積極挑戰技術難題, 積極向上, 有團隊合作精神.

大資料開發工程師的崗位職責 篇16

職責:

1. 設計並開發持續交付、資產管理、系統監控等自動化運維平臺;

2. 負責運維平臺和相關運維工具的開發;

3. 提高自動化運維水平、故障響應能力、提升迭代效率、降低運維人力成本;

4. 運維相關的新技術的研究。

任職資格:

1. 計算機相關專業專科(以上)畢業，3-5年以上的工作經驗。(大型網際網路企業背景優先);

2. 有一定實際運維工作經驗，具有Linux系統管理基本知識和1年以上實際開發經驗;

3. 掌握shell/python/perl/php其中一種指令碼語言;

4. 掌握Javascript、CSS、html前端開發。

大資料開發工程師的崗位職責 篇17

1、 負責醫療器械裝置的機械方案設計、專案評估;現有儀器裝置的改進設計;

2、 完成相關圖紙繪製、3D模型及加工圖紙的轉化、設計資料的輸出;機械相關零部件的選型、採購清單的編制與輸出;

3、 製作裝置的機械BOM表;

4、 產品的安裝、除錯及驗證。

大資料開發工程師的崗位職責 篇18

職責：

1、公司產品無線線端web端的製作、開發和優化

2、根據設計稿,編寫靜態頁面和互動、特效等功能的指令碼程式

3、優化前端元件的靈活性和可擴充套件性

4、跟蹤研究前沿的前端技術,並應用到公司的產品開發當中

任職要求:

1、3-5年工作經驗,瞭解react框架前端技術,熟悉流行的前端ui庫，能夠設計開發工具型網站，如:碼工助手;

2、熟練掌握DIV+CSS網頁佈局,並且對模板化、模組化有一定理解,精通HTML/HTML5、CSS/CSS3等前端開發技術;

3、熟練掌握JavaScript語言核心技術DOM、Ajax、JSON等,對javascript框架(如react/jQuery/jq ui 等)有一定的經驗;

4、對css/JavaScript效能優化、解決多瀏覽器相容性問題有一定的經驗;

5、對無線端開發有一定經驗，能夠較好解決ios,Android端相容問題;

6、具備良好的責任心、邏輯思維強、善於交流和表達、較強的學習能力、優秀的團隊溝通與協作能力。

7、愛思考,溝通能力強。

大資料開發工程師的崗位職責 篇19

1. 精通PHP語言，能夠獨立開發中型專案，能夠協作開發大型專案

2. 精通MySql資料庫，能夠獨立搭建中型專案所需資料庫，能夠協作搭建大型專案 所需資料庫

3. 熟悉Linux系統，能夠進行簡單的伺服器配置，能夠獨立部署專案

4. 熟練使用svn等版本管理及團隊合作工具

5. 瞭解JavaScript，能夠編寫簡單的JavaScript程式碼

6. 瞭解CSS，能夠進行簡單的頁面佈局調整

7. 使用過多個PHP框架，瞭解Yii 2.0框架