大數據開發工程師的具體職責（精選20篇）
大數據開發工程師的具體職責 篇1
職責:
1、 負責公司大數據平臺數據處理工具ETL、流處理平臺等建設，功能規劃，平臺演進，維護調優等;
2、 結合公司業務特征，負責公司數據倉庫規劃、數據倉庫建設、數倉管理等;
3、 負責大數據處理技術研究及新技術引進，參與超大規模實時/離線數據計算框架，存儲、查詢、可視化解決方案的設計，研發;
4、 負責公司業務數據倉庫模型建設及全業務數據域打通;
5、 負責BI報表和可視化項目，和客戶深度溝通，理解客戶的業務挑戰，提供解決方案，制定開發計劃并執行，支持各單位日常數據需求和任務;
任職資格:
1、 熟練掌握關系型數據庫,例如：Oracle、Mysql、Vertica等;熟悉NoSql數據庫，例如HBase、Redis、MongodDB等;具備豐富的數據庫管理和運維調優經驗;
2、 熟悉數據倉庫領域知識和技能者優先，包括但不局限于：元數據管理、數據開發測試工具與方法、數據質量、主數據管理，數據打通等;
3、 有從事分布式數據存儲與計算平臺應用開發經驗，熟悉Hadoop生態相關技術并有相關實踐經驗著優先，如Hdfs、Mapreduce、Hive、Hbase、Spark、Storm;
4、 精通數據預處理、檢驗、清洗、分析方法，精通各種常用統計檢驗方法;熟練掌握一門或多門編程語言，并有大型項目建設經驗者優先，如Java、Python、Shell和scala等;
5、精通Linux，熟悉日常運維、搭建常見服務器、定位解決日常問題的能力，具備ETL開發經驗優先;
6、 良好的語言溝通與表達能力，有豐富的數據開發經驗，較強的數據、平臺、技術理解能力;
7、 具備數學類、計算機類等相關專業統招本科及以上學歷，具有3年及以上大數據開發工作經驗，有互聯網行業背景優先。
大數據開發工程師的具體職責 篇2
職責：
1、本崗位培養方向為證券基金行業數據架構師;
2、輔助大數據架構師制定項目開發流程、規范，輔助數據模型設計人員進行模型設計;
3、輔助技術架構師進行大數據平臺調優(業務邏輯角度);
4、負責大數據平臺開發，包括數據抽取、轉換和加載;
5、負責控制數據需求、管理項目開發進度，配合QA完成項目質量管理;
職位要求：
1、2年以上證券或者基金行業數據中心、大數據平臺建設經驗;
2、具備較強的學習能力，對數據模型和大數據技術有濃厚的興趣;
3、熟練掌握基于ORACLE或MPP數據庫或Hadoop等開發技術;
4、至少掌握一種ETL開發工具。如：Informatica、DataStage、SSIS、Kettle等;
5、良好的團隊合作精神、公司提供優厚待遇。
大數據開發工程師的具體職責 篇3
職責：
1、大數據的分布式采集與環境搭建和測試;
2、大數據存儲、處理和分析工作;
3、大數據相關產品線的改進和相關核心開發工作;
4、其他大數據相關工作。
任職要求：
1、本科及以上學歷，計算機相關專業;
2、2年以上Java開發及大數據相關開發經驗，java基礎扎實，熟練掌握多線程、集合、緩存、序列化、nio等技術;
3、熟悉Linux環境，熟悉Linux shell/python/perl任一腳本;
4、熟悉Hadoop、Spark、ZooKeeper等主流的大數據處理架構，并有1年以上Hadoop相關的實際開發、架構及調優經驗;
5、使用過阿里云;
6、熟悉架構;
7、具有較好的學習能力、溝通表達能力及團隊合作能力。
大數據開發工程師的具體職責 篇4
職責
1. 負責大數據分析需求設計和開發工作，包括數據存儲、預處理、查詢、統計、實時分析、數據優化及配置等功能;
2. 對大數據分析系統存在的問題進行跟蹤和定位并及時解決;
3. 負責上級交辦的其他相關工作。
崗位要求：
1. 本科以上學歷，2年以上工作經驗;
2. Java基礎扎實，熟練使用Java IDE 進行代碼編寫和調試，熟悉JUnit單元測試框架;
3. 熟悉Linux操作系統，能在Linux上完成開發、調試工作;
4. 熟悉網絡IO、多線程并發編程、集合等基礎框架，精通數據結構和數據算法;
5. 參與過分布式高性能服務的設計開發過程，有大規模分布式系統的實踐經驗;
6. 熟悉數據庫操作和使用的基本技能，熟練一種關系型數據庫的使用;
7. 能獨立編寫詳細設計文檔;
8. 有大數據分析工具Hadoop、spark使用開發經驗優先;
9. 具有團隊精神與敬業精神，學習鉆研能力強，具有良好的協調溝通能力。
大數據開發工程師的具體職責 篇5
職責：
1、在hadoop平臺進行hive/hbase/spark開發;
2、處理公司大數據平臺產品的技術工作，包括存儲、處理、分析、挖掘、架構設計、研發工作;
3、熟悉設計、構建和優化基于hadoop/Hbase的存儲平臺架構;
4、熟悉整體提升hadoop/Hbase/Storm/Spark集群的高可用性、高性能、高擴展特性;
5、部門相關工作。
崗位要求：
1、計算機等相關專業大專及以上學歷;
2、3年以上軟件開發經驗，精通Java開發，至少2年以上Hadoop相關開發經驗;
3、熟悉分布式系統、分布式計算系統的工作機制，具有大規模數據平臺，高并發大型系統，大數據等架構設計和開發經驗;
4、熟悉sqoop、Hive、hbase、spark等大數據生態組件;
5、精通linux shell和sql腳本;
6、有java web開發經驗者優先;
7、良好的團隊精神和溝通能力，很強的邏輯思維能力和學習能力。
大數據開發工程師的具體職責 篇6
職責：
1. 參與軟件產品設計、開發、實施和維護，保證設計合理、應用技術得當。
2. 進行單元測試，確保功能穩定，性能優異，保證開發工作高質量完成。
3. 參與軟件設計的重構、優化，保證產品的可迭代、可維護性。
4. 參與軟件設計文檔的起草和完善，保證文檔及時更新。
任職要求：
1. 本科及以上學歷。
2. 有3年以上Java Web開發工作經驗;有高訪問量，高負載網站系統開發經驗者優先。
3. 熟悉Spring、Spring Boot、SpirngMVC，Mybatis/iBatis、Maven及前端Html5/CSS/Javascript等。
4、JAVA基礎扎實，理解IO、線程、集合等基礎框架，對JVM原理有一定的了解。
5、熟悉分布式、多線程及高性能的設計與編碼及性能調優。
6、熟悉Linux下的常用命令。
7、熟悉Mysql/Oracle等數據庫的開發和數據庫的維護。
8、有電力行業或軌道交通行業應用開發經驗者優先。
大數據開發工程師的具體職責 篇7
職責：
1.參與大數據平臺搭建以及項目技術架構。
2.數據分析，挖掘，模型具體的產品化;
3.根據產品需求，分析編寫和制定大數據相關解決方案
崗位要求：
1、計算機相關專業本科以上學歷，編程基礎扎實，有2年以上大數據開發經驗
2、熟悉Hadoop生態和體系架構，熟悉Flink、Spark，Hive等常用開源工具
3、熟悉Flume，kakfa，scribe等日志收集體系
4、熟悉主流數據庫(Oracle、postgresql、Mysql、Sql Server)中的1種及以上，有較好的SQL性能調優經驗
5、有數據倉庫ETL經驗者優先
6、有用戶行為日志采集、海量數據處理、數據建模方面經驗者優先
7、有持續學習的能力;喜歡開源軟件，樂于知識分享;對工作認真負責;可以獨立承擔較大工作壓力
大數據開發工程師的具體職責 篇8
1.負責公司移動端Android的軟件系統架構分析、設計及實現;
2.分析業務需求，參與系統設計與開發;
3.參與公司前端技術架構和關鍵技術的攻關;
4.參與項目設計與編碼實現,跟蹤并研究Android新技術的發展，并將成果實際應用到產品中;
5.對開發代碼進行調試及測試，修復測試發現代碼缺陷，確保質量;
6.參與團隊未來技術方向研究與制定。
大數據開發工程師的具體職責 篇9
1、按時間節點完成項目經理交辦的項目開發任務;
2、配合同事完成項目進度中的節點任務;
3、完成項目經理交辦的其它各項任務。
大數據開發工程師的具體職責 篇10
職責：
負責所屬模塊詳細設計文檔撰寫、編碼、單元測試等工作;
嚴格遵守團隊的代碼格式、結構的規定，編寫易讀、易維護、高質量、高效率的代碼;
負責業務架構設計和實現;
負責公司官網的程序維護及服務器維護;
帶來技術團隊做好開發任務;
職位要求
5年以上服務端開發經驗;
精通PHP(THINKPHP)有大型項目架構能力;
精通php開發語言，了解php的性能最優化和安全最大化;
精通 數據庫開發，熟悉讀寫分離，數據縱向橫向劃分，查詢效率;
熟悉LINUX服務端分布式架構，APACHE,REDIS,MYSQL等(阿里云產品);
有項目領導能力，分配任務，項目安全，上線部署;
大數據開發工程師的具體職責 篇11
職責：
1、參與項目需求分析及功能模塊的設計工作;
2、根據工作進度和任務分配，開發相應的軟件模塊;
3、負責產品的日常維護工作，跟蹤解決用戶的問題和故障;
4、根據項目需要，學習新的開發語言，如Delphi;
5、完成領導安排的其它項目工作。
崗位要求：
1、統招二本以上，計算機相關專業;
2、英語四級，能閱讀英文資料;
3、有較強的自學能力和學習動力，愿意學習心的變成語言;
4、積極主動，責任心強;
大數據開發工程師的具體職責 篇12
職責：
1、服從公司的發展要求，配合公司的工作安排;
2、作為儲備工程師要認真學習和全面了解公司的相關情況和工作細節;
3、熟練掌握公司所應用的專業技術;
4、負責公司基本項目的開發;
5、參與公司所用技術的優化和升級;
任職要求：
1、對計算機編程語言有興趣;
2、吃苦耐勞，有一定的自我約束和控制能力，意志力堅強;
3、表達能力好，聽說能力強;
4，有志于從事互聯網以及移動互聯網行業，本科學歷，985,211學校畢業者優先考慮;
大數據開發工程師的具體職責 篇13
職責：
1、負責各類CI/CD環境的搭建與維護。
2、負責公司容器云平臺的實施，監測，故障定位等。
3、負載云平臺容器應用編排，提升公司產品的穩定性、安全性，協助優化產品性能。
4、開發適用于公司業務場景的相關運維工具。
相關要求
1、能熟練使用Kubernetes搭建生產和測試環境。
2、熟悉Docker/Kubernetes組件和生態，包含存儲、網絡、監控、日志、安全等。
3、熟悉常用工具如Git，Harbor，Helm，Jenkins安裝和使用。
4、熟悉Rancher/Kubespray等K8S安裝管理工具者優先
大數據開發工程師的具體職責 篇14
職責：
1、負責電商平臺Java Web系統的開發編碼工作;
2、負責重點難點技術問題的研究及解決，編寫較規范和高質量的設計文檔;
3、對初中級開發人員提供技術上的指導，幫助項目組成員進行詳細設計和開發。
任職要求：
1、計算機或相關專業優先;
2、三年以上JAVA研發和軟件設計經驗;
3、熟練html5、javaScript,jquery等web前端技術;
4、參與過大中型項目的核心功能開發工作，有良好的系統規劃能力，制定系統架構，編寫技術規范和項目開發文檔;
5、熟悉SpringBoot、SpringCloud、SpringMVC、MyBatis、hibernate等開源框架;
6、熟悉MySQL、Oracle或NoSQL數據庫技術，熟悉SQL調優機制，有大型數據庫軟件開發經驗者優先;
7、熟悉分布式、緩存、消息、數據分析等工作機制，具有大型分布式、高并發、高負載、高穩定性的系統設計開發經驗優;
8、表達能力好，思維清晰敏捷，工作認真負責，善于學習、具有分析、解決問題的能力，創新意識強，有團隊精神;
9、有參與過醫藥行業項目經驗優先。
大數據開發工程師的具體職責 篇15
職責：
1、按照項目計劃，配合產品經理，按時提交高質量代碼，完成開發任務;
2、及時反饋開發中遇到的難點問題，溝通并尋求解決方案，按階段有計劃地完成開發任務;
3、負責系統詳細設計和核心代碼編寫，參與設計評審;
4、負責部分技術攻關工作，協助架構師進行架構優化和代碼重構工作;
5、對系統進行單元測試編寫，并審核測試用例。
任職要求:
1、計算機相關專業，4 年以上工作經驗，具備扎實的Java語言基礎、有分布式,SaaS等架構設計和開發經驗優先考慮;
2、精通Spring、Spring MVC、Spring Security和MyBatis/Hibernate等，熟悉SpringCloud、Spring Boot和Spring Cloud 等開源框架;
3、熟練使用 GitLib、SVN、Maven 等其中至少一種代碼管理工具;
4、熟練掌握 SQL 語言，使用過 SqlServer、Mysql、Oracle 等其中至少一種數據庫;
5、熟悉Redis、RabbitMQ、fastDFS 等技術;
6、熟悉Linux下服務器環境部署和性能調優(包括Nginx、Tomcat等);
7、具備中大型項目的實際開發經驗, 具備微服務開發經驗者優先;
8、有強烈的責任心，優秀的表達能力及溝通能力，較強的學習和理解能力，思路清晰，善于思考，能獨立分析和解決問題。
大數據開發工程師的具體職責 篇16
l 參與數字礦區系統技術規劃、功能設計、功能實現，撰寫技術文檔;
l 負責數字礦區系統軟件及模塊功能開發工作;
l 負責數字產品開發;
l 完成領導交辦的其他任務。
大數據開發工程師的具體職責 篇17
1、根據客戶需求，在規定的工期與質量要求下，進行產品模塊級或功能級的設計與開發;
2、與開發上下游密切協作，不斷提升產品的品質，提升用戶體驗;
3、不斷提升個人技術能力，精通HR產品技術體系。
大數據開發工程師的具體職責 篇18
職責：
1、 與UI設計師、交互設計師、產品經理協作，分析并給出較優的移動界面前端結構解決方案和效果實現;
2、 與后臺開發工程師協作，完成各種數據交互、動態信息展現和用戶的互動;
3、 維護及優化移動端前端頁面執行性能和加載性能，優化前端代碼規范;
4、 負責解決產品在不同移動設備端及不同版本下的兼容問題;
5、 根據產品開發需要，配合相關人員完成產品各部分設計的更新和修改;
任職要求
1、 熟悉微信小程序開發，有實際項目經驗的優先;
2、 熟悉微信H5開發，了解微信jssdk;
2、 熟練運用HTML5、CSS3、Javascript/Jquery/zepto構建高性能的Web應用程序;
3、 熟練使用CSS3動畫，并有一定的項目經驗;
4、 熟悉前端相關標準，對前端語義化、瀏覽器兼容性問題有深入理解;
5、 良好的代碼習慣，結構清晰。命名規范，邏輯性強;
6、 良好的人際溝通與團隊創作能力，能夠按時完成安排的任務。
大數據開發工程師的具體職責 篇19
職責：
1)根據需求報告進行需求反講、代碼編寫。
2)完成系統中業務邏輯相對簡單的功能開發。
3)完成客戶功能、數標相關的功能優化。
4)完成開發經理安排的其他開發工作任務。
具備要求：
1)計算機、軟件類等相關專業，本科及以上畢業，1-2年工作經驗。
2)有3個以上項目經驗.
3)有扎實的java基礎知識，對編程有興趣愛好。
4)使用過spring、Mybatis等開源框架;
5)熟練使用sql語句的增、刪、改、查。
6)熟練掌握eclipse、pl/sql或svn。
7)使用過tomcat，熟悉tomcat基本操作。
8)有良好的學習、理解能力、溝通能力、邏輯思維能力。能夠虛心學習，上進心強。
9)，年齡在28歲以下。
大數據開發工程師的具體職責 篇20
職責：
1、負責Web產品前后端開發和項目定制開發;
2、負責UI/UE設計、技術實現，能獨立解決開發中的重難點問題;
3、負責對現有產品提供維護和支持，及時解決運行過程中出現的問題;
4、對分配的軟件功能模塊進行設計、編碼、維護，符合公司規定的規范要求;;
5、根據產品經理的策劃，完成產品的設計開發、代碼編寫，撰寫技術文檔和技術報告。
6、跟蹤新技術發展，并將其應用于產品中
崗位要求：
1、全日制本科以上學歷，計算機相關專業，3年以上相關開發工作經驗;
2、具備良好的計算機基礎、編程能力、分析能力，熟悉常見的數據結構和算法，對Html/Java語言有一定的了解;
3、熟練使用后端主流開源框架(Spring MVC/MyBatis)進行快速開發，以及熟悉Web前端開發技術(Html/Javascript/CSS)，熟悉流行的Web前端框架(JQuery/Bootstrap);
4、熟悉Oracle、MSSQL、MySQL至少一種主流關系型數據庫;
5、熟悉常用服務器的配置及維護和管理等工作;
6、有創業創新精神，抗壓能力強，具有良好的學習能力、語言表達能力、溝通能力