日韩色色日韩,午夜福利在线视频,亚洲av永久无码精品,国产av国片精品jk制服丝袜

當前位置:網站首頁 >> 作文 >> 2022年大數據工程師的崗位職責(15篇)

2022年大數據工程師的崗位職責(15篇)

格式:DOC 上傳日期:2022-12-29 09:17:03
2022年大數據工程師的崗位職責(15篇)
時間:2022-12-29 09:17:03     小編:zdfb

范文為教學中作為模范的文章,也常常用來指寫作的模板。常常用于文秘寫作的參考,也可以作為演講材料編寫前的參考。那么我們該如何寫一篇較為完美的范文呢?下面我給大家整理了一些優秀范文,希望能夠幫助到大家,我們一起來看一看吧。

大數據工程師的崗位職責篇一

1.參與大數據平臺搭建以及項目技術架構。

2.數據分析,挖掘,模型具體的產品化;

3.根據產品需求,分析編寫和制定大數據相關解決方案

崗位要求:

1、計算機相關專業本科以上學歷,編程基礎扎實,有2年以上大數據開發經驗

2、熟悉hadoop生態和體系架構,熟悉flink、spark,hive等常用開源工具

3、熟悉flume,kakfa,scribe等日志收集體系

4、熟悉主流數據庫(oracle、postgresql、mysql、sql server)中的1種及以上,有較好的sql性能調優經驗

5、有數據倉庫etl經驗者優先

6、有用戶行為日志采集、海量數據處理、數據建模方面經驗者優先

7、有持續學習的能力;喜歡開源軟件,樂于知識分享;對工作認真負責;可以獨立承擔較大工作壓力

大數據工程師的崗位職責篇二

職責:

1、負責大數據平臺的基礎環境搭建與性能優化,完成平臺的構建與維護、實時流計算平臺、分布式調度、可視化報表等平臺的架構與研發;

2、對各種開源框架進行深入的代碼剖析和優化;

3、參與大數據技術方案評審;

4、指導初中級大數據工程師工作;

崗位要求:

1、計算機相關專業全日制??萍耙陨蠈W歷,具有3年或以上的分布式計算平臺研發工作經驗;

2. 對大數據相關組件:hadoop、spark、hbase、hive、flink、kafka、flume等架構與底層實現有深入理解,具備相應的定制和研發能力,尤其需要精通flink框架;

3. 具備構建穩定的大數據基礎平臺的能力,具備數據收集、數據清洗、數據倉庫建設、實時流計算等系統研發經驗;

4. 對技術有熱情,有不錯的數據思維和敏感度,有一定的數據分析能力優先,對深度學習、機器學習有一定的了解優先;

5. 工作有計劃性,責任心和執行能力強,具備高度的責任心、誠信的工作作風、優秀溝通能力及團隊精神。

大數據工程師的崗位職責篇三

職責:

1、大數據日志分析系統的設計,選型和開發;

2、配合各業務給予數據支持,對產品和運營數據總結和優化;

3、處理用戶海量數據,提取、分析、歸納用戶屬性,行為等信息,完成分析結果;

4、發現并指出數據異常情況,分析數據合理性;

5、公司大數據基礎架構平臺的運維,保障數據平臺服務的穩定性和可用性;

6、大數據基礎架構平臺的監控、資源管理、數據流管理;

7、基于數據分析的可預測的云平臺彈性擴展解決方案。

任職要求:

1、日志分析數據系統實際經驗;

2、3年以上互聯網行業研發經驗,有使用hadoop/hive/spark分析海量數據的能力;

3、掌握 hadoop、flume,kafka、zookeeper、hbase、spark 的安裝與調試;

4、熟悉大數據周邊相關的數據庫系統,關系型數據庫和 nosql。

5、掌握 linux 操作系統的配置,管理及優化,能夠獨立排查及解決操作系統層的各類問題;

6、有良好的溝通能力,具備出色的規劃、執行力,強烈的責任感,以及優秀的學習能力。

大數據工程師的崗位職責篇四

職責:

1、數字貨幣領域數據統計分析,負責數字貨幣量化投資策略的設計、管理以及實際投資運作

2、與交易員對接,制定切實可行的的策略測試計劃,開展新策略模型的開發和驗證

3、協助交易員進行交易、風險管理,并對實際交易結果進行量化的績效分析,推動交易自動化

4、上級交辦的其他工作

任職要求:

1、數學/計算機/金融專業畢業,有扎實的算法和機器學習的理論基礎

2、有量化實盤交易經驗,具備豐富的數學建模經驗及較強的數據處理能力優先

3、對金融市場的價格波動有獨特理解和深入的量化分析,具備一定對沖策略研究經驗;

4、對數字貨幣領域感興趣,結果導向;

5、有網頁抓取和爬蟲程序編寫經驗者優先。

大數據工程師的崗位職責篇五

職責:

1、負責數據分析、加工、清理、處理程序的開發;

2、負責數據相關平臺的搭建、維護和優化;

3、負責基于hadoop/spark/hive/kafka等分布式計算平臺實現離線分析、實時分析的計算框架的開發;

崗位要求:

1、本科學歷須211院校以上,碩士及以上學歷不限院校,計算機軟件及相關專業

2、熟悉java和scala語言、熟悉常用設計模式、具有代碼重構意識;

3、熟練使用hadoop、hbase、kafka、hive、spark、presto,熟悉底層框架和實現原理;

4、使用spark streaming和spark sql進行數據處理, 并具有spark sql優化經驗;

5、需要有至少2年開發經驗,有flink開發經驗優先;

6、學習能力強,喜歡研究新技術,有團隊觀念,具備獨立解決問題的能力。

大數據工程師的崗位職責篇六

職責:

1、 負責部門團隊技術人員培養,公司各平臺后端功能設計及優化;

2、 參與項目框架設計、系統分析及流程控制、溝通對接等工作;

3、 獨立或者分組進行針對項目需求的功能開發和優化;

4、 擁有良好的代碼習慣,要求結構清晰,命名規范,邏輯性強,代碼冗余率低;

5、 根據項目開發進度和任務分配,開發相應的應用模塊;

6、 根據需要不斷修改完善項目功能,參入核心代碼的編寫;

7、 負責核心模塊代碼研發工作,尤其服務端產品的架構分析、數據庫、算法策略設計及核心研發;

8、 確保代碼規范及代碼質量;

9、 遇到關鍵技術難題時,及時進行問題定位、解決方案設計及驅動落實;

任職資格:

1、 計算機相關專業本科及以上學歷,3年以上php開發經驗,大廠經驗優先;

2、 具有抓取開發經驗、mysql索引優化、查詢優化和存儲優化經驗、php緩存技術、靜態化設計方面的經驗,要求隨時隨地貫徹最優化開發的思想,所負責的項目須能承擔繁重的訪問壓力;

3、 精通php/mysql開發,精通memcache、squid、redis等緩存技術者優先;

4、 有大流量并發網站工作經驗,有創新思維并勇于挑戰新事物;

5、 具有大數據量、高訪問量、高并發網站設計開發經驗;

6、 熟悉掌握html、js 、css 等前端技術 ;

7、 具備良好的編程習慣,熟練掌握oop編程和常見設計模式 ;

8、 具備團隊開發經驗,熟練掌握svn 、git 等常見工具的使用 ;

10、 責任心強,良好的對外溝通和團隊協作能力,能承受工作壓力。

大數據工程師的崗位職責篇七

職責:

1、負責根據需求調研結果,進行功能設計、詳細設計;

2、負責需求和設計過程中相關文檔的編制;

3、負責核心代碼的編碼和單元測試;

4、對技術難點進行攻關,并負責知識發布和知識傳遞。

任職要求:

1、全日制公立本科以上學歷,計算機相關專業;

2、有3年以上基于j2ee b/s結構軟件的開發經驗;

3、熟悉html、javascript、ajax等相關web技術,熟練掌握jquery類庫;

4、熟悉servlet、jsp、javabean、xml等知識;

5、熟悉spring、springmvc、mybatis框架;

6、熟悉數據庫開發,熟悉oracle等;

7、有良好的學習能力、團隊協作能力,主動溝通能力;

8、愛崗敬業,服從指揮,認真負責;

大數據工程師的崗位職責篇八

職責:

1、負責軟件產品的研發工作;

2、負責系統分析、設計以及編碼工作,系統瓶頸分析及解決;

3、負責分析并處理系統故障;

4、負責系統重構以及新產品的研發。

任職資格:

1、計算機或相關專業本科及以上學歷;

2、5年以上j2ee實際項目的編程經驗;

3、有mysql等主流數據庫的實際應用經驗;

4、熟悉常用框架,如 struts2、springmvc、spring boot 、hiberante;

5、熟悉并熟練掌握多線程,大數據處理方面技術,以及 dubbo、mq、緩存等組件;

6、熟悉web前端開發,熟悉javascript、jquery、json、ajax、css+span、dhtml、xml等頁面處理技術;

7、通過svn進行團隊協作開發;

8、具備良好的溝通能力與獨立工作能力;

9、具備較強的學習能力和良好的工作效率。

大數據工程師的崗位職責篇九

職責:

1. 針對公司的監控系統進行二次開發,可根據后臺數據自研展示系統。

2. 負責公司云平臺系統的業務監控及可運維性、穩定性、高可用性問題,對云平臺各類故障和事務應急響應,配合廠商排查問題;

3. 根據業務需求,依托開源框架體系,進行運維自動化系統部署平臺整體或者子模塊的開發、設計、實現;

4. 開發并維護運維自動化腳本,簡化日常工作;

5. 負責云計算運維產品的性能調優;

6. 協助開發搭建測試平臺,協助進行設計、驗證測試等工作。

任職資格:

1. 大學本科以上學歷,計算機相關專業;

2. 熟悉linux/unix管理和運維以及網絡相關知識,至少2年以上linux使用經驗,有 linux 內核參數調優經驗者優先;

3. 精通python、shell或者java均可,至少3年以上的運維自動化開發經驗,可以靈活運用腳本程序來提高運維的效率;

4. 熟悉運維相關的監控工具,有使用類似cacti,zabbix的經驗,有對zabbix二次開發經驗的優先考慮;

5. 熟悉 openstack 云平臺日常運維操作及 neutron 網絡架構優先;

6. 熟悉 elasticsearch、spark 、hadoop等大數據平臺運維。

大數據工程師的崗位職責篇十

職責:

1、高效率高質量地完成web頁面和移動app的制作工作;

2、完成復雜的業務模塊的前端開發;

3、對已有功能的日常維護,以及生產問題處理、優化工作;

4、web前端表現層及與前后端交互的架構設計和開發;

5、與后端程序研發人員密切配合,高效率高質量地完成頁面及效果的實現工作;

6、javascript程序模塊開發,通用類庫、框架編寫;編寫開發及其他相關的工作流程文檔。

任職資格

1、兩年以上前端開發經驗,具備獨立承擔前端開發任務的能力 ;

2、具有兩個以上完整項目的開發實施經驗,代碼簡潔高效;

3、精通掌握html、javascript、ajax、css、jquery等web開發技術;

4、熟練掌握jquery及常用ui框架,能實現常用的ui交互效果;

5、熟練掌握html5+css3網頁制作技術,熟悉頁面架構和布局以及相關的細節;能夠熟練運用html5特性構建移動端的webapp;

6、熟悉w3c標準,熟悉各種瀏覽器差異及兼容性問題的解決;

7、具備較強的文檔編寫能力和良好的文檔規范性;

8、良好的語言表達能力、溝通能力、較強的學習能力,主動意識強,較好的團隊合作意識;

9、工作態度認真細致,考慮問題全面深入,有強烈的責任心和敬業精神。

大數據工程師的崗位職責篇十一

職責:

1. 負責web設計的前端開發工作,使用html/css/javascript開發pc和mobile項目;

2. 與ui設計師溝通交互、視覺設計的相關問題;

3、優化產品,為用戶提供更好的視覺操作體驗;

4、對具體的產品進行性能優化,實現極致的頁面加載、執行和渲染時間;

5、在理解前端開發流程的基礎上,結合前端實際建立或優化提升工作效率的工具;

6、在理解產品業務的基礎上,提升產品的用戶體驗,技術驅動業務的發展;

7、關注前端前沿技術研究,通過新技術服務團隊和業務;

崗位要求:

1、熟練運用html+css來制作符合w3c標準的靜態頁面,兼容各大瀏覽器(ie9+,chrome,safari,firefox,opera);

2、熟練掌握xhtml/html5/css/javascript前端技術,具有2年以上javascript編程經驗;

3、至少熟練使用一種js框架(如 jquery、backbone、angularjs、、 react),并有一定的項目經驗;

4、至少了解一種前端構建工具(如 fis3、gulp、grunt、web pack);

5、至少了解一門后端開發語言(java/.net/php/python/ruby);

6、熟悉web前端與后端交互數據接口定義,前端ajax實現json、xml格式的數據發送與數據解析;

7、具備良好的團隊協作精神,能利用自身技術能力提升團隊整體研發效率,提高團隊影響力;

8、對前端技術有持續的熱情,個性樂觀開朗,邏輯性強;

大數據工程師的崗位職責篇十二

職責:

1.負責oracle、sqlsever等數據庫的實時數據處理、故障分析出來,性能優化等;

2.定位和解決數據集群組件性能和高可用問題,協助數據集群監控系統的開發;

3.深入探索業務數據,創造性的思考和發現問題,能夠提出有效解決方案,協助新項目的預研和開發,數據驅動業務,

4.負責公司內外部各數據的接入和清洗處理。

任職資格:

1、計算機相關專業,本科及以上學歷,1年以上hadoop開發經驗,對分布式計算理論有深刻理解。

2、熟悉linux開發環境,熟練java、scala編程,有良好的編碼習慣;

3、熟悉hadoop、hbase、hive、spark、kafka等系統相關技術原理與實現;

4、熟悉mysql、sql server、oracle開發環境,對sql語句相當熟練,具備sql調優能力;

5、有大數據運維相關經驗優先

6、具備良好的溝通能力、學習能力、分析解決問題能力;

7、英語熟練優先

大數據工程師的崗位職責篇十三

職責:

1、負責公司大數據平臺建設;

2、根據業務需求,制定數據倉庫和數據分析平臺的實施和持續更新;

3、攻克技術難關,保證大數據系統的穩定運行;

4、完成大數據產品的開發。

職位要求:

1、計算機相關專業全日制??萍耙陨蠈W歷,大數據相關經驗;

2、熟悉java或scala語言,熟悉spark,hadoop,kafka,hive,hbase,zookeeper等大數據相關技術;

3、精通sql語句并對redis,mongodb等nosql數據庫有一定經驗;

4、對于高并發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;

5、責任心強,工作踏實,有團隊協作精神,溝通能力強者優先。

大數據工程師的崗位職責篇十四

1、軟件的程序設計與代碼編寫。

2、有關技術方案、文檔的編寫,軟件單元的測試。

3、根據項目具體要求,承擔開發任務,按計劃完成任務目標。

4、配合系統分析人員完成軟件系統以及模塊的需求調研、需求分析。

5、完成軟件系統及模塊的編碼。

6、協助測試人員完成軟件系統及模塊的測試。

7、負責編制與項目相關的技術文檔。

8、根據項目具體要求,承擔大型網站設計與開發。

9、部分軟件功能模塊設計和軟件界面美化。

10、協助測試試人員完成軟件系統及模塊的測試。

大數據工程師的崗位職責篇十五

職責:

1.根據需求和設計,完成后端業務功能的開發和單元測試;

2.配合測試人員調查測試中發現的問題,并解決確認的問題;

3.協助調查生產環境中發現的問題,并協助指定修復方案和計劃;

4.與其他部門相關人員進行有效的溝通,持續提高產品開發質量和效率。

任職資格:

1. 本科以上學歷,計算機相關專業畢業,3年以上java開發工作經驗;

2. 熟悉spring mvc, mybatis等開源框架,熟悉微服務開發者優先;

3. 熟練運用mysql、sqlserver、tidb其中至少一種數據庫;

4. 熟悉rpc、kafka、rabbitmq、zookeeper者優先;

5. 熟悉unix/linux系統的常用命令者優先;

6. 具有責任心和敬業精神和良好的溝通能力,具備良好的團隊合作精神;

7. 具有工業物聯網、智慧型環保項目背景者優先。

全文閱讀已結束,如果需要下載本文請點擊

下載此文檔
a.付費復制
付費獲得該文章復制權限
特價:5.99元 10元
微信掃碼支付
已付款請點這里
b.包月復制
付費后30天內不限量復制
特價:9.99元 10元
微信掃碼支付
已付款請點這里 聯系客服