千文網(wǎng)小編為你整理了多篇相關的《大數(shù)據(jù)崗位職責和要求培訓(范文五篇)》,但愿對你工作學習有幫助,當然你在千文網(wǎng)還可以找到更多《大數(shù)據(jù)崗位職責和要求培訓(范文五篇)》。
第一篇:大數(shù)據(jù)架構(gòu)師的崗位職責
1)負責公司軟件產(chǎn)品整體架構(gòu)的設計和關鍵功能實現(xiàn)
2)負責公司架構(gòu)長期看護以及優(yōu)化;
3)負責軟件部門各模組間的協(xié)調(diào)配合;
4)提高鞏固軟件代碼質(zhì)量;
5)負責大數(shù)據(jù)流式框架的設計、優(yōu)化及部署;
6)規(guī)劃研發(fā)部門員工的技術發(fā)展路線并提供必要的幫助和指導
第二篇:數(shù)據(jù)開發(fā)崗位職責
1、負責大數(shù)據(jù)平臺的`基礎環(huán)境搭建與性能優(yōu)化,完成平臺的構(gòu)建與維護、實時流計算平臺、分布式調(diào)度、可視化報表等平臺的架構(gòu)與研發(fā);
2、對各種開源框架進行深入的代碼剖析和優(yōu)化;
3、參與大數(shù)據(jù)技術方案評審;
4、指導初中級大數(shù)據(jù)工程師工作;
第三篇:大數(shù)據(jù)架構(gòu)師的崗位職責
職責:
1、負責公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設計,包含數(shù)據(jù)收集、數(shù)據(jù)存儲、數(shù)據(jù)應用,并完成相關架構(gòu)設計文檔的撰寫;
2、參與規(guī)劃從數(shù)據(jù)源到數(shù)據(jù)應用的整體流程,并參與相關產(chǎn)品的決策;
3、負責解決核心技術問題,對技術方案進行決策;
4、負責大數(shù)據(jù)研發(fā)團隊建設、人才梯隊培養(yǎng)和技術團隊管理;
5、積極了解業(yè)界發(fā)展,研究與跟蹤大數(shù)據(jù)新技術發(fā)展方向。
任職要求:
1、精通GoldenGate For BigData相關理論,具備大型數(shù)據(jù)利用的生產(chǎn)實戰(zhàn)經(jīng)驗;
2、精通數(shù)據(jù)驅(qū)動的理論,設計并生產(chǎn)上線相關數(shù)據(jù)驅(qū)動的產(chǎn)品;
3、精通常用消息中間件的使用,例如kafka/RocketMQ/Apache Pulsar,有解讀相關源碼者優(yōu)先;
4、掌握hadoop、spark生態(tài)體系相關產(chǎn)品的使用,掌握MapReduce編程或Spark編程;
5、了解傳統(tǒng)數(shù)據(jù)倉庫理論及相關ETL工具,例如kettle/datastage;
6、熟悉Oracle、Mongodb、Mysql數(shù)據(jù)庫的使用;
7、扎實的Java語言基礎,熟悉Java開發(fā)工具和調(diào)試工具的使用;
8、良好的團隊協(xié)作精神,有能力對團隊在軟件設計、實現(xiàn)和測試方面進行指導;
9、良好的邏輯分析能力和溝通能力,執(zhí)行力強、對待工作認真嚴謹、責任心強、具備出色的學習能力和團隊合作精神,有一定的推動能力;
10、計算機科學、信息技術或相關領域本科以上學歷,具有5年以上數(shù)據(jù)平臺項目開發(fā)經(jīng)驗,3年以上的架構(gòu)設計經(jīng)驗,具有大數(shù)據(jù)平臺應用大型項目架構(gòu)設計經(jīng)驗優(yōu)先;
第四篇:大數(shù)據(jù)架構(gòu)師的崗位職責
職責:
1、負責大數(shù)據(jù)開發(fā)團隊建設;
2、負責行業(yè)大數(shù)據(jù)產(chǎn)品架構(gòu)設計與研發(fā);
3、負責帶領團隊進行行業(yè)大數(shù)據(jù)產(chǎn)品關鍵技術攻關。
任職要求:
1、有三年以上大數(shù)據(jù)應用、開發(fā)經(jīng)驗;具備海量數(shù)據(jù)加工處理(ETL)相關經(jīng)驗,對數(shù)據(jù)挖掘及機器學習有較為深刻的理解;
2、熟悉Hadoop相關技術,對HDFS、MapReduce、Hive、HBase有一定的使用和開發(fā)經(jīng)驗;
3、熟悉Linux,熟練使用Shell或Python,進行腳本編寫;
4、對數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)統(tǒng)計分析算法有較為深刻理解;
5、掌握至少一種主流關系數(shù)據(jù)庫開發(fā)技術:Oracle、SQL Server、MySQL等;
6、掌握實時流計算技術,有Spark、Storm開發(fā)經(jīng)驗者優(yōu)先;
7、需要具備2年以上研發(fā)團隊管理經(jīng)驗。
第五篇:數(shù)據(jù)開發(fā)崗位職責
1.有獨立工作能力,工作踏實認真,以及較強的團隊協(xié)作精神。
2.負責日志大數(shù)據(jù)平臺的搭建和規(guī)劃;
3.在總體架構(gòu)設計下,完成日志大數(shù)據(jù)產(chǎn)品的.設計、搭建、維護和調(diào)優(yōu),技術文檔的編寫與維護;
4.參與業(yè)務日志的大數(shù)據(jù)分析;
5.及時反饋開發(fā)中遇到的難點問題,溝通并尋求解決方案,按階段有計劃地完成開發(fā)任務