千文網(wǎng)小編為你整理了多篇相關(guān)的《大數(shù)據(jù)專業(yè)崗位職責》,但愿對你工作學(xué)習有幫助,當然你在千文網(wǎng)還可以找到更多《大數(shù)據(jù)專業(yè)崗位職責》。
第一篇:大數(shù)據(jù)架構(gòu)師崗位主職責
1、大數(shù)據(jù)平臺的規(guī)劃、設(shè)計、實施,并優(yōu)化數(shù)據(jù)庫;
2、對數(shù)據(jù)庫進行管理,負責數(shù)據(jù)庫應(yīng)用系統(tǒng)的運營及監(jiān)控;
3、對數(shù)據(jù)庫性能分析與調(diào)優(yōu),排錯,保證數(shù)據(jù)正確率;
4、配合其他部門進行的數(shù)據(jù)處理、查詢,統(tǒng)計和分析工作;
5、完成公司下達的項目開發(fā)任務(wù)。
第二篇:大數(shù)據(jù)崗位職責
職位描述:
1、負責基于hadoop、spark、mpp的大數(shù)據(jù)、數(shù)據(jù)倉庫構(gòu)架設(shè)計及開發(fā)工作;
2、負責理解業(yè)務(wù)數(shù)據(jù)需求,開展數(shù)據(jù)采集、存儲、管理、分析、建模及數(shù)據(jù)處理流程設(shè)計及開發(fā);
3、牽頭大數(shù)據(jù)庫開發(fā)工作,負責整體推進劑技術(shù)疑難問題的解決。
本職位為外包職位,外包到浙江華云信息科技有限公司,從事電力行業(yè)信息化工作。
第三篇:大數(shù)據(jù)崗位職責
工作職責:
1、根據(jù)公司數(shù)據(jù)分析需求進行基于hadoop平臺的項目開發(fā);
2、根據(jù)需求進行數(shù)據(jù)倉庫模型設(shè)計,熟練使用kettle工具進行etl程序的開發(fā);包括實時數(shù)據(jù)加工,計算,etl,管理,監(jiān)控等;
3、負責針對源系統(tǒng)進行數(shù)據(jù)抽取、處理、分析等相關(guān)工作,及項目中涉及到的`數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接口工作;
4、負責設(shè)計并優(yōu)化基于hive的數(shù)據(jù)倉庫的建設(shè);
5、制定數(shù)據(jù)庫備份和恢復(fù)策略及工作流程與規(guī)范。
6、能出具消費品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案,并落地。
任職資格:
1.從事數(shù)據(jù)倉庫領(lǐng)域至少2年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計與etl開發(fā)經(jīng)驗,具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理;
3.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察hive、hdfs、hbase;
4.熟練掌握kettlesqoop、datax、airflow等;
5.有消費品品牌制造、零售行業(yè)經(jīng)驗,尤其快消品行業(yè)和財務(wù)領(lǐng)域數(shù)據(jù)項目經(jīng)驗者優(yōu)先;
6.熟悉分布式計算presto/imapa優(yōu)先;
7.有實時計算方面的經(jīng)驗的優(yōu)先。