千文網(wǎng)小編為你整理了多篇相關(guān)的《大數(shù)據(jù)專業(yè)崗位職責》,但愿對你工作學習有幫助,當然你在千文網(wǎng)還可以找到更多《大數(shù)據(jù)專業(yè)崗位職責》。
第一篇:大數(shù)據(jù)崗位職責
工作職責:
1、負責對原有大數(shù)據(jù)課程進行優(yōu)化
2、負責大數(shù)據(jù)相關(guān)新項目研發(fā)
3、關(guān)注大數(shù)據(jù)前沿技術(shù)研究,通過新技術(shù)帶動大數(shù)據(jù)課程
4、與學科交流課程方向,把握新技術(shù)帶來的新方向
任職資格:
1、本科以上學歷,3年以上java開發(fā)經(jīng)驗,3年以上大數(shù)據(jù)研發(fā)經(jīng)驗,能獨立完成大數(shù)據(jù)新技術(shù)研究
2、具有較強的`學習能力,創(chuàng)新能力,問題解決能力,計劃能力
3、具有較高的心理承受能力,全局意識和責任心
4、熟練掌握javaweb項目開發(fā)技術(shù),如ssh、ssm、js、mq、redis、zookeeper、dubbo等
5、熟練掌握hadoop、hive、storm、spark環(huán)境搭建
6、熟練掌握hdfs、mapreduce,storm,spark操作及其內(nèi)部原理機制
7、熟練使用sqoop、hive、oozie、hue、azkaban等工具的使用
8、熟練掌握腳本語言shell
9、對python具有一定的操作能力
10、熟知電商等互聯(lián)網(wǎng)系統(tǒng)的開發(fā)過程、運維過程、日志采集過程
11、熟練使用scala開發(fā)語言
12、對jdk、spark、hadoop、storm、rpc內(nèi)部源碼了解者優(yōu)先
第二篇:大數(shù)據(jù)架構(gòu)師崗位主職責
職責:
1.負責過多個大數(shù)據(jù)項目的架構(gòu);
2.精通Hadoop、Spark, HBase等主流的大數(shù)據(jù)平臺、精通各組件優(yōu)化設(shè)計原理;
3.精通大數(shù)據(jù)實時流式處理的設(shè)計和應用;
3.熟悉大數(shù)據(jù)平臺調(diào)優(yōu),具備大數(shù)據(jù)生產(chǎn)平臺調(diào)優(yōu)經(jīng)驗;
4.金融行業(yè),運營商行業(yè)大數(shù)據(jù)架構(gòu)經(jīng)驗更優(yōu);
5.研究大數(shù)據(jù)技術(shù)的最新發(fā)展,并引入到公司技術(shù)架構(gòu);
6.指導大數(shù)據(jù)工程師的日常工作,并培養(yǎng)技術(shù)骨干。
任職資格:
1.計算機相關(guān)專業(yè)本科或以上學歷;
2.具有5年以上大數(shù)據(jù)相關(guān)開發(fā)經(jīng)驗;
3.具有2年以上帶團隊經(jīng)驗
4.對Hadoop/Hive/Spark/HBase/ES等等大數(shù)據(jù)常用技術(shù)有深刻理解,能夠帶領(lǐng)團隊進行技術(shù)攻堅,完成中間件的實施、改造、調(diào)優(yōu);
5.精通海量數(shù)據(jù)和實時數(shù)據(jù)的分析處理,能對線上的數(shù)據(jù)處理性能問題做調(diào)優(yōu);
6.精通數(shù)據(jù)倉庫以及維度建模原理,有大型數(shù)據(jù)倉庫建設(shè)經(jīng)驗;
7.精通關(guān)系型數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫的使用,熟悉相關(guān)理論;
8.溝通順暢,重點突出,高效。
第三篇:大數(shù)據(jù)架構(gòu)師崗位的主要職責概述
職責:
根據(jù)大數(shù)據(jù)業(yè)務需求,設(shè)計大數(shù)據(jù)方案及架構(gòu),實現(xiàn)相關(guān)功能;
搭建和維護大數(shù)據(jù)集群,保證集群規(guī)模持續(xù)、穩(wěn)定、高效平穩(wěn)運行;
負責大數(shù)據(jù)業(yè)務的設(shè)計和指導具體開發(fā)工作;
負責公司產(chǎn)品研發(fā)過程中的數(shù)據(jù)及存儲設(shè)計;
針對數(shù)據(jù)分析工作,能夠完成和指導負責業(yè)務數(shù)據(jù)建模。
職位要求:
計算機、自動化或相關(guān)專業(yè)(如統(tǒng)計學、數(shù)學)本科以上學歷,3年以上大數(shù)據(jù)處理相關(guān)工作經(jīng)驗;
精通大數(shù)據(jù)主流框架(如Hadoop、hive、Spark等);
熟悉MySQL、NoSQL(MongoDB、Redis)等主流數(shù)據(jù)庫,以及rabbit MQ等隊列技術(shù);
熟悉hadoop/spark生態(tài)的原理、特性且有實戰(zhàn)開發(fā)經(jīng)驗;
熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先。
第四篇:大數(shù)據(jù)崗位職責
工作職責:
1、參與計算框架和服務的定制和改進,為公司批處理和流式計算能力提供支撐;
2、深入理解業(yè)務場景,解決性能瓶頸,實現(xiàn)業(yè)務目標;
3、計算、存儲和網(wǎng)絡方面基礎(chǔ)技術(shù)的探索和儲備。
任職要求:
1、精通各種性能分析和調(diào)試工具,高效進行分析;
2、熟練的c/c++/java開發(fā)能力,代碼質(zhì)量高;
3、熟悉網(wǎng)絡、linux、hadoop等系統(tǒng),能夠靈活解決新問題;
4、較好的.團隊協(xié)作和溝通能力。
第五篇:大數(shù)據(jù)架構(gòu)師崗位主職責
1.負責大數(shù)據(jù)平臺的開發(fā),管理;
2.負責ETL批量數(shù)據(jù)集成作業(yè)設(shè)計開發(fā)工作;
3.負責數(shù)據(jù)批處理作業(yè)調(diào)度工具的使用操作;
4.設(shè)計數(shù)據(jù)建模方案,對業(yè)務數(shù)據(jù)進行分析和建模;
5、負責平臺故障處理及性能優(yōu)化;
6、負責項目團隊技術(shù)培訓、指導;