千文網(wǎng)小編為你整理了多篇相關(guān)的《大數(shù)據(jù)專業(yè)崗位職責(zé)(推薦6篇)》,但愿對(duì)你工作學(xué)習(xí)有幫助,當(dāng)然你在千文網(wǎng)還可以找到更多《大數(shù)據(jù)專業(yè)崗位職責(zé)(推薦6篇)》。
第一篇:大數(shù)據(jù)行業(yè)崗位職責(zé)
職位描述:
1、基于hive的數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、etl開(kāi)發(fā);
2、使用hive/flink等平臺(tái)進(jìn)行分析內(nèi)部及外部的數(shù)據(jù),配合業(yè)務(wù)團(tuán)隊(duì)進(jìn)行定量和定性分析,把數(shù)據(jù)轉(zhuǎn)化成為業(yè)務(wù)增值的信息;
3、探索、評(píng)估新的技術(shù)和解決方案,提高數(shù)據(jù)并行計(jì)算能力和運(yùn)行速度。
任職要求:
1、熟悉大數(shù)據(jù)相關(guān)技術(shù):kafka/flink/hadoop/druid/hbase等;
2、具備數(shù)據(jù)庫(kù)系統(tǒng)理論知識(shí),掌握主流數(shù)據(jù)庫(kù)管理和應(yīng)用,精通sql;
3、了解統(tǒng)計(jì)以及數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)、人工智能技術(shù),會(huì)使用關(guān)聯(lián)分析、分類預(yù)測(cè)、聚類分析等常用分析方法;
4、熟練使用java、python、php、go語(yǔ)言中的一種或者多種;
6、兩年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn),有高性能分布式平臺(tái)開(kāi)發(fā)經(jīng)驗(yàn),有電商行業(yè)經(jīng)驗(yàn)優(yōu)先。
第二篇:大數(shù)據(jù)架構(gòu)師崗位的主要職責(zé)概述
職責(zé):
1.負(fù)責(zé)產(chǎn)品級(jí)業(yè)務(wù)系統(tǒng)架構(gòu)(如業(yè)務(wù)數(shù)據(jù)對(duì)象識(shí)別,數(shù)據(jù)實(shí)體、數(shù)據(jù)屬性分析,數(shù)據(jù)標(biāo)準(zhǔn)、端到端數(shù)據(jù)流等)的設(shè)計(jì)與優(yōu)化。協(xié)助推動(dòng)跨領(lǐng)域重大數(shù)據(jù)問(wèn)題的分析、定位、解決方案設(shè)計(jì),從架構(gòu)設(shè)計(jì)上保障系統(tǒng)高性能、高可用性、高安全性、高時(shí)效性、分布式擴(kuò)展性,并對(duì)系統(tǒng)質(zhì)量負(fù)責(zé)。
2.負(fù)責(zé)云數(shù)據(jù)平臺(tái)的架構(gòu)設(shè)計(jì)和數(shù)據(jù)處理體系的優(yōu)化,推動(dòng)云數(shù)據(jù)平臺(tái)建設(shè)和持續(xù)升級(jí),并制定云數(shù)據(jù)平臺(tái)調(diào)用約束和規(guī)范。
3.結(jié)合行業(yè)應(yīng)用的需求負(fù)責(zé)數(shù)據(jù)流各環(huán)節(jié)上的方案選型,主導(dǎo)云數(shù)據(jù)平臺(tái)建設(shè),參與核心代碼編寫(xiě)、審查;數(shù)據(jù)的統(tǒng)計(jì)邏輯回歸算法、實(shí)時(shí)交互分析;數(shù)據(jù)可視化方案等等的選型、部署、集成融合等等。
4.對(duì)云數(shù)據(jù)平臺(tái)的關(guān)注業(yè)內(nèi)技術(shù)動(dòng)態(tài),持續(xù)推動(dòng)平臺(tái)技術(shù)架構(gòu)升級(jí),以滿足公司不同階段的數(shù)據(jù)需求。
任職要求:
1.熟悉云計(jì)算基礎(chǔ)平臺(tái),包括Linux(Ubuntu/CentOS)和KVM、OpenStack/K8S等基礎(chǔ)環(huán)境,熟悉控制、計(jì)算、存儲(chǔ)和網(wǎng)絡(luò);
2.掌握大型分布式系統(tǒng)的技術(shù)棧,如:CDN、負(fù)載均衡、服務(wù)化/異步化、分布式緩存、NoSQL、數(shù)據(jù)庫(kù)垂直及水平擴(kuò)容;熟悉大數(shù)據(jù)應(yīng)用端到端的相關(guān)高性能產(chǎn)品。
3.精通Java,Python,Shell編程語(yǔ)言,精通SQL、NoSQL等數(shù)據(jù)庫(kù)增刪改查的操作優(yōu)化;
4.PB級(jí)別實(shí)戰(zhàn)數(shù)據(jù)平臺(tái)和生產(chǎn)環(huán)境的實(shí)施、開(kāi)發(fā)和管理經(jīng)驗(yàn);
5.熟悉Docker等容器的編排封裝,熟悉微服務(wù)的開(kāi)發(fā)和日常調(diào)度;
6.計(jì)算機(jī)、軟件、電子信息及通信等相關(guān)專業(yè)本科以上學(xué)歷,5年以上軟件工程開(kāi)發(fā)經(jīng)驗(yàn),2年以上大數(shù)據(jù)架構(gòu)師工作經(jīng)驗(yàn)。
第三篇:大數(shù)據(jù)架構(gòu)師崗位主職責(zé)
職責(zé):
負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品架構(gòu)的設(shè)計(jì)與實(shí)現(xiàn);
配合大數(shù)據(jù)產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;
負(fù)責(zé)大數(shù)據(jù)產(chǎn)品架構(gòu)的持續(xù)優(yōu)化設(shè)計(jì);
負(fù)責(zé)大數(shù)據(jù)產(chǎn)品核心組件設(shè)計(jì);
負(fù)責(zé)大數(shù)據(jù)相關(guān)數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫(kù)設(shè)計(jì)以及大數(shù)據(jù)產(chǎn)品研發(fā)工作;
為應(yīng)用開(kāi)發(fā)團(tuán)隊(duì)提供技術(shù)支撐。
及時(shí)向上級(jí)反饋工作進(jìn)度、遇到的問(wèn)題或者對(duì)現(xiàn)有工作的建議等;
完成上級(jí)領(lǐng)導(dǎo)交辦的其它各項(xiàng)工作。
第四篇:大數(shù)據(jù)崗位職責(zé)
職責(zé)描述:
1.負(fù)責(zé)客戶業(yè)務(wù)需求、數(shù)據(jù)分析需求的調(diào)研、收集與分析;
2.負(fù)責(zé)kyligence大數(shù)據(jù)平臺(tái)整體架構(gòu)和數(shù)據(jù)架構(gòu)設(shè)計(jì),根據(jù)具體業(yè)務(wù)需求和產(chǎn)品對(duì)數(shù)據(jù)模型進(jìn)行統(tǒng)一分析和規(guī)劃;
3.負(fù)責(zé)技術(shù)設(shè)計(jì)及技術(shù)實(shí)現(xiàn)規(guī)范編制,指導(dǎo)開(kāi)發(fā)團(tuán)隊(duì)進(jìn)行項(xiàng)目設(shè)計(jì)、項(xiàng)目實(shí)現(xiàn)及技術(shù)匯報(bào);
4.負(fù)責(zé)項(xiàng)目重難點(diǎn)模塊的功能設(shè)計(jì)和難點(diǎn)攻堅(jiān);
5.參與大數(shù)據(jù)平臺(tái)的應(yīng)用設(shè)計(jì)、開(kāi)發(fā)、測(cè)試及優(yōu)化工作。
任職要求:
1.計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷;
2.有5年以上工作經(jīng)驗(yàn),3年以上數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)和大數(shù)據(jù)系統(tǒng)設(shè)計(jì)經(jīng)驗(yàn);
3.精通hadoop、hive、hbase原理及優(yōu)化,熟悉大數(shù)據(jù)生態(tài)技術(shù)圈,如storm、spark、flume、sqoop、kafka、zookeeper、es等,有大規(guī)模集群架構(gòu)設(shè)計(jì)、開(kāi)發(fā)及管理經(jīng)驗(yàn);
4.熟練使用sql語(yǔ)言,掌握oracle、db2、gp、mysql等至少兩種數(shù)據(jù)庫(kù)系統(tǒng)的使用,有較好的sql性能調(diào)優(yōu)經(jīng)驗(yàn);
5.至少熟悉java,scala,python,shell等編程語(yǔ)言中的2種;
6.熟悉數(shù)據(jù)治理及應(yīng)用,元數(shù)據(jù)管理的'設(shè)計(jì)與應(yīng)用;
7.熟悉數(shù)據(jù)倉(cāng)庫(kù)模型的設(shè)計(jì),分層設(shè)計(jì)原理,并結(jié)合大數(shù)據(jù)技術(shù)組建解決模型應(yīng)用的問(wèn)題;
8.優(yōu)秀的分析和解決問(wèn)題的能力,對(duì)挑戰(zhàn)性問(wèn)題充滿激情;
9.具備良好的文檔撰寫(xiě)能力和技術(shù)團(tuán)隊(duì)管理能力;
10.具備良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力,具備良好的技術(shù)領(lǐng)導(dǎo)能力;
11.有hive數(shù)據(jù)倉(cāng)庫(kù)或者apache kylin的開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先考慮;
第五篇:大數(shù)據(jù)崗位職責(zé)
崗位職責(zé):
1.理解業(yè)務(wù)需求,負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、etl流程的開(kāi)發(fā)和優(yōu)化工作;
2.解決業(yè)務(wù)數(shù)據(jù)分析、數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問(wèn)題;
3. spark/yarn/hdfs的性能改進(jìn)、功能擴(kuò)展、故障分析;
任職資格:
1.計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2.精通java編程語(yǔ)言,并熟悉scala、python、shell等一門(mén)以上腳本語(yǔ)言;
3.熟悉hadoop大數(shù)據(jù)平臺(tái)架構(gòu),熟悉spark/spark sql/yarn開(kāi)發(fā)調(diào)優(yōu)技術(shù),具有相關(guān)項(xiàng)目經(jīng)驗(yàn)
4.掌握數(shù)據(jù)倉(cāng)庫(kù)(dw)/olap/商業(yè)智能(bi)/數(shù)據(jù)統(tǒng)計(jì)理論,熟悉oracle/mysql數(shù)據(jù)庫(kù);
5.思路清晰,具備良好的溝通能力和理解能力,較強(qiáng)的學(xué)習(xí)能力以及快速解決問(wèn)題的能力;
6.具有高度的責(zé)任感,工作認(rèn)真、踏實(shí)。
福利待遇:
1、薪酬:有競(jìng)爭(zhēng)力的.薪酬體系,我們不止跟你談理想,錢(qián)也必須談一談~
2、交通:無(wú)論天涯,免費(fèi)班車(chē)直達(dá)公司,驀然回首,地鐵就在公司不遠(yuǎn)處......
3、工作時(shí)間:5天7小時(shí)工作制,充足的休息讓你一整天元?dú)鉂M滿!
4、各種福利:五險(xiǎn)一金小case,節(jié)日禮物福利補(bǔ)貼說(shuō)不完!
5、團(tuán)建活動(dòng):下午茶,團(tuán)隊(duì)活動(dòng),部門(mén)聚餐,經(jīng)費(fèi)充足不差錢(qián),大公司就是這么壕!
6、發(fā)展平臺(tái):想要升職加薪走向人生巔峰?上市公司晉升發(fā)展機(jī)會(huì)多多~
第六篇:大數(shù)據(jù)行業(yè)崗位職責(zé)
職責(zé)描述:
負(fù)責(zé)部門(mén)團(tuán)隊(duì)人員規(guī)劃、能力建設(shè)、業(yè)務(wù)發(fā)展方向引導(dǎo);
任職要求:
1、熟悉大數(shù)據(jù)發(fā)展方向、主流技術(shù)及市場(chǎng)現(xiàn)狀,深入理解行業(yè)客戶訴求;
2、5年以上相關(guān)工作經(jīng)驗(yàn),具備行業(yè)屬性,在金融、公共安全、醫(yī)療等領(lǐng)域有一定探索;
3、有團(tuán)隊(duì)管理經(jīng)驗(yàn),能保障團(tuán)隊(duì)整體能力提升;
4、符合公司價(jià)值觀,品德端正,積極進(jìn)取,勇于擔(dān)當(dāng),善于學(xué)習(xí),追求卓越,心理韌性強(qiáng);
5、具備較強(qiáng)的創(chuàng)新、溝通影響能力、組織協(xié)調(diào)能力,同時(shí)有良好的評(píng)估探究問(wèn)題、人際關(guān)系構(gòu)建能力;