千文網(wǎng)小編為你整理了多篇相關(guān)的《大數(shù)據(jù)專業(yè)崗位職責》,但愿對你工作學習有幫助,當然你在千文網(wǎng)還可以找到更多《大數(shù)據(jù)專業(yè)崗位職責》。
第一篇:大數(shù)據(jù)崗位職責
崗位職責:
1、負責基于elasticsearch的研發(fā);
2、負責基于spark生態(tài)系統(tǒng)的研發(fā);
3、負責elasticsearch/spark集群調(diào)優(yōu);
4、負責對數(shù)據(jù)進行建模。
任職要求:
1、大學本科及以上學歷,計算機相關(guān)專業(yè);
2、三年以上工作經(jīng)驗;
3、熟練掌握java/scala后端開發(fā),如多線程、網(wǎng)絡等;
4、熟練掌握python、shell中的一種腳本語言;
5、熟悉spark生態(tài)系統(tǒng)組件,如:hadoop、flume、kafka、hbase、hive、pig、zookeeper;
6、熟悉linux開發(fā)環(huán)境;
7、熟悉elasticsearch、lucene優(yōu)先;
8、能夠讀懂及書寫英文文檔;
9、有spark調(diào)優(yōu)、統(tǒng)計學知識的'優(yōu)先考慮;
10、有機器學習經(jīng)驗者優(yōu)先考慮;
11、對新技術(shù)有孜孜不倦的熱情。
第二篇:大數(shù)據(jù)架構(gòu)師崗位主職責
1、領(lǐng)導負責大數(shù)據(jù)技術(shù)團隊建設及管理,并根據(jù)業(yè)務需求,制定大數(shù)據(jù)(包括數(shù)據(jù)存儲,數(shù)據(jù)模型,數(shù)據(jù)應用架構(gòu))的整體技術(shù)棧、業(yè)務應用框架和系統(tǒng)架構(gòu)技術(shù)路線;
2、參與規(guī)劃從數(shù)據(jù)源到數(shù)據(jù)應用的整體流程,并參與相關(guān)產(chǎn)品的決策;
3、負責規(guī)劃大數(shù)據(jù)產(chǎn)品的架構(gòu)設計,包含數(shù)據(jù)集成、數(shù)據(jù)存儲、數(shù)據(jù)應用,并完成相關(guān)架構(gòu)設計文檔的撰寫;
4、負責系統(tǒng)功能模塊分解,接口設計,技術(shù)文檔規(guī)范,統(tǒng)籌技術(shù)全局,具備隨時為各模塊工作補位能力;
5、跟蹤、研究和應用大數(shù)據(jù)相關(guān)前沿技術(shù),持續(xù)對大數(shù)據(jù)應用系統(tǒng)進行性能優(yōu)化、功能改善以及穩(wěn)定性提升;
6、通過參與大數(shù)據(jù)相關(guān)的業(yè)務線全過程,提供技術(shù)決策。