主要職責(zé):
?1.負(fù)責(zé)大數(shù)據(jù)平臺(tái)架構(gòu)的設(shè)計(jì)和構(gòu)建;
?2.負(fù)責(zé)大數(shù)據(jù)平臺(tái)的優(yōu)化,解決海量數(shù)據(jù)面臨的挑戰(zhàn);
?3.帶領(lǐng)大數(shù)據(jù)技術(shù)團(tuán)隊(duì)實(shí)現(xiàn)各項(xiàng)數(shù)據(jù)接入與處理、數(shù)據(jù)倉庫建設(shè)、數(shù)據(jù)分析與挖掘及數(shù)據(jù)展示;
4.負(fù)責(zé)大數(shù)據(jù)平臺(tái)核心功能的開發(fā)。
任職要求:
1.必須要3年以上大數(shù)據(jù)架構(gòu)經(jīng)驗(yàn),豐富的數(shù)據(jù)倉庫、數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)項(xiàng)目經(jīng)驗(yàn) ;
2.必須要基于Hadoop的大數(shù)據(jù)體系有深入認(rèn)識(shí),具備相關(guān)產(chǎn)品(Hadoop、Hive、HBase、Spark、Storm、Flume、sqoop、Kafka、ES等)項(xiàng)目應(yīng)用研發(fā)經(jīng)驗(yàn);
3.必須要深刻理解大數(shù)據(jù)處理(流計(jì)算,分布式計(jì)算,分布式文件系統(tǒng),分布式存儲(chǔ)等)相關(guān)技術(shù)和實(shí)現(xiàn)方法 ;
4.必須要精通海量存儲(chǔ)、計(jì)算系統(tǒng)的架構(gòu)和原理,具備豐富的大規(guī)模并發(fā)處理系統(tǒng)的研發(fā)和架構(gòu)經(jīng)驗(yàn);