崗位職責(zé):
1、 負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的整體架構(gòu)設(shè)計(jì),負(fù)責(zé)大數(shù)據(jù)項(xiàng)目的整體評(píng)估和設(shè)計(jì);
2、 負(fù)責(zé)架構(gòu)優(yōu)化及系統(tǒng)關(guān)鍵模塊的設(shè)計(jì)開(kāi)發(fā),協(xié)助團(tuán)隊(duì)解決開(kāi)發(fā)過(guò)程中的技術(shù)難題;
3、 負(fù)責(zé)新技術(shù)的調(diào)研,并能在團(tuán)隊(duì)內(nèi)進(jìn)行推廣應(yīng)用;
4、 參與數(shù)據(jù)平臺(tái)開(kāi)發(fā)規(guī)范制定,數(shù)據(jù)建模及核心框架開(kāi)發(fā)。
任職資格:
1、 計(jì)算機(jī)、數(shù)學(xué)等專業(yè)本科及以上學(xué)歷,?5年及以上大數(shù)據(jù)相關(guān)工作經(jīng)驗(yàn);
2、 具有扎實(shí)的大數(shù)據(jù)和數(shù)據(jù)倉(cāng)庫(kù)的理論功底,負(fù)責(zé)過(guò)大數(shù)據(jù)平臺(tái)或數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì);
3、 基于Hadoop的大數(shù)據(jù)體系有深入認(rèn)識(shí),具備相關(guān)產(chǎn)品(Hadoop、Hive、HBase、Spark、Storm、?Flume、Kafka、ES等)項(xiàng)目應(yīng)用研發(fā)經(jīng)驗(yàn),有Hadoop集群搭建和管理經(jīng)驗(yàn);
4、 熟悉傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)建模,ETL架構(gòu)和開(kāi)發(fā)流程,使用過(guò)Kettle,Informatic等至少一種工具;
5、 優(yōu)秀的團(tuán)隊(duì)意識(shí)和溝通能力,對(duì)新技術(shù)有好奇心,學(xué)習(xí)能力和主動(dòng)性強(qiáng),有鉆研精神,充滿激情,樂(lè)于接受挑戰(zhàn);
6、 有大中型互聯(lián)網(wǎng)公司數(shù)據(jù)平臺(tái)設(shè)計(jì)和開(kāi)發(fā)工作經(jīng)驗(yàn)者優(yōu)先