1、參與公司數(shù)據(jù)平臺架構設計,負責大數(shù)據(jù)平臺和數(shù)據(jù)倉庫相關建設;
2、負責公司大數(shù)據(jù)平臺和數(shù)據(jù)倉庫的搭建、開發(fā)、管理、監(jiān)控和性能調優(yōu),保證集群高效穩(wěn)定運行;
3、規(guī)劃與開發(fā)離線數(shù)據(jù)平臺系統(tǒng),處理海量數(shù)據(jù),優(yōu)化存儲和計算架構的性能;
4、負責數(shù)據(jù)平臺技術難點攻關、技術選型評估,參與開發(fā)流程的討論與優(yōu)化;
5、負責系統(tǒng)核心代碼編寫、代碼審核和重構,指導和培訓數(shù)據(jù)工程師、不斷進行系統(tǒng)優(yōu)化;
6、有過地理位置信息應用,運營商DPI應用開發(fā)優(yōu)先;
任職要求:
1、本科以上學歷,5年以上大數(shù)據(jù)研發(fā)經(jīng)驗,帶領過10人以上的大數(shù)據(jù)團隊;
2、有大型分布式系統(tǒng)設計經(jīng)驗,負責過海量數(shù)據(jù)平臺上高可用、高性能分布式系統(tǒng)的架構設計;
3、熟悉大數(shù)據(jù)開發(fā)框架,熟悉hadoop,hbase,spark等及業(yè)界主流流處理平臺如,如storm,flunk,sparkstreaming等之一;
4、熟練掌握java,python,scalar中的至少一種編程語言,掌握常見的數(shù)據(jù)結構,算法,了解軟件工程、敏捷開發(fā)等知識,熟悉常用設計模式