一、崗位職責(zé)1,大數(shù)據(jù)平臺開發(fā)與建設(shè),Spark/Hadoop集群的日常維護(hù)和優(yōu)化。?2,??大數(shù)據(jù)平臺業(yè)務(wù)數(shù)據(jù)倉庫的開發(fā)與建設(shè)。???????3,大數(shù)據(jù)實(shí)時服務(wù)的開發(fā)二、任職資格?1、??性別要求:男?2、??年齡要求:28?40?3、??其他要求?:3年以上大數(shù)據(jù)工作經(jīng)驗(yàn),本科及以上學(xué)歷,計(jì)算機(jī)、軟件工程、數(shù)學(xué)等相關(guān)專業(yè)。???熟悉大數(shù)據(jù)存儲和分布式計(jì)算的基本原理,并具有大型分布式集群項(xiàng)目的開發(fā)經(jīng)驗(yàn),能夠?qū)B級數(shù)據(jù)分布式計(jì)算性能進(jìn)行優(yōu)化。???精通java/scala語言,精通spark編程,并具有ETL項(xiàng)目開發(fā)經(jīng)驗(yàn)或數(shù)據(jù)倉庫建設(shè)經(jīng)驗(yàn)。???熟悉hadoop生態(tài)環(huán)境和相關(guān)技術(shù),yarn、hdfs、kafka、spark、hive、impala、hbase等。???熟悉Linux操作系統(tǒng),熟悉shell、python編程。???有Spark?Streaming實(shí)戰(zhàn)經(jīng)驗(yàn)的優(yōu)先考慮???8年以上工作經(jīng)驗(yàn)???????本科以上學(xué)歷