崗位職責(zé):1,負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)相關(guān)組件的研發(fā)設(shè)計(jì);2,負(fù)責(zé)業(yè)務(wù)系統(tǒng)數(shù)據(jù)收集、處理、存儲(chǔ)方案的設(shè)計(jì)開發(fā);3,持續(xù)關(guān)注大數(shù)據(jù)前沿技術(shù),優(yōu)化公司平臺(tái)相關(guān)架構(gòu)。崗位要求:1、一年以上開發(fā)經(jīng)驗(yàn),熱愛軟件開發(fā),做事認(rèn)真細(xì)致負(fù)責(zé),溝通能力強(qiáng),有團(tuán)隊(duì)合作精神;2、java基礎(chǔ)扎實(shí),如多線程、IO、同步、反射等;3、熟悉Linux下開發(fā),熟練使用命令,能編寫shell腳本,熟悉python;4、熟悉數(shù)據(jù)庫(kù):mysql、redis5、熟悉大數(shù)據(jù)相關(guān)技術(shù)原理與架構(gòu):hadoop/flume/kafka/Spark/elasticsearch,能夠獨(dú)立部署相關(guān)組件;6、精通SQL查詢,mysql、impala、hive7、掌握數(shù)據(jù)分析的基本流程,具備數(shù)據(jù)采集、清洗、分析等環(huán)節(jié)的實(shí)戰(zhàn)經(jīng)驗(yàn)者優(yōu)先;8、有實(shí)時(shí)日志數(shù)據(jù)收集處理經(jīng)驗(yàn),有spark開發(fā)經(jīng)驗(yàn)者優(yōu)先;9、研究過(guò)大數(shù)據(jù)開源項(xiàng)目者優(yōu)先;