崗位職責(zé):
1、負(fù)責(zé)系統(tǒng)的實(shí)時(shí)數(shù)據(jù)處理架構(gòu)設(shè)計(jì)、核心代碼開(kāi)發(fā)等任務(wù);
2、負(fù)責(zé)實(shí)時(shí)數(shù)據(jù)處理系統(tǒng)的架構(gòu)評(píng)審,代碼評(píng)審,上線評(píng)審;
3、根據(jù)項(xiàng)目要求編寫(xiě)相關(guān)技術(shù)文檔;
4、參與軟件需求、設(shè)計(jì)、審核和評(píng)審;
5、參與大數(shù)據(jù)平臺(tái)的搭建,完成系統(tǒng)調(diào)試、集成與實(shí)施;
6、培訓(xùn)和指導(dǎo)初級(jí)和中級(jí)工程師;
7、完成領(lǐng)導(dǎo)交代的其他任務(wù);
任職資格:
1、本科及以上計(jì)算機(jī)、數(shù)學(xué)相關(guān)專業(yè)畢業(yè);
2、具有5年以上相關(guān)工作經(jīng)驗(yàn);
3、精通實(shí)時(shí)數(shù)據(jù)處理流程,掌握實(shí)時(shí)數(shù)據(jù)處理常用技術(shù)工具,包括Storm、SparkStreaming等
4、掌握常見(jiàn)數(shù)據(jù)流接入工具,包括Flume、kafka等;
5、熟練掌握基本的Linux操作系統(tǒng)和某種腳本語(yǔ)言編程(如Shell等);
6、掌握一種或以上實(shí)時(shí)處理語(yǔ)言,如JAVA、SCALA、PYTHON等;
7、有1年以上實(shí)際大規(guī)模實(shí)時(shí)數(shù)據(jù)處理經(jīng)驗(yàn);
8、熟悉大容量、高性能的數(shù)據(jù)庫(kù)系統(tǒng),如HBASE、REDIS等;