崗位職責(zé):
1、負(fù)責(zé)集團(tuán)級實時/離線/調(diào)度等數(shù)據(jù)計算平臺建設(shè);
2、負(fù)責(zé)集團(tuán)級公共基礎(chǔ)數(shù)據(jù)流、公共平臺的研發(fā);
3、參與海量數(shù)據(jù)處理和高性能分布式計算的架構(gòu)設(shè)計,負(fù)責(zé)數(shù)據(jù)處理流程的設(shè)計和代碼開發(fā),撰寫相關(guān)文檔;
4、設(shè)計及研發(fā)PaaS平臺的關(guān)鍵組件;
5、負(fù)責(zé)研發(fā)資源調(diào)度框架、數(shù)據(jù)庫、緩存、存儲、檢索等相關(guān)中間件的二次開發(fā)優(yōu)化工作;
6、參與集群運維工作,支持Hadoop集群底座的運維故障分析、解決、性能優(yōu)化;
任職要求:
1.本科及以上學(xué)歷,通信/計算機等相關(guān)專業(yè)。
2、熟悉大數(shù)據(jù)相關(guān)組件二次開發(fā)、搭建、應(yīng)用、優(yōu)化,如:Hadoop/Spark/Yarn/Hive/Kafka/Hbase/Kerberos/Flink/Mysql等。
3、扎實的計算機基礎(chǔ),掌握常用的數(shù)據(jù)結(jié)構(gòu)及算法,熟練掌握J(rèn)ava/Golang/Scala/Python中的一項或多項;
4、愿意承擔(dān)部分運維職責(zé),熟悉Apache?Hadoop部署、性能調(diào)優(yōu)。
5、能閱讀/理解Hadoop等相關(guān)開源組件源碼。
6、較強的人際關(guān)系能力,有團(tuán)隊精神、較強的執(zhí)行與推動能力,有一定抗壓力。