職位描述:
1.數(shù)據(jù)收集和傳輸系統(tǒng)的設(shè)計和開發(fā),為上層業(yè)務(wù)提供高可用,高性能的大數(shù)據(jù)采集/清洗/存儲/計算服務(wù)
2.大數(shù)據(jù)平臺的搭建、監(jiān)控、性能調(diào)優(yōu)
3.維持線上服務(wù)高效穩(wěn)定,支撐業(yè)務(wù)和數(shù)據(jù)量的快速擴(kuò)張
任職要求:
1.精通Java?語言,對JVM運(yùn)行機(jī)制有深入了解。有Python和scala經(jīng)驗者更佳
2.熟悉linux環(huán)境,熟悉常用數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計
3.熟練掌握?mysql,?ElasticSearch,?Redis?等關(guān)系型或?NoSQL數(shù)據(jù)庫,了解應(yīng)用場景和使用限制,有實際調(diào)優(yōu)經(jīng)驗
4.熟練掌握大數(shù)據(jù)相關(guān)組件的使用、原理實現(xiàn)、常用的性能優(yōu)化方案。對?Hadoop,Hbase,Zookeeper,?Hive,?Kafka?及ELK相關(guān)工具有豐富經(jīng)驗。
5.熟悉對分布式系統(tǒng)的監(jiān)控、運(yùn)維、故障恢復(fù),高可用配置
6.熟悉常用涉及模式,熟練使用?Maven?Git?等項目管理、持續(xù)集成、代碼管理工具
7.有快速和持續(xù)學(xué)習(xí)的能力,動手能力強(qiáng),有進(jìn)去心、責(zé)任心強(qiáng)
8.2?年以上大數(shù)據(jù)相關(guān)工作經(jīng)驗,最好參與并成功部署過?1?個日均?TB?級的集群項目