崗位職責描述:
?(1)負責大數據平臺數據治理(元數據、數據目錄、數據政策、數據質量等)功能的技術方向評估和技術選型;
?(2)負責大數據平臺數據治理功能的架構設計;
?(3)協(xié)助大數據平臺數據治理實施方案制定等工作;
?(4)負責大數據平臺總體需求分析、架構設計和模型開發(fā)工作。
?2)??任職資格:
?(1)計算機、數理統(tǒng)計等相關專業(yè),全日制碩士及以上學歷;
?(2)3年以上開發(fā)經驗,熟練掌握Java、Scala、Python、C中的至少兩種開發(fā)語言;
?(3)熟悉Aliyun、Google、AWS中至少一個云平臺的大數據解決方案;
?(4)熟練掌握Hadoop、Hive、Hbase、Spark、Storm等分布式框架原理,有相關的調優(yōu)、運維、開發(fā)經驗;
?(5)具有Postgresql、MySql、MongoDB等其中一種數據庫應用開發(fā)經驗;
?(6)深入理解分布式數據分析挖掘平臺相關技術框架,能夠根據業(yè)務需求,提出數據平臺選型建議并完成相關架構設計帶領技術人員迅速搭建系統(tǒng);
?(7)對技術有激情,喜歡鉆研,能快速接受和掌握新技術,有較強的獨立、主動的學習能力,良好的溝通表達能;
?(8)有數據挖掘,機器學習相關經驗者優(yōu)先考慮;
?(9)有標簽系統(tǒng)、用戶畫像系統(tǒng)、推薦系統(tǒng)的設計和研發(fā)經驗的優(yōu)先考慮。