崗位要求:1.精通至少一種編程語言(scala,?java,?python,?goLang優(yōu)先),熟悉常用的數據結構和算法2.?精通常見分布式計算框架,?如hadoop,?spark等,且有一定使用調優(yōu)經驗3.?精通常用大規(guī)模存儲解決方案,?如postgreSQL,?presto,?hive,?redis,?hbase,?faiss,clickhouse等,?有一定使用和調優(yōu)經驗4.?精通常用數據流處理框架,?如kafka,?flink,?sparkstreaming有基于服務框架搭建過數據服務(如推薦系統(tǒng))經驗者優(yōu)先考慮結合實際業(yè)務需求與數據,利用分布式計算框架,優(yōu)化現有線上算法,或研發(fā)高效可靠的數據挖掘解決方案中的計算模塊;根據需求在分布式數倉中加工和提取數據,?為下游任務作準備負責大規(guī)模數據分析、用戶畫像、社交網絡分析等數據挖掘開發(fā)工作分布式存儲、服務性能優(yōu)化,結合利用現有組件提供穩(wěn)定高效的分布式服務搭建、維護和優(yōu)化數據服務系統(tǒng),?包括鏈路中模塊選型、數據結構設計優(yōu)化、查詢優(yōu)化等