工作職責(zé):
參與大數(shù)據(jù)平臺/倉庫項目實施與開發(fā)
1?數(shù)據(jù)接入:各類數(shù)據(jù)庫(達(dá)夢,mysql等)、API接口(python/json/repuest)、手工數(shù)據(jù)(excel)歸集到大數(shù)據(jù)平臺(離線、實時);平臺內(nèi)數(shù)據(jù)開發(fā)(ods/dwd/dws等,新建集市,指標(biāo)口徑梳理與開發(fā),問題排查,手工指標(biāo)更新)
2?數(shù)據(jù)梳理:梳理各主題庫內(nèi)表情況(表字段清單,碼值,表間關(guān)系,數(shù)據(jù)來源,血緣分析,數(shù)據(jù)更新情況,常用統(tǒng)計口徑等)
3?數(shù)據(jù)服務(wù):與各下游(各單位)溝通,接收需求,確認(rèn)口徑,整理數(shù)據(jù)映射關(guān)系,數(shù)據(jù)加工
任職/崗位要求:
1?【必備】計算機、統(tǒng)計學(xué)、數(shù)學(xué)等相關(guān)專業(yè)碩士
2?【必備】24屆及以后,每周5天,實習(xí)6個月以上,盡量穩(wěn)定
3?【必備】有2個月以上數(shù)據(jù)開發(fā)或分析實習(xí)經(jīng)驗
4?【必備】熟練操作SQL語言(增刪改查,聚合,窗口,正則,開發(fā)規(guī)范),有MySQL/Oracle等庫使用經(jīng)驗
5?【必備】熟練Python基本操作(讀寫庫,API訪問,Excel操作),了解Linux基本操作(目錄操作,文件操作,系統(tǒng)資源管理,進程管理,端口管理)
6?【必備】了解數(shù)倉基本概念
7?【必備】接受適當(dāng)加班;有耐心處理數(shù)據(jù);工作認(rèn)真負(fù)責(zé)
8?【加分】有大數(shù)據(jù)平臺動手經(jīng)驗;了解容器化相關(guān)知識和操作;熟練操作Excel(常用函數(shù),數(shù)據(jù)入庫)PPT等;有ETL工作經(jīng)驗:數(shù)據(jù)抽取,清洗,合計,導(dǎo)出,工作流調(diào)度及相關(guān)工作:kettle,?datax,?datastage,airflow等;對數(shù)據(jù)有一定敏感性,通過數(shù)據(jù)推演業(yè)務(wù)