崗位職責(zé):
1、大數(shù)據(jù)平臺(tái)運(yùn)行環(huán)境的設(shè)備資產(chǎn)查詢(xún);
2、大數(shù)據(jù)平臺(tái)運(yùn)行日志和錯(cuò)誤日志收集;
3、數(shù)據(jù)庫(kù)健康狀況巡檢;
4、包括主機(jī)內(nèi)存、存儲(chǔ)空間、進(jìn)程狀態(tài)、網(wǎng)絡(luò)狀況、數(shù)據(jù)庫(kù)等),按時(shí)上報(bào)巡檢報(bào)告;
5、硬件故障處理;
6、軟件故障處理(存儲(chǔ)使用率緊張、進(jìn)程異常、網(wǎng)絡(luò)及數(shù)據(jù)庫(kù)連接異常等);
7、配合對(duì)大數(shù)據(jù)平臺(tái)參數(shù)文件的調(diào)整與模塊的部署;
8、準(zhǔn)確記錄每一次的平臺(tái)優(yōu)化與升級(jí)、以及問(wèn)題的處理過(guò)程。
9、數(shù)據(jù)庫(kù)安裝部署、日常巡檢、高級(jí)告警處理上報(bào)、數(shù)據(jù)庫(kù)備份、告警及故障處理、常用操作系統(tǒng)的安裝配置、常用存儲(chǔ)的掛載分配;
任職資格:
1、大專(zhuān)及以上學(xué)歷,具備3年的大數(shù)據(jù)運(yùn)維經(jīng)驗(yàn);
2、掌握大數(shù)據(jù)平臺(tái)開(kāi)發(fā)所需的知識(shí)和技能;
3、具備獨(dú)立開(kāi)發(fā)大數(shù)據(jù)分析處理模塊的能力;
4、具備大數(shù)據(jù)平臺(tái)性能調(diào)優(yōu)和故障定位與解決問(wèn)題的技術(shù)支持能力。
5、熟悉Hadoop、Hive、HBase、Kafka、Stom、Spark等技術(shù);