崗位描述:
1.負責Hadoop平臺運維和優(yōu)化工作;
2.保證Hadoop平臺各核心服務(wù)運行的穩(wěn)定、高效;
3.對Hadoop平臺運維不斷優(yōu)化,提升數(shù)據(jù)產(chǎn)品的質(zhì)量和響應(yīng)速度;
4.協(xié)助維護和管理Hadoop集群,參與新技術(shù)選型和調(diào)研,解決不斷增長的海量數(shù)據(jù)帶來的存儲和計算挑戰(zhàn)
5.能運用分布式計算/大數(shù)據(jù)挖掘思路和技術(shù)開發(fā)產(chǎn)品,以服務(wù)化的方式提升產(chǎn)品質(zhì)量和研發(fā)效率
6.開發(fā)各種Hadoop大數(shù)據(jù)自動化運維與監(jiān)控工具。
任職資格:
1.2年以上Linux系統(tǒng)管理工作經(jīng)驗;
2.具有Hadoop平臺管理經(jīng)驗,熟悉GFS/Hadoop、hive、hbase等開源項目;
3.熟悉Apache?Hadoop部署、性能調(diào)優(yōu),熟悉jetty,thrift;
4.精通Shell/Python/Java/Perl語言的一種或多種;
5.熟悉nagios,cacti,ganglia,zabbix,zenoss優(yōu)先;
6.對大數(shù)據(jù)和自動化運維開發(fā)有濃厚興趣,熟悉hadoop、hbase、hive、scribe、flume、storm等分布式相關(guān)技術(shù)優(yōu)先;
7.有大規(guī)模hadoop運維經(jīng)驗者優(yōu)先;有hadoop/hbase?開發(fā)經(jīng)驗者優(yōu)先