崗位職責(zé)
1.負責(zé)大數(shù)據(jù)應(yīng)用開發(fā)平臺日常工具腳本開發(fā)與性能優(yōu)化;
2.負責(zé)大數(shù)據(jù)應(yīng)用開發(fā)平臺生產(chǎn)集群和測試集群日常問題解決 ;
3.負責(zé)大數(shù)據(jù)應(yīng)用開發(fā)平臺集群監(jiān)控工作;
4.負責(zé)集群資源擴容和租戶管理;
5.負責(zé)日常需求投產(chǎn)上線;
6.參與云計算平臺的設(shè)計和規(guī)劃,根據(jù)業(yè)務(wù)需求制定合理的系統(tǒng)架構(gòu),確保系統(tǒng)的高效、穩(wěn)定和安全運行;
7.負責(zé)云計算平臺的功能開發(fā).性能優(yōu)化和持續(xù)改進,確保系統(tǒng)滿足業(yè)務(wù)發(fā)展需求;
8.負責(zé)云計算平臺硬件資源、軟件資源的調(diào)度、管理和優(yōu)化,提高資源利用率;
9.負責(zé)云計算平臺的日常運維工作,確保系統(tǒng)穩(wěn)定運行;監(jiān)控系統(tǒng)性能.安全等關(guān)鍵指標(biāo),及時發(fā)現(xiàn)并解決問題;
10.完成領(lǐng)導(dǎo)交辦的其他任務(wù)。
任職要求
1.本科學(xué)位及以上,211及以上院校畢業(yè),人工智能、通信工程專業(yè)優(yōu)先;
2.熟悉大數(shù)據(jù)生態(tài)系統(tǒng),對hdfs.yarn.mr.有深入了解,熟悉hive.hbase.zk.kafka.spark.kudu.impala等,有運維和調(diào)優(yōu)經(jīng)驗,3年以上hadoop,spark,hbase,kafka等大數(shù)據(jù)組件實戰(zhàn)及集群維護經(jīng)驗;
3.掌握spark集群的架構(gòu)設(shè)計和開發(fā),對spark原理及底層技術(shù)有深入了解,通用數(shù)據(jù)平臺的性能調(diào)優(yōu),對實時計算原理,技術(shù)架構(gòu)有深入理解;
4.掌握MySQL關(guān)系型數(shù)據(jù)庫,有較強的SQL編寫能力;
5.掌握redis、ecache等NoSQL數(shù)據(jù)庫;
6.掌握Linux平臺下常用命令操作、環(huán)境部署和腳本語言;
7.熟悉spring,springboot,MyBatis等主流框架;
8.熟悉SVN代碼管理工具;
9.參與項目的需求分析和設(shè)計,對項目開發(fā)工作可以提出解決方案;
10.有較強的學(xué)習(xí)能力,具有良好的表達和交流能力,較強的溝通能力,有進取心。