1、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的部署、管理、優(yōu)化、監(jiān)控報(bào)警,保障平臺(tái)服務(wù)7*24穩(wěn)定可靠高效運(yùn)行;
2、深入理解公司大數(shù)據(jù)平臺(tái)架構(gòu),發(fā)現(xiàn)并解決性能瓶頸,支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長(zhǎng);
3、開發(fā)大數(shù)據(jù)自動(dòng)化運(yùn)維、監(jiān)控報(bào)警、故障處理相關(guān)腳本和工具;
4、負(fù)責(zé)Hadoop/spark/Kafka等集群服務(wù)、業(yè)務(wù)監(jiān)控、持續(xù)交付、應(yīng)急響應(yīng)、容量規(guī)劃等。
1、熟悉Hadoop分布式計(jì)算框架,包括但不限于HDFS、MapReduce、Spark、Flink、Hive、kafka等組件的技術(shù)原理與使用、調(diào)優(yōu);
2、對(duì)大數(shù)據(jù)相關(guān)技術(shù)有較為深刻的理解,同時(shí)能夠結(jié)合關(guān)系型、分布式計(jì)算數(shù)據(jù)庫(kù)給出場(chǎng)景化解決方案,包括技術(shù)架構(gòu)、技術(shù)選型、開發(fā)標(biāo)準(zhǔn)的制定;
3、深入理解主流的OLAP項(xiàng)目架構(gòu)設(shè)計(jì)方案和原理;
4、精通java編程語(yǔ)言,熟練掌握Linux操作系統(tǒng)下的Shell、python腳本的編制;
5、熟練掌握Mybatis、Spring、SpringMVC、SpringBoot、SpringCloud等主流技術(shù)框架;
6、具有華為云相關(guān)服務(wù)組件使用、開發(fā)、運(yùn)維經(jīng)驗(yàn)者優(yōu)先;
7、有數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)中心相關(guān)經(jīng)驗(yàn)者優(yōu)先。
面試流程:現(xiàn)場(chǎng)技術(shù)面試-現(xiàn)場(chǎng)復(fù)試