1、精通sql語(yǔ)言,如HiveSQL\SparkSQL;掌握mysql數(shù)據(jù)庫(kù)技術(shù),可以根據(jù)業(yè)務(wù)需求能夠編寫(xiě)復(fù)雜的sql邏輯,具備一定的SQL調(diào)優(yōu)能力與日常故障解決方法;
2、熟悉數(shù)倉(cāng)建模,熟悉常用開(kāi)源組件如hadoop,hive,kafka,hbase,flume,spark的使用;
3、掌握spark/blink分布式計(jì)算框架,有實(shí)際的離線和實(shí)時(shí)處理項(xiàng)目經(jīng)驗(yàn);
4、掌握Python,熟悉大數(shù)據(jù)分析建模算法,可獨(dú)立編寫(xiě)數(shù)據(jù)挖掘分析算法;
要求大學(xué)本科以上學(xué)歷,有基于Spark/blink開(kāi)發(fā)中大型項(xiàng)目經(jīng)驗(yàn)的優(yōu)先,有基于Python大數(shù)據(jù)分析建模項(xiàng)目經(jīng)驗(yàn)的優(yōu)先,有數(shù)據(jù)中臺(tái)或國(guó)網(wǎng)大數(shù)據(jù)平臺(tái)項(xiàng)目工作經(jīng)驗(yàn)者優(yōu)先。