崗位職責(zé):
1.負(fù)責(zé)核心數(shù)據(jù)倉庫和集市建設(shè),數(shù)據(jù)ETL的設(shè)計(jì)、開發(fā)與性能優(yōu)化,負(fù)責(zé)業(yè)務(wù)需求的需求理解、數(shù)據(jù)探查和分析;
2.負(fù)責(zé)設(shè)計(jì)ETL任務(wù)調(diào)度,并監(jiān)控和運(yùn)維,保證日常數(shù)據(jù)質(zhì)量。
3.負(fù)責(zé)大數(shù)據(jù)平臺(tái)的倉庫模型設(shè)計(jì),數(shù)據(jù)模型建模,對(duì)數(shù)據(jù)進(jìn)行挖掘、優(yōu)化和統(tǒng)計(jì)分析;
4.通過和業(yè)務(wù)溝通,抽象出業(yè)務(wù)邏輯。同時(shí)需要有數(shù)據(jù)敏感性,需要對(duì)數(shù)據(jù)的準(zhǔn)確性負(fù)責(zé)。
任職要求:
1.年齡在35歲(不含)以下(1990年1月1日以后出生);
2.大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè)優(yōu)先;
3.至少3年以上大數(shù)據(jù)ETL或數(shù)據(jù)庫開發(fā)經(jīng)驗(yàn)、熟練掌握SQL語言;
4.熟悉大數(shù)據(jù)生態(tài)系統(tǒng),如Doris、HDFS、Hive、Spark、Kafka、Flink等組件;
5.熟悉數(shù)據(jù)倉庫領(lǐng)域知識(shí)和管理技能,包括但不局限于:數(shù)據(jù)治理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、性能調(diào)優(yōu)等,熟悉倉庫模型設(shè)計(jì)與ETL開發(fā)經(jīng)驗(yàn)。
6.掌握數(shù)倉建模設(shè)計(jì)方法,具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn),靈活運(yùn)用SQL實(shí)現(xiàn)海量數(shù)據(jù)ETL加工處理,具備良好的SQL性能調(diào)優(yōu)能力;
7.熟悉常見關(guān)系型等數(shù)據(jù)庫,對(duì)數(shù)據(jù)庫結(jié)構(gòu)系統(tǒng)和數(shù)據(jù)挖掘有一定的認(rèn)識(shí),具備數(shù)據(jù)工程、數(shù)據(jù)管道和數(shù)據(jù)治理技能;
8.積極上進(jìn),樂于學(xué)習(xí),有嚴(yán)密的邏輯思維和扎實(shí)的數(shù)據(jù)分析能力,能夠敏銳地從數(shù)據(jù)中發(fā)現(xiàn)總結(jié)問題。