工作職責(zé)
1、基于金融行業(yè)特點(diǎn)構(gòu)建企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù);
2、參與實(shí)時(shí)和離線的數(shù)據(jù)采集,處理和存儲(chǔ),方案設(shè)計(jì)及標(biāo)準(zhǔn)制定;
3、對(duì)現(xiàn)有大數(shù)據(jù)數(shù)據(jù)體系進(jìn)行腳本優(yōu)化,功能優(yōu)化等,提升數(shù)據(jù)存儲(chǔ)和計(jì)算資源利用率;
任職要求
1、本科及以上學(xué)歷,3年以上數(shù)據(jù)平臺(tái)開(kāi)發(fā)經(jīng)驗(yàn),有金融業(yè)務(wù)知識(shí)優(yōu)先;
2、熟悉數(shù)據(jù)倉(cāng)庫(kù)建設(shè)過(guò)程,具備數(shù)據(jù)集市、數(shù)據(jù)主題、標(biāo)簽體系建設(shè)經(jīng)驗(yàn)優(yōu)先;
3、熟練Hive、Spark、Flink等離線、流式計(jì)算框架的使用和調(diào)優(yōu),理解核心機(jī)制,有良好的SQL性能優(yōu)化能力;;
4、熟練掌握J(rèn)ava、python中的至少一種開(kāi)發(fā)語(yǔ)言,較強(qiáng)編碼能力,熟悉Python和Shell開(kāi)發(fā)優(yōu)先;
5、熟悉HBase、Clickhouse、Doris等常見(jiàn)分布式數(shù)據(jù)存儲(chǔ)讀寫(xiě)及其性能優(yōu)化優(yōu)先。