崗位職責(zé):
1.負(fù)責(zé)數(shù)據(jù)質(zhì)量問(wèn)題的分析、跟進(jìn)、解決,進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測(cè)、校驗(yàn)和提升;
2.負(fù)責(zé)E紅開發(fā)實(shí)施文檔的編寫;
3.負(fù)責(zé)梳理公司數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)集市數(shù)據(jù)清單、數(shù)據(jù)映射關(guān)系, 優(yōu)化現(xiàn)有數(shù)據(jù)倉(cāng)庫(kù)模型;
4.完善和梳理數(shù)據(jù)指標(biāo)體系,完成和維護(hù)數(shù)據(jù)字典的工作;
5.參與數(shù)據(jù)標(biāo)準(zhǔn)的制定、數(shù)據(jù)標(biāo)準(zhǔn)管理和數(shù)據(jù)安全管理工作;
6.參與公司大數(shù)據(jù)平臺(tái)的建設(shè),包括Sugar報(bào)表或神策接口配置,朋中畫像標(biāo)簽體系的開發(fā)等
任職要求:
1.有shell或Python腳本開發(fā)經(jīng)驗(yàn);
2.有傳統(tǒng)數(shù)據(jù)庫(kù)SQL Server和MySQL,有存儲(chǔ)過(guò)程編寫能力;
3.熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn),包括但不限于Sgoop、Hive、 HBase、 Kylin等開發(fā)經(jīng)驗(yàn);
4.有kettle、azkaban或oozie. 工作流調(diào)度經(jīng)驗(yàn);
5.熟悉Hive SQL或Flink SQL的開發(fā);
6.有數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì),有使用kafka + Flink Streaming實(shí)時(shí)數(shù)據(jù)處理經(jīng)驗(yàn)優(yōu)先;
7. 大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè),初級(jí)1年以上,中級(jí)3年以上,高級(jí)5年以上工作經(jīng)驗(yàn)。