崗位職責(zé):
1、參與數(shù)據(jù)倉庫的架構(gòu)設(shè)計、模型開發(fā)和ETL(Extract, Transform, Load)流程的開發(fā)。這包括使用Kimball的維度建模方法進行數(shù)據(jù)倉庫設(shè)計,確保數(shù)據(jù)組織合理、準確和穩(wěn)定?。
2、負責(zé)大數(shù)據(jù)平臺的海量數(shù)據(jù)處理、數(shù)據(jù)計算和數(shù)據(jù)開發(fā),包括使用Hadoop、Hive、Spark、Flink、Kafka等技術(shù)進行數(shù)據(jù)處理和優(yōu)化,確保數(shù)據(jù)的性能和穩(wěn)定性?。
3、參與數(shù)據(jù)治理工作,提升數(shù)據(jù)易用性和數(shù)據(jù)質(zhì)量,與數(shù)據(jù)工具團隊緊密合作,確保數(shù)據(jù)的準確性和安全性?。
?4、理解并抽象業(yè)務(wù)需求,為業(yè)務(wù)部門提供數(shù)據(jù)支持,搭建業(yè)務(wù)分析模型或指標體系,參與報表需求調(diào)研和開發(fā)工作?。
?5、負責(zé)企業(yè)級數(shù)據(jù)倉庫的設(shè)計、規(guī)劃、建設(shè)和實施,維護大數(shù)據(jù)平臺,解決相關(guān)問題,保障平臺正常運行?。
?崗位要求?:
1、計算機科學(xué)、數(shù)學(xué)或統(tǒng)計學(xué)等相關(guān)專業(yè)的本科及以上學(xué)歷?。
2、具有3年以上數(shù)據(jù)倉庫領(lǐng)域的經(jīng)驗,熟悉數(shù)據(jù)倉庫模型設(shè)計與ETL開發(fā),有海量數(shù)據(jù)處理經(jīng)驗。
3、精通SQL,熟悉Hive SQL,熟練使用Python、Shell等腳本語言;熟悉AWS大數(shù)據(jù)平臺和Flink優(yōu)先?。
4、具備SQL性能調(diào)優(yōu)經(jīng)驗,能夠解決數(shù)據(jù)處理中的性能問題;對云計算和數(shù)據(jù)服務(wù)有深入理解?。
5、具備良好的溝通能力和團隊協(xié)作精神,能夠與業(yè)務(wù)團隊緊密合作,理解業(yè)務(wù)背景并提供技術(shù)支持?。
6、對新技術(shù)保持敏感,具備強烈的求知欲和進取心,能夠不斷學(xué)習(xí)和應(yīng)用新技術(shù)以滿足系統(tǒng)需求?