工作職責:
1. 參與構(gòu)建和維護大數(shù)據(jù)平臺,通過平臺支撐所有的數(shù)據(jù)使用、數(shù)據(jù)分析。保障平臺的穩(wěn)定性、數(shù)據(jù)一致性,以及4個9的高標準SLA;
2. 參與數(shù)倉構(gòu)建,數(shù)倉模型設計,打造通用高效的開放式數(shù)據(jù)平臺提供下游使用。
3. 參與海量數(shù)據(jù)的精細化數(shù)據(jù)挖掘工作,發(fā)現(xiàn)數(shù)據(jù)價值,提高數(shù)據(jù)效率,推動數(shù)據(jù)治理,解決橫跨團隊的數(shù)據(jù)質(zhì)量問題。
崗位要求
1. 計算機相關(guān)專業(yè)本科及以上學歷,4年以上相關(guān)工作經(jīng)驗;
2. 掌握大數(shù)據(jù)領(lǐng)域基礎(chǔ)知識,包括且不限于HADOOP生態(tài)圈基礎(chǔ)理論、spark/flink基礎(chǔ)原理、數(shù)據(jù)結(jié)構(gòu)、算法等;
3. 熟練使用scala,python語言,其他語言不限java/go/rust/c++/shell;
4. 有較強Spark開發(fā)能力,及深入了解底層優(yōu)化機制,有豐富海量數(shù)據(jù)處理經(jīng)驗。
5. 熟悉大規(guī)模數(shù)據(jù)計算、存儲相關(guān)技術(shù)。對hadoop生態(tài)組件有一定建設管理能力。
6. 對數(shù)據(jù)平臺、數(shù)據(jù)倉庫、數(shù)據(jù)建模、指標體系、自動化一體化有一定認知及設計能力。