崗位職責(zé):
1、負(fù)責(zé)游戲spark離線任務(wù)和flink實(shí)時(shí)任務(wù)的開(kāi)發(fā)、優(yōu)化、維護(hù)工作,維護(hù)數(shù)據(jù)鏈路和數(shù)倉(cāng)
2、幫助業(yè)務(wù)方提取數(shù)據(jù);制作可視化報(bào)表。
3、開(kāi)發(fā)數(shù)據(jù)鏈路中的腳本和工具,不同云平臺(tái)的數(shù)據(jù)組件整合。
崗位要求:
1. 本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專(zhuān)業(yè)
2. 熟練使用SQL,能根據(jù)需求做數(shù)據(jù)可視化開(kāi)發(fā),提取數(shù)據(jù),完成數(shù)據(jù)驗(yàn)收需求
3. 掌握Python或Java語(yǔ)言,根據(jù)業(yè)務(wù)需求開(kāi)發(fā)pyspark腳本、airflow腳本
4. 掌握spark或flink計(jì)算平臺(tái),進(jìn)行過(guò)性能優(yōu)化,有調(diào)參經(jīng)驗(yàn)優(yōu)先
5. 良好的邏輯分析和解決問(wèn)題的能力,強(qiáng)烈的責(zé)任心和主動(dòng)性,良好的團(tuán)隊(duì)合作能力