崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)或者數(shù)據(jù)湖ETL設(shè)計(jì)開(kāi)發(fā);
2、負(fù)責(zé)與業(yè)務(wù)部門數(shù)據(jù)需求的溝通與確認(rèn);
3、負(fù)責(zé)團(tuán)隊(duì)項(xiàng)目工程管理定期發(fā)布與日常運(yùn)維。
任職要求:
1、3-7年數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)平臺(tái)或者數(shù)據(jù)湖的ETL開(kāi)發(fā)工作經(jīng)驗(yàn),具有實(shí)際業(yè)務(wù)邏輯到ETL過(guò)程的設(shè)計(jì)經(jīng)驗(yàn)優(yōu)先;
2、熟悉1-2個(gè)主流ETL開(kāi)發(fā)工具,如:Talend、Kettle或者SSIS等;
3、熟練掌握2個(gè)以上主流數(shù)據(jù)庫(kù)的使用,如:SQL Server、Oracle 或 PostgreSQL。對(duì)SQL查詢優(yōu)化有豐富的經(jīng)驗(yàn);
4、熟練使用的項(xiàng)目和需求管理工具,包括 Git,TFS等;
5、清晰的邏輯思維能力、良好的溝通能力和獨(dú)立的ETL過(guò)程設(shè)計(jì)能力;
6、工作認(rèn)真仔細(xì),積極主動(dòng),具備較強(qiáng)的自主學(xué)習(xí)、自我總結(jié)能力;
7、熟悉 Hive 和 Spark 大數(shù)據(jù)計(jì)算框架及具有相關(guān)ETL和數(shù)據(jù)處理過(guò)程的開(kāi)發(fā)經(jīng)驗(yàn);
8、具有 AWS EMR 與 AWS Redshift 相關(guān)工作經(jīng)驗(yàn)和具有AWS從業(yè)者以上證書(shū),優(yōu)先考慮