職位描述:
1、構(gòu)建大數(shù)據(jù)平臺(tái),完成數(shù)據(jù)采集、復(fù)雜數(shù)據(jù)清洗、存儲(chǔ)等開發(fā)工作;
2、參與項(xiàng)目統(tǒng)一的數(shù)據(jù)倉庫數(shù)據(jù)開發(fā);
3、基于Flink/Sparkstreaming引擎實(shí)現(xiàn)流式和批式?體化的數(shù)據(jù)融合處理
3、負(fù)責(zé)與企業(yè)級(jí)數(shù)據(jù)倉庫建設(shè)和管理,包括但不限于數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型、數(shù)據(jù)安全相關(guān)標(biāo)準(zhǔn)的制定;
4、數(shù)據(jù)模型設(shè)計(jì)與ETL開發(fā),系統(tǒng)性的數(shù)據(jù)解決方案,產(chǎn)出數(shù)據(jù)產(chǎn)品;
5、和數(shù)據(jù)分析師團(tuán)隊(duì)及需求部門進(jìn)行有效溝通,報(bào)告項(xiàng)目進(jìn)度及解決問題等;"
職位要求:
1、本科及以上學(xué)歷,計(jì)算機(jī)、軟件工程、通信工程、自動(dòng)化等相關(guān)專業(yè),3年以上工作經(jīng)驗(yàn),條件優(yōu)秀可適當(dāng)放寬學(xué)歷限制;
2、精通計(jì)算機(jī)原理,熟練掌握J(rèn)ava/scala/python等開發(fā)語言,熟悉常用設(shè)計(jì)模式;
3、精通離線數(shù)據(jù)分析,熟練掌握Hadoop、Hive、flume、SparkCore、SparkSql、Sqoop、Azkaban等技術(shù)并具有相關(guān)項(xiàng)目經(jīng)驗(yàn);
4、精通SQL語法,并具備SQL分析調(diào)優(yōu)能力;
5、熟悉實(shí)時(shí)數(shù)據(jù)計(jì)算,熟練掌握Kafka、SparkStreaming/Flink、Kudu、Impala、Hbase等技術(shù)框架;
6、熟悉Mysql,HBase、ES、Clickhouse等數(shù)據(jù)庫;
7、熟悉shell/python等腳本語言;熟悉微服務(wù)框架開發(fā),實(shí)時(shí)數(shù)倉經(jīng)驗(yàn)者優(yōu)先。"
職位福利:五險(xiǎn)一金