職位描述:
1、構(gòu)建大數(shù)據(jù)平臺,完成數(shù)據(jù)采集、復(fù)雜數(shù)據(jù)清洗、存儲等開發(fā)工作;
2、參與項目統(tǒng)一的數(shù)據(jù)倉庫數(shù)據(jù)開發(fā);
3、基于Flink/Sparkstreaming引擎實現(xiàn)流式和批式?體化的數(shù)據(jù)融合處理
3、負(fù)責(zé)與企業(yè)級數(shù)據(jù)倉庫建設(shè)和管理,包括但不限于數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型、數(shù)據(jù)安全相關(guān)標(biāo)準(zhǔn)的制定;
4、數(shù)據(jù)模型設(shè)計與ETL開發(fā),系統(tǒng)性的數(shù)據(jù)解決方案,產(chǎn)出數(shù)據(jù)產(chǎn)品;
5、和數(shù)據(jù)分析師團(tuán)隊及需求部門進(jìn)行有效溝通,報告項目進(jìn)度及解決問題等;"
職位要求:
1、本科及以上學(xué)歷,計算機(jī)、軟件工程、通信工程、自動化等相關(guān)專業(yè),3年以上工作經(jīng)驗,條件優(yōu)秀可適當(dāng)放寬學(xué)歷限制;
2、精通計算機(jī)原理,熟練掌握J(rèn)ava/scala/python等開發(fā)語言,熟悉常用設(shè)計模式;
3、精通離線數(shù)據(jù)分析,熟練掌握Hadoop、Hive、flume、SparkCore、SparkSql、Sqoop、Azkaban等技術(shù)并具有相關(guān)項目經(jīng)驗;
4、精通SQL語法,并具備SQL分析調(diào)優(yōu)能力;
5、熟悉實時數(shù)據(jù)計算,熟練掌握Kafka、SparkStreaming/Flink、Kudu、Impala、Hbase等技術(shù)框架;
6、熟悉Mysql,HBase、ES、Clickhouse等數(shù)據(jù)庫;
7、熟悉shell/python等腳本語言;熟悉微服務(wù)框架開發(fā),實時數(shù)倉經(jīng)驗者優(yōu)先。"
職位福利:五險一金