職位描述
負(fù)責(zé)大數(shù)據(jù)平臺(tái)系統(tǒng)的需求分析、方案設(shè)計(jì)、特性開(kāi)發(fā)、持續(xù)構(gòu)建(CI/CD)等工作:
1、構(gòu)筑領(lǐng)先業(yè)界一代的智能化、高吞吐、高彈性的實(shí)時(shí)流計(jì)算、離線批計(jì)算框架;
2、實(shí)現(xiàn)一站式的數(shù)據(jù)編排平臺(tái),將集成、流、批、策略、AI、模型驅(qū)動(dòng)開(kāi)發(fā)整合;增強(qiáng)數(shù)據(jù)治理能力,構(gòu)筑運(yùn)營(yíng)商數(shù)據(jù)中臺(tái);
3、構(gòu)建統(tǒng)一的數(shù)據(jù)訪問(wèn)層,通過(guò)實(shí)現(xiàn)標(biāo)準(zhǔn)SQL的JDBC驅(qū)動(dòng),構(gòu)筑數(shù)據(jù)分析開(kāi)放生態(tài);
4、開(kāi)發(fā)大數(shù)據(jù)云。
崗位要求
1、熟練掌握C/C++、Java、Scala、Shell等開(kāi)發(fā)語(yǔ)言一種或多種,并具備實(shí)踐經(jīng)驗(yàn);
2、了解軟件工程、敏捷開(kāi)發(fā)、設(shè)計(jì)模式、數(shù)據(jù)結(jié)構(gòu)與算法等知識(shí);
3、熟練掌握一個(gè)或多個(gè)大數(shù)據(jù)主流技術(shù)框架的原理及應(yīng)用,如Hadoop、Flink、Spark、HBase、Kafka、Redis、Zookeeper等;
4、了解ETL、數(shù)據(jù)治理、元數(shù)據(jù)、流計(jì)算、批計(jì)算、數(shù)據(jù)倉(cāng)庫(kù),數(shù)據(jù)查詢等大數(shù)據(jù)知識(shí)原理并有實(shí)踐經(jīng)驗(yàn)者優(yōu)先。