崗位職責(zé): 1、設(shè)計(jì)并構(gòu)建高可用、高性能、可擴(kuò)展的大數(shù)據(jù)平臺(tái)架構(gòu),包括數(shù)據(jù)存儲(chǔ)、處理、分析和可視化等環(huán)節(jié)。 2、評(píng)估并選擇合適的大數(shù)據(jù)技術(shù)和工具,如Hadoop、Spark、Kafka、Elasticsearch等,并進(jìn)行系統(tǒng)集成和部署。 3、優(yōu)化數(shù)據(jù)處理和分析流程,確保數(shù)據(jù)的準(zhǔn)確性、完整性和安全性。 4、制定并實(shí)施數(shù)據(jù)治理策略,提升數(shù)據(jù)的質(zhì)量和可信度。 5、監(jiān)控并優(yōu)化大數(shù)據(jù)平臺(tái)的性能,進(jìn)行容量規(guī)劃,確保系統(tǒng)的穩(wěn)定運(yùn)行。 6、跟蹤大數(shù)據(jù)技術(shù)的最新發(fā)展,提出創(chuàng)新的技術(shù)解決方案,提升平臺(tái)的競爭力。 7、與團(tuán)隊(duì)成員緊密合作,共同解決技術(shù)問題,推動(dòng)項(xiàng)目的順利進(jìn)行。
任職要求: 1、計(jì)算機(jī)科學(xué)、信息技術(shù)或相關(guān)領(lǐng)域本科及以上學(xué)歷。 2、至少3年以上大數(shù)據(jù)平臺(tái)架構(gòu)設(shè)計(jì)或相關(guān)工作經(jīng)驗(yàn),有教育行業(yè)背景者優(yōu)先。 3、精通大數(shù)據(jù)相關(guān)技術(shù),如Hadoop、Spark、Hive、Kafka等,具備分布式系統(tǒng)設(shè)計(jì)和開發(fā)能力,熟悉Hadoop生態(tài)系統(tǒng)者優(yōu)先。 4、熟悉數(shù)據(jù)庫原理,掌握SQL、NoSQL數(shù)據(jù)庫的使用和優(yōu)化技巧。 5、有基礎(chǔ)架構(gòu)經(jīng)驗(yàn),Java基礎(chǔ)扎實(shí),熟練掌握Python、Golang 等至少一種開發(fā)語言;有大型分布式、大數(shù)據(jù)量、高并發(fā)、高負(fù)載、高可用性系統(tǒng)設(shè)計(jì)開發(fā)經(jīng)驗(yàn)。 6、具備良好的數(shù)據(jù)建模和設(shè)計(jì)能力,熟悉數(shù)據(jù)倉庫和ETL流程。 7、具備出色的溝通能力和團(tuán)隊(duì)協(xié)作精神,能夠與不同背景的團(tuán)隊(duì)成員有效溝通。 8、具備良好的問題解決能力和創(chuàng)新意識(shí),能夠獨(dú)立思考并解決問題。 9、對(duì)教育科技行業(yè)有深入了解,熟悉教育行業(yè)的數(shù)據(jù)特點(diǎn)和業(yè)務(wù)需求。 10、熟悉或者有云計(jì)算平臺(tái)(如AWS、Azure、阿里云等,至少一種)使用經(jīng)驗(yàn)。