【崗位職責(zé)】
1.負(fù)責(zé)多源異構(gòu)數(shù)據(jù)的實(shí)時(shí)流處理、離線批處理系統(tǒng)的設(shè)計(jì)和開發(fā)工作;
2.負(fù)責(zé)衛(wèi)星數(shù)據(jù)處理程序開發(fā)和優(yōu)化,并及時(shí)解決ETL相關(guān)技術(shù)問題;
3.負(fù)責(zé)數(shù)據(jù)質(zhì)量檢查和管理,確保數(shù)據(jù)的準(zhǔn)確性和完整性;
4.確保數(shù)據(jù)的安全性和隱私性,遵守相關(guān)的法律法規(guī)和政策;
5.負(fù)責(zé)公司分布式反演調(diào)度程序的更新、維護(hù)、重構(gòu)工作,包含架構(gòu)的優(yōu)化、調(diào)度流程的優(yōu)化以及可擴(kuò)展性。
【任職要求】
1.遙感,無線通信或計(jì)算機(jī)相關(guān)專業(yè)等相關(guān)專業(yè)碩士及以上學(xué)歷;
2.具有3年以上ETL開發(fā)相關(guān)經(jīng)驗(yàn),熟悉數(shù)據(jù)提取、數(shù)據(jù)加工、數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)展示等相關(guān)技術(shù);
3.熟練掌握 Java 、Python等編程語言,并熟悉 Linux工作環(huán)境;
4.熟悉 Hive,HBase,Spark,F(xiàn)link等一種以上數(shù)據(jù)處理工具和技術(shù);
5.熟悉數(shù)據(jù)中臺(tái)建設(shè)和數(shù)據(jù)模型設(shè)計(jì),具有相關(guān)項(xiàng)目實(shí)施經(jīng)驗(yàn);
6.對(duì)航天、衛(wèi)星等知識(shí)感興趣,了解衛(wèi)星遙感的基本知識(shí);
7.具有良好的團(tuán)隊(duì)協(xié)作和溝通能力,能夠與其他工程師和科學(xué)家合作;
8.可接收實(shí)習(xí)生。