崗位職責:
1.參與大數(shù)據(jù)開發(fā)平臺的設計,支持圖形化方式構建ETL流程,涵蓋多種數(shù)據(jù)源(如MVSQL、Oracle、Doris、Hive等)和處理算子;
2.負責數(shù)據(jù)源算子、處理算子的開發(fā)與優(yōu)化,提升ETL流程的性能和穩(wěn)定性;
3.設計并實現(xiàn)增量任務,確保數(shù)據(jù)的實時性和準確性;
4.實現(xiàn)Spark批式任務,支持大數(shù)據(jù)處理的批量化操作;
5.負責大數(shù)據(jù)任務調度系統(tǒng)的后端開發(fā)。
任職要求:
1.計算機科學、軟件工程或相關領域本科及以上學歷;
2.精通Java、Python等至少一種編程語言,具備良好的編程習慣和代碼質量意識;
3.熟悉大數(shù)據(jù)處理技術和框架,如Hadoop、Spark等;
4.具備良好的數(shù)據(jù)結構和算法基礎,熟悉常用的設計模式;
5.具備良好的溝通能力和團隊合作精神,能夠獨立完成任務并積極參與團隊協(xié)作;
6.有保險行業(yè)大數(shù)據(jù)研發(fā)經(jīng)驗者優(yōu)先考慮。