崗位內(nèi)容:
1. 負(fù)責(zé)風(fēng)控系統(tǒng)所需的大數(shù)據(jù)平臺的搭建、優(yōu)化和維護(hù);
2. 設(shè)計并實(shí)現(xiàn)大數(shù)據(jù)處理流程,提取和分析風(fēng)控相關(guān)數(shù)據(jù);
3. 協(xié)助其他團(tuán)隊成員進(jìn)行數(shù)據(jù)處理和分析工作,提供技術(shù)支持;
4. 對大數(shù)據(jù)平臺各個使用方提供技術(shù)支持;
崗位要求:
1. 通用能力要求
(1)本科及以上學(xué)歷,3年以上大數(shù)據(jù)相關(guān)經(jīng)驗(yàn),有過大數(shù)據(jù)平臺搭建經(jīng)驗(yàn)者
(2)具備有較強(qiáng)的溝通能力和執(zhí)行能力;
(3)具有優(yōu)秀的團(tuán)隊合作精神、敬業(yè)精神;
2. 技術(shù)能力要求
(1)掌握 hadoop,spark, hive, Tez, flink等組件的工作原理;
(2)熟悉大數(shù)據(jù)平臺組件升級、遷移、監(jiān)控、及自動化運(yùn)維,有豐富的故障處理和性能調(diào)優(yōu)經(jīng)驗(yàn)優(yōu)先;
(3)熟悉Linux/windows操作系統(tǒng)及存儲技術(shù),熟悉Linux常用命令;
(4)熟悉Shell腳本或Python編程;
(5)了解 kafka,zookeeper,doris,clickhouse,es;
3. 業(yè)務(wù)能力要求
(1)熟悉風(fēng)控業(yè)務(wù)數(shù)據(jù)的特點(diǎn)和處理流程;
(2)能夠設(shè)計并實(shí)現(xiàn)高效的數(shù)據(jù)處理和分析方案;
(3)具有油氣行業(yè)、風(fēng)控行業(yè)相關(guān)系統(tǒng)經(jīng)驗(yàn)者優(yōu)先;