崗位職責(zé):
1、維護(hù)Milvus向量庫(kù)集群
2、知識(shí)向量化:建立、維護(hù)向量數(shù)據(jù)庫(kù)、文檔拆分、字詞句段落的向量化
3、知識(shí)檢索:Embedding技術(shù)在航運(yùn)物流知識(shí)庫(kù)的語(yǔ)義分辨率分析:語(yǔ)義空間與高維向量空間的關(guān)聯(lián)分布
4、知識(shí)檢索:向量數(shù)據(jù)庫(kù)多維字段在語(yǔ)義上融合檢索,提升檢索精準(zhǔn)度
5、知識(shí)庫(kù)數(shù)據(jù)的動(dòng)態(tài)實(shí)時(shí)更新
崗位要求:
1、本科及以上,數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)算機(jī)、機(jī)器學(xué)習(xí)等專業(yè)畢業(yè),擁有英文文獻(xiàn)閱讀能力,優(yōu)秀的邏輯思維能力和學(xué)習(xí)能力,5年以上NLP算法和產(chǎn)品開(kāi)發(fā)經(jīng)驗(yàn)
2、熟悉推薦領(lǐng)域的召回、檢索技術(shù)體系,具有深入分析每種召回策略的優(yōu)缺點(diǎn)的能力
3、對(duì)業(yè)界向量數(shù)據(jù)庫(kù)技術(shù)有深入了解,包括但不限于:Faiss、Milvus、
4、對(duì)向量索引技術(shù)的發(fā)展和優(yōu)缺點(diǎn)有深入了解,包括但不限于:LSH,k-d tree, PQ, PQ Fast Scan;
5、能根據(jù)業(yè)務(wù)需要?jiǎng)?chuàng)新融合結(jié)構(gòu)化檢索索引、非結(jié)構(gòu)化檢索索引進(jìn)行高準(zhǔn)確率的檢索召回策略
6、追蹤業(yè)界向量化模型的訓(xùn)練的最新發(fā)展,開(kāi)展航運(yùn)物流向量模型的訓(xùn)練與推理服務(wù)