職位描述: 1、負(fù)責(zé)大語(yǔ)言模型在Function call方向的效果和質(zhì)量評(píng)估、評(píng)估標(biāo)準(zhǔn)、體系搭建,與產(chǎn)品、算法團(tuán)隊(duì)充分溝通協(xié)作深入理解評(píng)估需求; 2、參與各類業(yè)務(wù)調(diào)研分析、評(píng)估方案制定并組織評(píng)估,能借助數(shù)據(jù)分析等方式對(duì)問(wèn)題進(jìn)行拆解分析,定位模型各類體驗(yàn)問(wèn)題,結(jié)合評(píng)估及多種視角提供解決思路及優(yōu)化方向,輸出不有價(jià)值的分析報(bào)告輔助模型迭代化; 3、深度挖掘Function call能力,結(jié)合市面主流模型表現(xiàn)和預(yù)期,探索Function call的更多可能性。
職位要求: 1、本科及以上學(xué)歷,具備大模型評(píng)測(cè)或相關(guān)產(chǎn)品經(jīng)驗(yàn)。 2、有一定的代碼基礎(chǔ),可執(zhí)行處理數(shù)據(jù)的腳本工作。 3、有項(xiàng)目管理經(jīng)驗(yàn),能夠清晰、準(zhǔn)確的傳達(dá)想法和思路,有ddl意識(shí)。 4、過(guò)往有Function call相關(guān)工作經(jīng)歷,優(yōu)先考慮。