工作職責(zé):
* 負(fù)責(zé)Web/APP/小程序多端爬蟲(chóng)的開(kāi)發(fā),解決算法還原,加密,風(fēng)控等難點(diǎn)攻克,提升抓取的效率和質(zhì)量
* 負(fù)責(zé)分布式采集系統(tǒng)的開(kāi)發(fā),參與采集系統(tǒng)存儲(chǔ),傳輸,調(diào)度,監(jiān)控的設(shè)計(jì)與研發(fā)
* 根據(jù)產(chǎn)品和項(xiàng)目特點(diǎn),設(shè)計(jì)、開(kāi)發(fā)采集系統(tǒng)平臺(tái)的架構(gòu)設(shè)計(jì),提出合理的優(yōu)化方案,并負(fù)責(zé)設(shè)計(jì)和實(shí)現(xiàn),提高數(shù)據(jù)抓取效率
* 負(fù)責(zé)爬蟲(chóng)數(shù)據(jù)的清洗、處理、分析,以及部分運(yùn)維工作
職位要求:
* 大專(zhuān)以上學(xué)歷,計(jì)算機(jī)相關(guān)專(zhuān)業(yè),2年以上數(shù)據(jù)采集、逆向經(jīng)驗(yàn)
* 擁有良好的編碼經(jīng)驗(yàn),至少熟練掌握Python/Go/Java/JS等其中至少一種編程語(yǔ)言
* 掌握基礎(chǔ)的js逆向知識(shí),熟悉ast,能夠獨(dú)立完成經(jīng)ob,vmp混淆后的加密邏輯
* 熟悉風(fēng)控策略對(duì)抗相關(guān)技術(shù),了解設(shè)備指紋、帳號(hào)資源、行為特征等風(fēng)控對(duì)抗機(jī)制,能夠?qū)钩R?jiàn)的人機(jī)識(shí)別或驗(yàn)證碼
* 熟悉Android/iOS端安全對(duì)抗技術(shù),掌握常見(jiàn)的靜態(tài)分析、動(dòng)態(tài)調(diào)試、協(xié)議抓包、HOOK等技術(shù)原理和框架應(yīng)用者優(yōu)先
* 有大型分布式抓取系統(tǒng)的開(kāi)發(fā)、架構(gòu)經(jīng)驗(yàn)優(yōu)先
* 熟悉linux,熟練使用shell
* 熱愛(ài)互聯(lián)網(wǎng)并有著高度的工作熱情
*要有APP逆向、小程序逆向、廣告采集、直播采集 之一 背景的,擅長(zhǎng)jsvmp逆向。