www.bhdu.cn-夜肉伦伦影院无码 ,国产精品www夜色视频,3d动漫精品啪啪一区二区免费,久久婷婷综合缴情亚洲狠狠

崗位職責(zé)：
1、參與數(shù)據(jù)層建設(shè)，進(jìn)行多平臺(tái)、不同維度信息的抓取和分析；
2、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則，實(shí)時(shí)監(jiān)控爬蟲的進(jìn)度和預(yù)警處理，保障數(shù)據(jù)獲取；
3、實(shí)現(xiàn)數(shù)據(jù)提取、清洗、結(jié)構(gòu)化、入庫(kù)、統(tǒng)計(jì)分析等需求
任職要求：
需要英語(yǔ)4級(jí)以上或有英語(yǔ)基礎(chǔ)的（讀寫）
1、有從事網(wǎng)絡(luò)爬蟲、網(wǎng)頁(yè)去重、網(wǎng)頁(yè)信息抽取的經(jīng)驗(yàn)。
2、從結(jié)構(gòu)化的和非結(jié)構(gòu)化的數(shù)據(jù)中獲取信息，掌握正則表達(dá)式；精通一種開源爬蟲框架，如scrapy、scrapy-redis、requests、selenium、puppeteer等。
3、熟悉各種反爬，如驗(yàn)證碼、滑塊、模擬登陸等，有能力破解賬號(hào)限制/ip限制，解決IP封禁、參數(shù)加密、字體反爬、驗(yàn)證碼、賬號(hào)封禁等問(wèn)題。
4、有獨(dú)立的分布式爬蟲項(xiàng)目開發(fā)經(jīng)驗(yàn)(有大批量抓取linkedin\youtube\facebook經(jīng)驗(yàn)優(yōu)先)。
5、有平臺(tái)模擬登錄，一鍵自動(dòng)發(fā)布圖文經(jīng)驗(yàn)優(yōu)先（非必須）
包吃住、13薪