職位描述
Python爬蟲開發(fā)ScrapySPLASHSelenium
工作內(nèi)容：
1.設(shè)計(jì)和實(shí)現(xiàn)高效的網(wǎng)絡(luò)爬蟲，用于抓取結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。
2.處理和解析各種數(shù)據(jù)格式，包括HTML、XML和JSON。
3.優(yōu)化爬蟲性能，確保數(shù)據(jù)抓取的效率和準(zhǔn)確性。
4.實(shí)現(xiàn)數(shù)據(jù)去重和清洗邏輯，提高數(shù)據(jù)質(zhì)量。
5.監(jiān)控爬蟲運(yùn)行狀態(tài)，及時(shí)處理異常和失敗情況。
6.與團(tuán)隊(duì)合作，不斷改進(jìn)爬蟲策略和工具。
崗位要求：
1.計(jì)算機(jī)科學(xué)或相關(guān)專業(yè)。
2.必須有爬蟲開發(fā)經(jīng)驗(yàn)，熟悉splash/Scrapy/Selenium優(yōu)先
3.精通Python
4.熟悉至少一種數(shù)據(jù)庫技術(shù)，例如 MySQL、PostgreSQL 或 MongoDB。
5.熟悉 Linux 操作系統(tǒng)。
6.良好的溝通和團(tuán)隊(duì)合作能力。
7.工作經(jīng)驗(yàn)2年及以上
1.設(shè)計(jì)和實(shí)現(xiàn)高效的網(wǎng)絡(luò)爬蟲，用于抓取結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。
2.處理和解析各種數(shù)據(jù)格式，包括HTML、XML和JSON。
3.優(yōu)化爬蟲性能，確保數(shù)據(jù)抓取的效率和準(zhǔn)確性。
4.實(shí)現(xiàn)數(shù)據(jù)去重和清洗邏輯，提高數(shù)據(jù)質(zhì)量。
5.監(jiān)控爬蟲運(yùn)行狀態(tài)，及時(shí)處理異常和失敗情況。
6.與團(tuán)隊(duì)合作，不斷改進(jìn)爬蟲策略和工具。
崗位要求：
1.計(jì)算機(jī)科學(xué)或相關(guān)專業(yè)。
2.必須有爬蟲開發(fā)經(jīng)驗(yàn)，熟悉splash/Scrapy/Selenium優(yōu)先
3.精通Python
4.熟悉至少一種數(shù)據(jù)庫技術(shù)，例如 MySQL、PostgreSQL 或 MongoDB。
5.熟悉 Linux 操作系統(tǒng)。
6.良好的溝通和團(tuán)隊(duì)合作能力。
7.工作經(jīng)驗(yàn)2年及以上
查看全部
工作地點(diǎn)
百度科技園
入職公司信息
- 入職公司: 北京百度網(wǎng)訊科技有限公司
- 公司地址: 北京朝陽區(qū)酒仙橋北路7號(hào)電通時(shí)代廣場2號(hào)樓A區(qū)電通創(chuàng)意廣場
- 公司人數(shù): 10000人以上
認(rèn)證資質(zhì)
勞務(wù)派遣經(jīng)營許可認(rèn)證
勞務(wù)派遣經(jīng)營許可證是由國家人力資源與社會(huì)保障相關(guān)部門頒發(fā)，代表人才經(jīng)紀(jì)人所在企業(yè)可以合法開展勞務(wù)派遣相關(guān)業(yè)務(wù)的資質(zhì)證件。展示該標(biāo)簽代表該企業(yè)發(fā)布此職位時(shí)已上傳《勞務(wù)派遣許可證》并經(jīng)由平臺(tái)審驗(yàn)通過。
相似職位
- 金融爬蟲工程師（python/PHP/JS）1萬-1.2萬
北京 - 海淀
深圳市潤迅數(shù)智科技有限公司 - 爬蟲數(shù)據(jù)抓取工程師8千-1.2萬
北京 - 海淀
深圳市潤迅數(shù)智科技有限公司 - python爬蟲工程師1萬-1.2萬
北京 - 海淀
北京國科銳觀科技有限公司 - 爬蟲數(shù)據(jù)采集工程師9千-1.6萬
北京 - 海淀
拓爾思信息技術(shù)股份有限公司 - 高級(jí)爬蟲工程師2萬-3.5萬
北京 - 海淀
深圳市萬氪睿速科技有限公司 - 爬蟲數(shù)據(jù)抓取工程師8千-1.2萬
北京 - 海淀
深圳市潤迅數(shù)智科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動(dòng)招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
楊先生/招聘經(jīng)理
剛剛活躍立即溝通
首聘(北京)科技有限公司首聘(北京)科技有限公司成立于2015年08月31日，注冊(cè)地位于北京市朝陽區(qū)霄云路40號(hào)院1號(hào)樓12層。經(jīng)營范圍包括一般項(xiàng)目：技術(shù)服務(wù)、技術(shù)開發(fā)、技術(shù)咨詢、技術(shù)交流、技術(shù)轉(zhuǎn)讓、技術(shù)推廣；企業(yè)管理咨詢；社會(huì)經(jīng)濟(jì)咨詢服務(wù)；軟件開發(fā)；市場調(diào)查（不含涉外調(diào)查）；計(jì)算機(jī)系統(tǒng)服務(wù)；電子產(chǎn)品銷售；通訊設(shè)備銷售；計(jì)算機(jī)軟硬件及輔助設(shè)備批發(fā)；計(jì)算機(jī)軟硬件及輔助設(shè)備零售；人力資源服務(wù)（不含職業(yè)中介活動(dòng)、勞務(wù)派遣服務(wù)）；外賣遞送服務(wù)；物業(yè)管理；園林綠化工程施工；城市綠化管理；電子、機(jī)械設(shè)備維護(hù)（不含特種設(shè)備）；電氣設(shè)備修理；通用設(shè)備修理；專用設(shè)備修理；停車場服務(wù)。（除依法須經(jīng)批準(zhǔn)的項(xiàng)目外，憑營業(yè)執(zhí)照依法自主開展經(jīng)營活動(dòng)）許可項(xiàng)目：建筑勞務(wù)分包；第二類增值電信業(yè)務(wù)；測繪服務(wù)；勞務(wù)派遣服務(wù)；食品銷售。（依法須經(jīng)批準(zhǔn)的項(xiàng)目，經(jīng)相關(guān)部門批準(zhǔn)后方可開展經(jīng)營活動(dòng)，具體經(jīng)營項(xiàng)目以相關(guān)部門批準(zhǔn)文件或許可證件為準(zhǔn)）（不得從事國家和本市產(chǎn)業(yè)政策禁止和限制類項(xiàng)目的經(jīng)營活動(dòng)。）首聘(北京)科技有限公司對(duì)外投資12家公司，具有17處分支機(jī)構(gòu)
公司主頁