職位描述
數(shù)據(jù)采集爬蟲開發(fā)反爬蟲分布式爬蟲ScrapyDjangoFlask
崗位職責：
1. 根據(jù)業(yè)務需求，研究爬蟲策略和防屏蔽規(guī)則，設計和開發(fā)分布式爬蟲，支持高并發(fā)多平臺抓取；
2. 負責網頁信息抽取、簡單清洗、數(shù)據(jù)入庫等開發(fā)；
3. 提升爬蟲穩(wěn)定性及可擴展性，充分利用資源，優(yōu)化爬蟲效率和質量。
任職資格：
1. 計算機軟件及相關專業(yè)本科畢業(yè)；
2. 1年以上爬蟲項目開發(fā)經驗，優(yōu)秀畢業(yè)生亦可；
3. 熟悉爬蟲原理及常見的反爬蟲技術，如cookie、js加密、base64等；
3. 熟練運用python及多進程、多線程開發(fā)；
4. 熟練使用scrapy、requests、selenium、pyppeteer等爬蟲包；
5. 熟悉html，正則、xpath等提取技術；
6. 熟悉Mysql、Redis等數(shù)據(jù)庫及相關操作；
7. 熟悉Linux基礎命令；
8. 有Django/Flask等web框架開發(fā)經驗者優(yōu)先。
職位福利：五險一金、績效獎金、餐補、通訊補助、帶薪年假、補充醫(yī)療保險、定期體檢、彈性工作
工作地點
拓爾思集團總部6層
相似職位
- 數(shù)據(jù)工程師6千-1.2萬
北京 - 門頭溝
北京邁迪培爾信息技術有限公司 - python爬蟲工程師1.7萬-1.8萬
北京 - 海淀
首聘(北京)科技有限公司 - 爬蟲數(shù)據(jù)采集工程師9千-1.6萬
北京 - 海淀
拓爾思信息技術股份有限公司 - 爬蟲數(shù)據(jù)抓取工程師8千-1.2萬
北京 - 海淀
深圳市潤迅數(shù)智科技有限公司 - Python爬蟲工程師1萬-1.6萬
北京 - 西城
海峰科技 - python爬蟲工程師（互聯(lián)網大廠）1.6萬-1.7萬
北京 - 海淀
武漢佰鈞成技術有限責任公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
寧姜燕/HRBP
立即溝通
拓爾思信息技術股份有限公司拓爾思信息技術股份有限公司成立于1993年，是中文全文檢索技術的開創(chuàng)者，國內領先的人工智能、大數(shù)據(jù)和數(shù)據(jù)安全產品及服務提供商。公司2011年在深圳證券交易所創(chuàng)業(yè)板上市，股票代碼300229。公司員工2000多人，在全國設有4大區(qū)域中心和31個城市設有分支機構。公司自主研發(fā)的產品已被國內外10000家企業(yè)級用戶廣泛使用。
公司主頁