職位描述
數據爬蟲反爬蟲Python
崗位職責：
1、負責各類站點數據爬取、接口調用接入，清洗、轉換、融合入庫以及數據處理性能調優(yōu)等工作；
2、負責爬蟲系統的設計、研發(fā)與維護，實時監(jiān)控爬蟲的進度；
3、了解業(yè)務需求，基于業(yè)務需要主動尋找數據源，制定采集規(guī)劃和清洗流程；
4、探索和分析采集的數據，能夠為業(yè)務開展提供指導。
崗位要求：
1、計算機、數學或統計等相關專業(yè)，本科及以上學歷，3年以上相關工作經驗；
2、熟悉linux平臺，熟練掌握Python、SQL數據處理開發(fā)工作；
3、熟練掌握數據處理性能調優(yōu)，數據清洗、轉換、整合等數據管理和維護工作；
4、熟練掌握爬蟲采集技術及架構設計，熟悉HTTP協議 ；
5、精通node，熟練掌握js逆向技術，有APP小程序等逆向的經驗；
6、了解大語言模型如chatGPT，并在實際工作中有深度使用某個產品；
7、善于學習和團隊協作，能積極主動地參與公司產品研發(fā)等相關工作。
1、負責各類站點數據爬取、接口調用接入，清洗、轉換、融合入庫以及數據處理性能調優(yōu)等工作；
2、負責爬蟲系統的設計、研發(fā)與維護，實時監(jiān)控爬蟲的進度；
3、了解業(yè)務需求，基于業(yè)務需要主動尋找數據源，制定采集規(guī)劃和清洗流程；
4、探索和分析采集的數據，能夠為業(yè)務開展提供指導。
崗位要求：
1、計算機、數學或統計等相關專業(yè)，本科及以上學歷，3年以上相關工作經驗；
2、熟悉linux平臺，熟練掌握Python、SQL數據處理開發(fā)工作；
3、熟練掌握數據處理性能調優(yōu)，數據清洗、轉換、整合等數據管理和維護工作；
4、熟練掌握爬蟲采集技術及架構設計，熟悉HTTP協議 ；
5、精通node，熟練掌握js逆向技術，有APP小程序等逆向的經驗；
6、了解大語言模型如chatGPT，并在實際工作中有深度使用某個產品；
7、善于學習和團隊協作，能積極主動地參與公司產品研發(fā)等相關工作。
工作地點
元辰·國際A座18層
相似職位
- 周結兼職不限時間就近分配6元/次
武漢 - 武昌
北京萬古恒信科技有限公司 武漢 - 洪山
北京萬古恒信科技有限公司- 周結兼職不限時間就近分配6元/次
武漢 - 漢陽
北京萬古恒信科技有限公司 - 傾斜攝影飛手助理150元/天
武漢 - 武昌
武漢中昊空間科技有限公司 - 數據采集工程師1萬-1.6萬
武漢 - 江漢
深圳云上土地房地產資產評估咨詢有限公司 - 周結兼職不限時間就近分配6元/次
武漢 - 洪山
北京萬古恒信科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
楊女士/HR
昨日活躍立即溝通
深圳云上土地房地產資產評估咨詢有限公司深圳云上土地房地產資產評估咨詢有限公司是“房訊通”集團旗下的評估機構，成立于二〇〇三年，是國內較早的專業(yè)房地產估價顧問機構之一，擁有中華人民共和國住房和城鄉(xiāng)建設部頒發(fā)的房地產估價機構一級資質、中國土地估價師協會注冊可在全國執(zhí)業(yè)的土地評估資質、以及全國資產評估資質，是一家集房地產估價、土地估價、資產評估于一體的綜合性估價機構。
公司主頁