職位描述
崗位職責：
1. 負責設計與開發(fā)高效穩(wěn)定的爬蟲系統(tǒng)，支持海量數(shù)據(jù)采集和分析。
2. 針對目標網(wǎng)站的反爬機制（如驗證碼、IP 封禁、動態(tài)內(nèi)容等），制定解決方案并實現(xiàn)技術(shù)突破。
3. 開發(fā)并維護分布式爬蟲系統(tǒng)，優(yōu)化任務調(diào)度與性能，提升數(shù)據(jù)爬取效率。
4. 設計數(shù)據(jù)存儲和處理流程，確保爬取數(shù)據(jù)的完整性與可用性，支持下游業(yè)務需求。
5. 對接業(yè)務部門需求，完成數(shù)據(jù)爬取任務的全生命周期管理（需求分析、爬取實現(xiàn)、數(shù)據(jù)清洗與交付）。
6. 研究并應用最新的爬蟲與反爬技術(shù)，為團隊提供技術(shù)支持與指導。
7. 編寫和維護技術(shù)文檔，分享最佳實踐，參與團隊代碼評審和技術(shù)培訓。
任職要求：
1. 具備扎實的Python編程能力，熟悉Python爬蟲框架。
2. 對數(shù)據(jù)采集和分析有深入理解，能夠處理復雜的數(shù)據(jù)結(jié)構(gòu)。
3. 能夠獨立解決技術(shù)難題，具有良好的問題解決能力。
4. 有較強的學習能力和技術(shù)研究能力，能夠跟蹤和應用新技術(shù)。
5. 具有良好的團隊合作精神和溝通能力，能夠高效配合團隊完成項目開發(fā)。
加分項：
1. 有逆向工程經(jīng)驗，熟悉抓包工具（如 Charles、Wireshark）和加密協(xié)議分析。
1. 負責設計與開發(fā)高效穩(wěn)定的爬蟲系統(tǒng)，支持海量數(shù)據(jù)采集和分析。
2. 針對目標網(wǎng)站的反爬機制（如驗證碼、IP 封禁、動態(tài)內(nèi)容等），制定解決方案并實現(xiàn)技術(shù)突破。
3. 開發(fā)并維護分布式爬蟲系統(tǒng)，優(yōu)化任務調(diào)度與性能，提升數(shù)據(jù)爬取效率。
4. 設計數(shù)據(jù)存儲和處理流程，確保爬取數(shù)據(jù)的完整性與可用性，支持下游業(yè)務需求。
5. 對接業(yè)務部門需求，完成數(shù)據(jù)爬取任務的全生命周期管理（需求分析、爬取實現(xiàn)、數(shù)據(jù)清洗與交付）。
6. 研究并應用最新的爬蟲與反爬技術(shù)，為團隊提供技術(shù)支持與指導。
7. 編寫和維護技術(shù)文檔，分享最佳實踐，參與團隊代碼評審和技術(shù)培訓。
任職要求：
1. 具備扎實的Python編程能力，熟悉Python爬蟲框架。
2. 對數(shù)據(jù)采集和分析有深入理解，能夠處理復雜的數(shù)據(jù)結(jié)構(gòu)。
3. 能夠獨立解決技術(shù)難題，具有良好的問題解決能力。
4. 有較強的學習能力和技術(shù)研究能力，能夠跟蹤和應用新技術(shù)。
5. 具有良好的團隊合作精神和溝通能力，能夠高效配合團隊完成項目開發(fā)。
加分項：
1. 有逆向工程經(jīng)驗，熟悉抓包工具（如 Charles、Wireshark）和加密協(xié)議分析。
工作地點
元創(chuàng)汽配電商園A區(qū)236室大展國際集團
相似職位
- 研發(fā)工程師1.2萬-2萬
廈門 - 思明
嘉庚創(chuàng)新實驗室 - 高級python爬蟲工程師1.5萬-2.3萬
廈門 - 湖里
上海大展國際物流有限公司 - ptyhon后端開發(fā)師8千-1.3萬
廈門 - 湖里
上海劍及智能科技有限公司 - Python開發(fā)（應屆生）1萬-1.5萬
廈門 - 思明
睿云聯(lián)(廈門)網(wǎng)絡通訊技術(shù)有限公司 - Python開發(fā)實習生150-200/天
廈門 - 思明
睿云聯(lián)(廈門)網(wǎng)絡通訊技術(shù)有限公司 - python工程師/算法工程師8千-1萬
廈門 - 集美
廈門鎢業(yè)股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
喻義愛/人事經(jīng)理
剛剛活躍立即溝通
上海大展國際物流有限公司不管你是獅子還是羚羊，當太陽升起時，你最好開始奔跑！這是一份把控全球的事業(yè)，每天有壓力有動力；這是一份與時俱進的事業(yè)，每天有收獲有喜悅；不懂，有師傅帶你，只要你肯學；收入，下有保底上不封頂，只要你肯努力；我們歡迎積極上進的你，加入大展、共同發(fā)展！公司簡介：公司創(chuàng)建于1999年，現(xiàn)有員工115人，在上海、廈門、贛州、霍爾果斯、深圳、香港、洛杉磯等地設有分公司或辦事處。公司是交通部批準的NVOCC(NV01420)，世界貨運聯(lián)盟WCA會員(ID:13291)，阿里巴巴一拍檔合作伙伴。曾榮獲“五星物流組織亞太區(qū)最佳代理獎”、“錦程全球十佳會員”、“FNC貨運協(xié)會杰出成就大獎”等獎項。優(yōu)勢服務：一、亞馬遜FBA物流www.fba400.com；二、DDP美國、歐盟www.ddpshipping.com；三、中亞五國多式聯(lián)運www.cargostan.com；四、SQ、EY、NH空運包板；五、MAERSK、COSCO全國訂艙代理www.booking400.com;六、重大件項目運輸；大展公司是民營企業(yè),經(jīng)過十多年的發(fā)展,形成了以人為本的企業(yè)文化和專業(yè)高效的業(yè)務系統(tǒng),公司有著積極的工作氛圍、較好的薪資福利、完善的培訓體系和清晰的晉升通道。未來的三年將是大展物流快速發(fā)展的三年，歡迎有志于從事國際物流事業(yè)的年輕人加入大展、共同發(fā)展！福利待遇：基本工資+績效獎金+六險一金+午餐補貼+下午茶+生日會+讀書會+年會+年度休假+免費體檢+專業(yè)培訓+職業(yè)發(fā)展雙軌道……
公司主頁