一、崗位職責?
必須熟練掌握 復雜數據爬取/JS逆向/腳本開發/高并發高可用/RPA
基于已有爬蟲經驗，負責合法網站的數據抓取，解決動態頁面、驗證碼 / IP 封禁等反爬問題；?
用自動化腳本經驗處理復雜頁面數據提取（如嵌套、動態加載），應對頁面 JS 邏輯；?
優化爬蟲性能，實現高并發低資源消耗，保障抓取效率；?
對接公司后端接口：完成腳本可視化頁面的賬號登錄、數據上傳，處理接口異常；?
結合 AI 優化自動化流程（如智能處理數據），參與谷歌插件、Python 自動化腳本開發；?
維護爬蟲系統穩定，制定監控和重試機制。?
二、任職要求?
核心能力（需有實際項目經驗）?
3 年以上 Python 開發經驗，其中 2 年 + 爬蟲 + 自動化腳本相關經驗，實際做過爬蟲項目和自動化腳本開發，會用 Scrapy、Requests 等工具；?
懂反爬策略（如 IP 池、模擬瀏覽器），能獨立解決爬蟲中的反爬問題；?
會用自動化腳本處理復雜頁面，應對 JS 加密、動態渲染場景；?
有異步編程、高并發優化經驗，能控制爬蟲的 CPU / 內存消耗；?
會對接 RESTful API，處理接口登錄、參數校驗、異常重試；?
了解如何將 AI 融入自動化流程（如 AI 輔助數據處理、腳本優化）。?
加分項?
做過谷歌瀏覽器插件（Chrome Extension）；?
有 Python 自動化腳本 + AI 應用的成熟案例；?
會用 Redis、MongoDB，或有分布式爬蟲經驗；?
會用抓包工具（Fiddler/Charles）、接口調試工具（Postman）；?
做過腳本可視化頁面（如 PyQt、Streamlit）并對接過后端接口。?
軟技能?
有合規意識，只做合法授權的爬蟲工作；?
能獨立解決技術問題，愿意調研新方法；?
能和后端團隊順暢溝通，配合推進項目；?
重視代碼質量，能及時響應線上問題。