崗位職責：
1. 負責設計和開發(fā)高效、穩(wěn)定的網絡爬蟲系統，針對不同網站結構制定爬取策略，處理反爬機制，確保數據采集的準確性和時效性。
2. 參與爬蟲系統的優(yōu)化與維護，解決爬取過程中的性能瓶頸、數據去重、異常處理等問題，提升系統穩(wěn)定性和爬取效率。
3. 結合業(yè)務需求，對爬取的數據進行清洗、解析和結構化處理，為后續(xù)數據分析或應用提供支持。
4.對逆向加密，算法還原，jsvmp補環(huán)境等有一定的操作基礎

任職要求：
1. 本科及以上學歷，計算機、軟件工程等相關專業(yè)，2年以上爬蟲開發(fā)經驗。
2. 熟練掌握Python編程語言，精通Scrapy、BeautifulSoup、Requests等爬蟲框架和工具。
3. 熟悉各類反爬機制（如驗證碼、IP封鎖、JS混淆等），有豐富的反爬解決方案經驗。
4. 具備llm部署經驗，熟悉模型部署流程、性能優(yōu)化及故障排查。
5. 有MCP（模型控制平臺）相關開發(fā)或使用經驗者優(yōu)先，了解模型監(jiān)控、調度等核心功能。
6. 熟悉數據庫（如MySQL、MongoDB）的使用，具備數據處理和分析能力。
7. 具備良好的問題分析與解決能力，較強的溝通能力和團隊協作精神。