崗位職責：
負責設計、開發和維護高效、穩定的 Python 爬蟲程序，針對國際合法公開網站進行數據采集工作。
研究目標國際網站的結構和反爬機制，制定合理的爬取策略，確保爬取過程的順暢與合規，解決爬取過程中遇到的各類技術問題，如 IP 封鎖、驗證碼識別等。
對爬取到的數據進行清洗、整理和存儲，保證數據的準確性、完整性和安全性。
與團隊成員緊密協作，根據業務需求，及時調整爬蟲策略和數據采集范圍，為業務決策提供數據支持。
關注國際數據相關法律法規及目標網站的 Robots 協議，確保爬蟲工作嚴格遵守相關規定，規避法律風險。

任職要求：
本科及以上學歷，計算機相關專業，[5] 年以上 Python 爬蟲開發經驗，具備豐富的國際合法公開網站爬取經驗。
熟練掌握 Python 編程語言，精通 Scrapy、PySpider 等主流爬蟲框架，以及 Requests、BeautifulSoup、Selenium 等相關庫的使用。
熟悉 HTTP/HTTPS 協議，了解常見的網絡請求方式和數據傳輸格式，如 JSON、XML 等。
具備良好的反爬技術應對能力，熟悉代理 IP、Cookie 池、User-Agent 偽裝等反爬策略的實現。
熟悉至少一種數據庫，如 MySQL、MongoDB 等，能夠熟練進行數據的存儲和查詢操作。
了解國際數據相關法律法規（如歐盟 GDPR、美國 CFAA 等）以及目標網站的 Robots 協議，有數據合規處理意識和經驗。
具備良好的問題分析和解決能力、溝通協調能力以及團隊合作精神，工作積極主動，有責任心。

薪資面議。

本公司堅決遵守國家法律法規及國際相關規定，僅接受通過合法途徑（如官方 API、公開授權接口等）進行國際網站數據獲取的經驗。
應聘者需確保所提供的項目經驗真實、合法，面試過程中我們將對相關細節進行核實。
入職后，員工需嚴格按照公司規定和相關法律法規開展爬蟲工作，公司會提供必要的資源和支持以保障工作的合規性。
期待您的加入，與我們一起在合法合規的前提下，挖掘數據的價值，共創美好未來！