中高级python爬虫工程师招聘_华能信息技术有限公司招聘 - 智联招聘

岗位职责（外包派遣用工）

• 负责设计、开发和维护高效稳定的Python爬虫系统，抓取指定网站或接口的数据
• 优化爬虫性能，深入研究并突破各类反爬机制，确保数据抓取的准确性和及时性
• 对抓取的数据进行清洗、存储和处理，为后续数据分析提供支持
• 监控爬虫运行状态，及时处理异常情况并优化系统稳定性
• 应用机器学习与AI技术提升爬虫智能化水平
• 使用Docker等容器技术实现爬虫系统的快速部署和扩展

任职要求：

• 本科及以上学历，计算机相关专业，5年以上Python爬虫开发经验
• 精通Python语言，熟悉Scrapy、Requests、BeautifulSoup等爬虫框架和库
• 熟悉HTTP协议、HTML/CSS/JavaScript，精通各类反爬机制及应对策略
• 熟悉MySQL、MongoDB等数据库，具备数据清洗和处理能力
• 了解机器学习与AI技术在实际爬虫项目中的应用
• 熟练使用Docker等容器化技术进行系统部署