python爬虫招聘_软通动力信息技术(集团)股份有限公司招聘 - 智联招聘

工作职责

• 负责目标网站的数据采集方案设计与爬虫脚本开发，确保数据的准确性与完整性。
• 针对反爬机制（如验证码、IP封禁、动态渲染）制定有效的突破策略，保障爬虫的稳定性与效率。
• 对采集到的数据进行清洗、去重与结构化处理，输出符合业务需求的数据集。
• 监控爬虫运行状态，优化爬虫性能，解决大规模数据采集过程中的技术问题。

任职要求

• 本科及以上学历，计算机、软件工程等相关专业优先。
• 精通Python编程语言，熟练使用Scrapy、BeautifulSoup、Selenium等爬虫框架与工具。
• 熟悉HTTP协议、HTML/CSS解析及AJAX动态加载原理，具备反反爬技术经验。
• 掌握数据存储技术（如MySQL、MongoDB），能独立完成数据清洗与结构化工作。
• 具备良好的问题分析与解决能力，能快速定位并修复爬虫运行中的异常。