职位描述：1.负责设计和开发分布式网络爬虫系统，进行多平台信息的抓取和分析。2.优化爬虫策略和防屏蔽规则，提升网页抓取的效率和质量。3.参与爬虫核心算法的策略优化，研究业界最新技术，提升系统性能。4.负责解决爬虫过程中的疑难问题，如验证码识别、JS加密破解、IP封禁等。5.与团队合作，完成数据抽取、清洗、存储等工作。职位要求：1.计算机相关专业本科及以上学历，2年以上Python开发经验。2.熟悉爬虫原理，精通主流爬虫框架（如Scrapy、Requests、BeautifulSoup等）。3.熟悉常见的反爬机制，并能设计相应的应对策略。4.熟悉HTTP协议，了解HTML、CSS、****等前端技术。5.有良好的编程习惯和文档编写能力，具备较强的学习能力和解决问题的能力。