一、介绍
Cloudflare 验证是一种安全措施,网站利用该措施来区分合法用户与自动化机器人。这通常包括验证码挑战、浏览器完整性检查和速率限制等。这些检查虽有助于保护网站免受DDoS攻击、垃圾邮件等威胁,不过也对网络爬虫工具构成了重大障碍。 具体效果为:一直在加载,但始终无法通过安全检查。
特别说明: a.下文功能效果展示以:https://www.skroutz.gr/c/579/thikes-kinhtwn-thlefwnwn/m/28/Samsung.html?o=samsung为例。 b.一般使用Cloudflare验证都是外网,访问前请注意IP,需要自行科学上网。
二、处理方式
自动识别验证
自新版本8.9起,采集器可自动处理Cloudflare验证。如果网站出现Cloudflare验证码,请勾选【自动处理Cloudflare】选项;当出现Cloudflare验证时,只需点击【启动识别】,然后等待自动完成验证。
特别说明: a.该功能仅团队版及以上才可使用。 b.如果需要在抓取过程中禁用自动处理Cloudflare验证功能,请在任务设置中取消勾选[自动处理Cloudflare]选项。

