我读了 Herman 的博客文章“ The Great Scrape ”,介绍了 AI 抓取及其对熊掌记的影响。作为bear.css.observer背后的人,他的新安全措施和严格的 Cloudflare 检查给我的小worker.js 设置带来了麻烦。谈论被夹在中间……
我想尊重 Herman 对抗 AI 抓取的斗争,同时让 bear.css.observer 为真实用户服务。我的解决方案通过使用类似浏览器的标头、正确管理 cookie、处理质询响应步骤以及实施适当的缓存控制来处理 Cloudflare 的验证。
这使我的网络工作人员能够正常运行,而不会损害 Bear 的安全性 – 我只是确保合法请求能够正确通过。当然,随着安全性的发展,这可能会在明天被打破,这很好——在构建非官方工具时会出现这种情况。我百分百支持赫尔曼保护贝尔。
就我个人而言,我很高兴我的自动化和网络钩子仍然有效。由于 Bear 没有官方 API,因此我的工作流程需要这些。到目前为止,我同步和重建博客的“肮脏”方法一直很可靠。祈祷它保持这种状态,同时尊重赫尔曼试图做的事情。