在跟爬蟲的戰爭之中，很容易打到一些友好的爬蟲，像是 Google、Bing、...等搜尋引擎，還有像是 Ahrefs 這種 SEO 的輔助工具，我們要在自己的應用程式當中去過濾出所有的友好爬蟲，是一件苦差事，不過如果我們有使用 Cloudflare 的話，Cloudflare 有自己維護友好爬蟲的清單，再搭配他們自家的 Transform Rules 服務，我們就可以很輕鬆地過濾出友好的爬蟲。
2021-08-19
[小菜一碟] 使用 Cloudflare 的 Transform Rules 功能協助我們輕鬆判定友好爬蟲（Bot、Crawler）
- 484
- 0
- Cloudflare
