小新博客 - 当AI爬虫把服务器CPU吃到100%：我的排查与拦截实录 的评论
type: channel
link: https://blog.xiaoxinbk.cn/archives/54.html
description: 本文讲述了作者在服务器CPU使用率异常高时的排查和拦截过程。作者发现问题是由AI爬虫引起的，这些爬虫无视robots.txt协议，请求量大且伪装性强。为了解决这个问题，作者通过CDN配置拦截规则...
items: xiaoxin
items: 三三

xiaoxin
type: item
date: 2026-02-06T00:26:59+08:00
description: 这个具体看你用的哪一家CDN

三三
type: item
date: 2026-01-09T13:15:36+08:00
description: 表达式预览：(http.user_agent matches "(meta-externalagent|awariobot|blexbot|claudebot|amazonbot|barkrowler|semrushbot|gptbot)") 这样吗？