I posted to HN, and then my website was flooded with AI bot traffic
sprinklz.io 开发者在 HN 分享产品后,网站持续变慢,排查发现近半流量来自一家高频抓取网页并生成 AI 新闻邮件的服务。端点统计显示,多数请求甚至没有尝试获取新闻文章,也没有运行渲染页面所需的 JavaScript。开发者封禁了该服务,添加 robots.txt 和限流措施,并在过去几周改进基础设施以提升性能。
sprinklz.io 开发者在 HN 分享产品后,网站持续变慢,排查发现近半流量来自一家高频抓取网页并生成 AI 新闻邮件的服务。端点统计显示,多数请求甚至没有尝试获取新闻文章,也没有运行渲染页面所需的 JavaScript。开发者封禁了该服务,添加 robots.txt 和限流措施,并在过去几周改进基础设施以提升性能。