云聚 AI Token Plan 满 199 减 35 元
port:80 AI Junkie
AI 重度玩家的工程笔记本
DigitalOcean 开发者云
Anyrouter 开放可编程的智能路由
共 5 篇文章

标签:网络爬虫

亚马逊Amazonbot更新:终于开始遵守robots.txt爬虫协议

针对亚马逊爬虫Amazonbot长期无视网站抓取规则的争议,最新动态显示其已开始严格遵守robots.txt协议。此前,该爬虫因在未获授权的情况下抓取网站数据用于AI训练而受到广泛批评。此次行为修正意味着网站所有者现在可以通过配置标准协议文...

赞(0)ToyToy前沿 阅读(63)

GLM Claude Code · 国产平替不封号

官方 Claude Code 又涨价又要 KYC,封号还得重配环境?智谱 GLM 兼容 Claude Code,稳定不封号、价格友好,注册后把现有 Claude Code 工作流直接切过来继续用。

立即体验 GLM查看套餐价格