OpenAI 推出了 GPTBot——一个可以自动从整个互联网抓取数据的网络爬虫。 得到的这些数据则会被用来训练像 GPT-4 和 GPT-5 这样的 AI 模型！ 前段时间，抓取平台用户数据风波，Reddit 网友吵翻了天。 今天，OpenAI 推出了一个网络爬虫工具 GPTBot，能够自动抓取网站的数据。 如何使用？ OpenAI 在发布的文档中表示，网络爬虫将过滤删除需要付费强访问的来源，同时也会删除个人身份信息（PII）或违反其政策的文本。 GPTBot 抓取的数据，被用来训练 GPT-4 或