OpenAI 推出网络爬虫机器人 GPTBot

OpenAI 推出了网络爬虫机器人 GPTBot，在网络上收集信息数据以改进未来的 AI 模型。据报道，GPTBot 应该会严格遵守任何付费墙的规则，不会抓取需要付费的信息，并且也不会收集能追踪到个人身份的数据。

与此同时，OpenAI 也把是否要把自己的网站数据供 GPTBot 抓取的选择交到给网站所有者。他们可自行修改其 robots.txt 文件。

推荐阅读：