(资料图)

OpenAI表示，GPTBot使用专有网页UA表示其爬虫身份，完整UA字符串为（MozillaKHTML,likeGecko;compatible;GPTBot/1.0;+https:/gptbot），任何网站管理者都可以自由允许或阻止该爬虫工具进行数据采集。▲图源OpenAI▲图源OpenAIOpenAI声称，若网站管理员不希望被爬虫搜集资料，管理员可以在网站服务器的robots.txt文件中完全禁止GPTBot抓取信息，或自行决定GPTBot抓取网站上的指定信息。OpenAI此前饱受业界对于“侵犯隐私问题”的指责，当下OpenAI推出这样一套GPTBot爬虫工具，可谓是其对于外界批判作出的相应回应，同时也能够推动行业建立AI训练用爬虫工具相关基准。亚汇网此前报道，广告声明：文内含有的对外跳转链接（包括不限于超链接、二维码、口令等形式），用于传递更多信息，节省甄选时间，结果仅供参考，亚汇网所有文章均包含本声明。