OpenAI представила свой новый инструмент — GPTBot, веб-краулер, который будет использоваться для поиска данных для будущих моделей искусственного интеллекта. Этот бот-паук, разработанный компанией, будет посещать веб-страницы и помогать улучшать работу моделей.

GPTBot активно фильтрует сайты, требующие платный доступ и несовместимые с политикой OpenAI. Данный веб-краулер не собирает персональную информацию пользователей, такую как имена, номера социального страхования или банковские счета.

Также владельцы платформ имеют возможность указать, к каким частям сайта GPTBot будет иметь доступ, а к каким — нет.