Компания Anthropic столкнулась с проблемой утечки данных: ссылки на публично доступные чаты с Claude оказались проиндексированы поисковыми системами Google и Bing. Несмотря на использование файла robots.txt для ограничения доступа ботов, отсутствие тега noindex позволило поисковикам сохранить содержимое диалогов в кэше, сделав их доступными для широкой аудитории через поисковую выдачу.
Инцидент произошел из-за особенностей реализации функции «Shared Chats». Пользователи, делившиеся ссылками на свои диалоги, невольно создали страницы, которые поисковые роботы восприняли как контент, разрешенный к индексации. Хотя robots.txt запрещает сканирование определенных путей, он не препятствует отображению страниц в результатах поиска, если на них ссылаются другие ресурсы или если поисковик уже успел просканировать их до установки ограничений.
Представители Anthropic подтвердили наличие проблемы и заявили о принятии мер по удалению скомпрометированных ссылок из индексов поисковых систем. Компания также работает над обновлением протоколов безопасности, чтобы предотвратить повторение подобных случаев в будущем. Этот инцидент подчеркивает критическую важность использования мета-тегов noindex для защиты приватного контента, который не предназначен для публичного распространения.
Ключевые факты
- Поисковые системы Google и Bing проиндексировали тысячи приватных чатов Claude, сделав их доступными по прямым запросам.
- Anthropic использовала файл robots.txt для защиты страниц, однако отсутствие тега noindex позволило поисковикам сохранить данные в кэше.
- Проблема затронула функцию «Shared Chats», которая позволяет пользователям генерировать публичные ссылки на свои диалоги с ИИ.
- Компания начала процесс удаления страниц из поисковой выдачи и пересматривает настройки индексации для всех публичных ссылок.