The New York Times подал в суд 2 ноября на компанию Brave, разработчика браузера Brave и поисковой системы Brave Search. Газета утверждает, что Brave скопировала более 30 миллиардов веб-страниц «не идентифицируя себя и не предоставляя владельцам сайтов механизм для блокировки своего краулера», а затем перепродала этот контент компаниям, занимающимся искусственным интеллектом. Brave пока не ответила, и эти утверждения остаются на данный момент лишь обвинениями.
Brave действительно продаёт доступ к своему поисковому индексу, то есть базе собранных страниц, через продукт под названием Brave Search API. Когда ИИ-ассистенту нужна свежая информация, он может заплатить за запрос к этому индексу, вместо того чтобы самостоятельно обходить интернет. Согласно странице «О нас» Brave, этот интерфейс «используется некоторыми из крупнейших имён в сфере ИИ, включая Cohere, Mistral, Perplexity и You.com». Страница, посвящённая ИИ, указывает, что индекс содержит «более 30 миллиардов страниц, с миллионами новых страниц, индексируемых каждый день».
В иске Times упоминаются пять ИИ-компаний, которые, предположительно, являются клиентами Brave: Anthropic, Perplexity, Mistral, xAI и Cohere. Ни одна из них не является ответчиком по данному делу. Случай с Anthropic наиболее деликатный, так как данные устарели: газета ссылается на статью Brave 2023 года об обучении Claude 2. В марте 2025 года Anthropic добавила Brave Search в список своих подрядчиков, о чём сообщал TechCrunch. В том же месяце разработчик Саймон Уиллисон запросил у Claude информацию о пеликанах: десять приведённых результатов точно соответствовали результатам идентичного поиска в Brave. Подтвердить, использует ли Claude Brave до сих пор, не удалось.
Безымянный робот
Сайты указывают, какие краулеры могут их читать, с помощью небольшого файла под названием robots.txt. Этот механизм работает, потому что каждый робот имеет имя. OpenAI и Anthropic публикуют имена своих роботов, что позволяет разрешить доступ одним и запретить другим.
В справочном разделе Brave указано, что её краулер «не анонсирует дифференцированного пользовательского агента». Другими словами, он не идентифицируется под собственным именем. Brave оправдывает этот выбор тем, что некоторые сайты пускают только Google и больше никого: робот с именем Brave был бы заблокирован. Brave утверждает, что следует правилам Googlebot, то есть читает только то, что разрешено читать Google. В результате, как указано на странице, сайт не может разрешить Google и одновременно заблокировать Brave. Чтобы исключить страницу из индекса, необходимо использовать тег noindex, который также просит Google удалить страницу. Times называет эту ситуацию «отказом сообщить имя своего краулера».
Пример проиндексированного сайта
Автор исходной статьи, который владеет сайтом nohacks.co, проверил это. Поиск site:nohacks.co, выполненный 3 ноября, показал шестнадцать его страниц на первой странице результатов, включая тринадцать статей. В результатах даже присутствовало описание страницы, заменённое в тот же день, что указывает на сохранённую копию, а не на прямое обращение. Его файл robots.txt перечисляет тринадцать ИИ-роботов, но ни один не соответствует Brave.
Иск также касается функции «LLM Context», которую Brave описывает как предоставление «извлечённых фрагментов страниц и метаданных источника в форме и длине, подходящих для нужд LLM, без необходимости дополнительного скрапинга». Обычная поисковая система направляет пользователей на сайты, тогда как перепродажа индекса не гарантирует этого перехода, решение остаётся за ИИ-компанией.
Times обвиняет Brave в нарушении авторских прав и обходе своей системы подписки, среди других претензий. Daily News, Chicago Tribune и Orlando Sentinel подали отдельный иск в тот же день. В предыдущем споре с News Corp первой подала иск Brave, утверждая, что она просто индексирует интернет. В июле 2026 года News Corp ответила, обвинив Brave в сокрытии своих роботов, чтобы издатели не могли их обнаружить или заблокировать, согласно Semafor.
