Тридцать месяцев спустя после выхода Co-Intelligence, его автор публикует сегодня Co-Existence, вторую книгу, посвященную искусственному интеллекту. В заметке, иллюстрированной графиками, он прослеживает прогресс, достигнутый с тех пор: по его словам, 180 моделей теперь превосходят GPT-4 в том виде, в каком он был на момент выпуска. Он также объясняет, что поручил создание этих графиков ИИ, что, по его мнению, иллюстрирует изменение способов использования этих инструментов.
Модель GPT-4, разработанная OpenAI, с февраля 2023 года до начала 2024 года была лучшей моделью в мире, по мнению автора. С тех пор двадцать разных моделей занимали первое место в тот или иной момент, все они были от Anthropic, Google или OpenAI. Среди 180 моделей, которые теперь превосходят GPT-4, многие имеют открытый вес, то есть каждый может свободно их использовать или модифицировать. Девятнадцать могут работать на современном смартфоне.
Для измерения прогресса возможностей автор опирается на METR Long Horizon Benchmark — тест, который оценивает объем человеческой работы, который ИИ может выполнить с вероятностью успеха не менее 50% по одной инструкции. Согласно этому графику, объем выполнимой работы удвоился восемь раз между выпуском GPT-4 и окончанием этого измерения. В 2024 году ИИ мог выполнить задачу длительностью четыре минуты. К моменту сдачи автором рукописи в апреле 2026 года он мог выполнить 17 часов человеческой работы. Затем METR сообщил, что больше не может точно измерять эту цифру своими текущими методами. Другие исследования предполагают, что она может достигать 17 недель работы или даже больше.
В то же время цены снизились. Google Proof Question and Answer Exam — тест с вопросами, которые с трудом решают студенты магистратуры, — стоил 30 центов за использование ИИ за правильный ответ. Теперь он стоит всего четыре сотых цента для достижения того же результата. Тем не менее, прогресс остается неравномерным: автор считает, что ИИ по-прежнему плохо справляется с написанием длинных текстов, тогда как решение математических задач за тот же период перешло от очень плохого к сверхчеловеческому.
Новый режим работы
Эти достижения, по мнению автора, меняют способ работы с ИИ. В Co-Intelligence он описывал два подхода: работу «кентавра», где человеческие и ИИ-задачи распределены, и работу «киборга», где они переплетены. С появлением агентов, которые самостоятельно выполняют цепочки задач, он добавляет третью фигуру — «заклинателя». Тот обращается к агентам, когда это необходимо, поручает им работу и оценивает их результаты. Графики для заметки были созданы именно таким образом, с помощью модели Opus 5.5 в Claude Projects, которая работает с главным агентом, запускающим других агентов. Автор видит в этом самый мощный способ использования ИИ, но также и источник новых рисков, поскольку становится неясно, что именно делает ИИ для получения этих результатов.
Чтобы проиллюстрировать эту мысль, автор также повторил свой обычный тест — инструкцию «Otter on an Airplane Using Wifi», которую он использует уже несколько лет. По запросу к Opus 5.5 результат — видео, созданное с помощью сервисов Google и ElevenLabs, — был произведен от сценария, изображений, музыки и технических аспектов без какого-либо участия с его стороны. Автор признает, что у видео есть несколько недостатков. Он уточняет, что его книга сосредоточена на тенденциях, а не на актуальности моделей, и на вопросе о том, что это меняет для людей. Co-Existence доступен онлайн.
