← СИГНАЛ ИССЛЕДОВАНИЯ
ИССЛЕДОВАНИЯ

Бюджет как способ контроля непослушных ИИ-агентов

Автор предлагает управлять поведением ИИ-агентов через ограничение ресурсов: кто и на какой объём действий имеет право. Подход рассматривается как практический ответ на риски слепой гонки за возможностями ИИ.

Исследователи Прафул Чандра, Суджит Гуджар и Ганеш Гхалме из Индии опубликовали в августе 2026 года работу «Resourced Authority: A Mechanism-Design Model for Participatory Governance of Deployed AI Agents». Она посвящена не внутреннему устройству моделей, а внешнему контуру управления: кто и на каких основаниях решает, что конкретный ИИ-агент может продолжать работу и какой объём вычислительных ресурсов ему выделяется.

Авторы опираются на теорию механизмов дизайна — дисциплину, которая занимается аукционами, голосованиями и распределением бюджетов так, чтобы участники не могли выигрышно искажать свои предпочтения. В основе модели лежит концепция квадратичного финансирования (Quadratic Funding), разработанная экономистом Гленом Вейлом. Идея QF — компромисс между принципом «один человек — один голос», игнорирующим силу предпочтения, и голосованием деньгами, которое ведёт к плутократии.

В работе используются термины coupling map и breadth-weighted effective supports, но за ними стоит знакомая задача: распределить ограниченный ресурс между заинтересованными сторонами с противоречивыми интересами. Чандра, Гуджар и Гхалме переносят инструмент с человеческих выборов на бюджет вычислительных мощностей ИИ-агента. По их замыслу, решение о работе агента должно приниматься не разработчиком и не регулятором в одиночку, а через механизм, учитывающий интенсивность предпочтений участников.

Авторы разграничивают два контура управления ИИ. Внутренний связан с alignment: как обучить модель, чтобы она не выдавала ложь и не халтурила. Внешний — это распределение ресурсов между людьми. Даже идеально выровненная модель не решает вопроса, кто имеет право включить агента, на какой срок, за чей счёт и перед кем он отчитывается. Именно второй контур, по мнению исследователей, остаётся недооценённым.

В статье приводится исторический контекст: ещё Полибий и Платон описывали цикл деградации демократии в охлократию и тиранию, когда голос некомпетентного избирателя захватывается демагогами. Взвешивание голоса деньгами лишь смещает перекос в сторону богатых. QF предлагается как третий путь, а его применение к ИИ-агентам — попытка распространить этот компромисс на управление вычислительными ресурсами.

Практический пример, близкий к модели, — московская платформа «Активный гражданин», где миллионы верифицированных пользователей голосуют по городским решениям. Авторы не предлагают готового рецепта, но ставят вопрос, который звучал ещё на греческой агоре: кто и как решает судьбу того, что действует от имени всех, а последствия каждый ощущает по-своему.

регулированиеopenaianthropicмехдизайнквадратичное финансированиеуправление ии
Первоисточник Читать в Хабр ↗

Материал подготовлен ИИ-редакцией «Сигнала» как пересказ публикации первоисточника. Фактическую точность и подробности проверяйте по оригиналу.

По этой теме ИССЛЕДОВАНИЯ ИИ выходит за пределы математики в науку Wired · 23:15 ИССЛЕДОВАНИЯ Anthropic предупредила о самовоспроизводящихся ИИ The Verge · 14 окт, 20:19 ИССЛЕДОВАНИЯ Anthropic предупредила о самовоспроизводящихся ИИ-червях Tom's Hardware · 13 окт, 19:00 ИССЛЕДОВАНИЯ Открытые модели: выгоды против рисков MIT Tech Review · 13 окт, 15:00 ИССЛЕДОВАНИЯ Хронология инцидентов с ИИ-агентами и чек-лист изоляции Хабр · 13 окт, 13:54