JudgeGPT помог пакистанским судьям разгрузить завалы дел: +6,3% и ROI $38,5 на доллар

Исследователи провели полевой эксперимент с участием 1559 пакистанских судей и выяснили: ИИ-ассистент JudgeGPT повысил долю разрешённых дел на 6,3%. Эффект дали только судьи, прошедшие очное обучение работе с системой, а отдача от вложений составила до 38,50 доллара на каждый вложенный доллар.

Что показал эксперимент

Полевой эксперимент (field experiment) охватил 1559 пакистанских судей, которым дали доступ к ИИ-ассистенту JudgeGPT для работы с судебными делами. По данным исследования, у судей, освоивших инструмент, доля разрешённых дел выросла на 6,3% — ощутимый сдвиг для перегруженной системы, где очереди по делам тянутся годами.

Полевой эксперимент — это исследование в реальных условиях, а не в лаборатории, поэтому его результаты показывают именно причинно-следственную связь, а не простую корреляцию.

Ключевые цифры исследования:

• 1559 судей — участники полевого эксперимента
• +6,3% — прирост доли разрешённых дел у обученных судей
• до 38,50 доллара — отдача на каждый доллар, вложенный в проект
• JudgeGPT — ИИ-ассистент, помогавший судьям разбирать дела
• без очного обучения прирост почти полностью исчезал

Почему помогло только обучение

Прирост в 6,3% обеспечили исключительно судьи, прошедшие практическое обучение работе с JudgeGPT. У тех, кто просто получил доступ к системе без очного тренинга, эффект почти полностью исчезал — сам по себе инструмент результата не приносил.

Это и есть главный вывод работы: цифровой ассистент окупается не за счёт самой технологии, а за счёт того, что людей научили ей пользоваться. Разрыв между «дали доступ» и «научили работать» оказался решающим — именно он отделил судей, разгрузивших завалы, от тех, у кого ничего не изменилось.

«Прирост в 6,3% дали только судьи, прошедшие очное обучение; без него эффект практически исчезал», — таков ключевой вывод исследования, о котором сообщает издание

The Decoder.

Сколько окупились вложения

Отдача проекта, по оценке исследователей, достигла 38,50 доллара на каждый вложенный доллар. Даже с поправкой на то, что это верхняя граница оценки, соотношение затрат и результата для государственного проекта выглядит редким: обычно внедрение технологий в госсекторе окупается медленно и неочевидно.

Такая экономика объясняется дешевизной вмешательства относительно эффекта. Судьям не меняли процессы целиком — им дали ИИ-инструмент и обучение, а на выходе получили измеримый рост разрешаемости дел в системе, страдающей от хронических завалов.

Что это значит

Эксперимент с JudgeGPT показывает, что польза ИИ в госсекторе определяется не только моделью, но и обучением пользователей: без очного тренинга даже работающий инструмент не даёт эффекта. Для судов, здравоохранения и других перегруженных госслужб это прямой намёк — бюджет на внедрение ИИ стоит закладывать вместе с бюджетом на обучение людей.

Частые вопросы

Что такое JudgeGPT?

JudgeGPT — ИИ-ассистент для судей, который помогает разбирать судебные дела. В полевом эксперименте с 1559 пакистанскими судьями он повысил долю разрешённых дел на 6,3% у тех, кто прошёл обучение.

Почему ИИ помог только части судей?

Прирост показали только судьи, прошедшие очное практическое обучение работе с системой. У судей без тренинга, получивших лишь доступ к JudgeGPT, эффект почти полностью исчезал.

Насколько окупились вложения?

По оценке исследователей, отдача проекта достигла 38,50 доллара на каждый вложенный доллар — за счёт низкой стоимости вмешательства относительно роста числа разрешённых дел.