Исследование описывает риски «trajectory collapse» при использовании LLM‑агентов в юридическом e‑discovery
Авторы новой работы анализируют, как автономные агенты на базе Large Language Model (LLM) могут применяться в процессах электронного раскрытия документов (e-discovery). Они обращают внимание на риск, связанный с многошаговыми цепочками рассуждений: ошибки в таких системах способны накапливаться. В юридической практике это может приводить к последствиям уровня malpractice.
Если сравнивать с одношаговым поиском, агентные рабочие процессы ведут себя иначе. Когда система работает с корпусами привилегированных документов, появляется специфический тип сбоя. Исследователи называют его «trajectory collapse». Сценарий выглядит так: ранняя неверная классификация проходит незаметно, затем распространяется по всей цепочке обработки и в итоге делает недействительным последующий обзор привилегий.
В статье предложена структурированная таксономия сбоев агентных систем в задачах юридического поиска информации. Она организована по функциональным этапам процесса. Отдельно описана архитектура верификации из четырех уровней: planning, reasoning, execution и uncertainty quantification. Такая схема должна перехватывать ошибки до того, как они начнут накапливаться внутри агентного рабочего процесса.
Кроме того, авторы провели предварительное моделирование на синтетическом корпусе e-discovery. Результаты показывают, что обязательные пороги эскалации Human-on-the-Loop (HOTL) снижают риск privilege-waiver по сравнению с полностью автономными системами. По данным симуляции, калиброванные пороги неопределенности могут уменьшить этот риск до 61% относительно полностью автономного базового сценария.
Ключевые факты
Статья arXiv:2606.19812v1 описывает тип сбоя в агентных LLM‑процессах e-discovery под названием «trajectory collapse», при котором ранняя ошибочная классификация распространяется по всей цепочке рассуждений.
Авторы предлагают таксономию сбоев агентных систем в юридическом поиске информации, организованную по функциональным этапам процесса.
В работе представлена архитектура проверки из четырех уровней: planning, reasoning, execution и uncertainty quantification.
Симуляционное исследование на синтетическом корпусе e-discovery показывает, что пороги эскалации Human-on-the-Loop могут снижать риск privilege-waiver до 61% по сравнению с полностью автономными системами.