Выбор платформы обычно происходит по неправильной схеме: смотрят три демонстрации, впечатляются той, где ИИ отвечает эффектнее всего, и принимают решение. Через полгода выясняется, что качество ответов было наименее важным из критериев.
Ниже — структура оценки, которая учитывает то, что проявляется не на демонстрации, а на третьем месяце эксплуатации.
Коротко
Оценивать платформу следует по восьми группам критериев в таком порядке: режим данных и безопасность, соответствие требованиям 152-ФЗ, встроенность в рабочие процессы, качество и проверяемость результатов ИИ, управляемость и журналирование, условия выхода и выгрузки данных, стоимость владения целиком, зрелость поставщика. Качество ответов — важный, но не первый критерий: разница между решениями здесь меньше, чем разница во встроенности в процессы.
Порядок оценки
Порядок имеет значение: первые две группы отсекают неподходящие варианты быстро и без затрат времени на демонстрации.
| Приоритет | Группа критериев | Что проверяет |
|---|---|---|
| 1 | Режим данных и безопасность | Что происходит с материалами клиентов |
| 2 | Соответствие 152-ФЗ | Локализация, трансграничная передача |
| 3 | Встроенность в процессы | Нужно ли собирать контекст вручную |
| 4 | Качество и проверяемость ИИ | Можно ли проверить результат быстро |
| 5 | Управляемость | Видно ли, кто и что делал |
| 6 | Условия выхода | Что происходит при расторжении |
| 7 | Стоимость владения | Полные затраты, а не цена лицензии |
| 8 | Зрелость поставщика | Будет ли решение существовать через три года |
1. Режим данных и безопасность
Ответы на эти вопросы нужно получать письменно, а не в устной беседе с менеджером по продажам.
Вопросы поставщику
- Где физически размещаются данные: страна, дата-центр, юридическое лицо оператора
- Используются ли переданные материалы для обучения моделей и подтверждено ли это договором
- Обращается ли система к внешним моделям и к каким именно
- Что именно передаётся во внешнюю модель: исходный текст или обезличенный
- Как устроено обезличивание и что происходит с косвенными идентификаторами
- Сколько времени хранятся запросы и результаты и как они удаляются
- Как разграничивается доступ внутри фирмы и между делами
- Есть ли шифрование при передаче и хранении
- Возможно ли размещение в инфраструктуре клиента и что при этом меняется в функциональности
Формулировка, на которой стоит остановиться
«Мы не используем ваши данные для обучения» и «ваши данные не покидают российский контур» — разные утверждения, и первое не влечёт второго. Требуйте ответа на оба вопроса отдельно и в письменном виде.
2. Соответствие требованиям 152-ФЗ
Материалы юридического дела почти всегда содержат персональные данные. С 1 июля 2025 года требования к локализации ужесточены: при сборе персональных данных граждан России использование расположенных за рубежом баз данных не допускается, за исключением случаев, предусмотренных законом. Ответственность по статье 13.11 КоАП РФ для юридических лиц измеряется миллионами рублей, а при повторном нарушении увеличивается кратно.
Что подтвердить документально
- Локализация баз данных на территории России
- Наличие у поставщика статуса оператора персональных данных и уведомления Роскомнадзора
- Порядок трансграничной передачи, если она вообще происходит
- Условия обработки в договоре — поручение на обработку по статье 6 152-ФЗ
- Наличие решения в реестре отечественного ПО, если это значимо для ваших клиентов
3. Встроенность в рабочие процессы
Критерий, который недооценивают чаще всего, и именно он определяет, будет ли система использоваться через полгода.
Ключевой вопрос формулируется так: сколько действий нужно совершить, чтобы ИИ получил контекст? Если ответ — «найти документы, скачать, загрузить, объяснить обстоятельства», выигрыш от качества модели съедается этой работой. Механика этого эффекта разобрана в материале «Почему юридической фирме недостаточно подписки на ChatGPT».
| Вопрос | Плохой ответ | Хороший ответ |
|---|---|---|
| Откуда система берёт материалы дела | Пользователь загружает вручную | Материалы уже в деле |
| Куда попадает результат анализа | В окно чата | В дело, с привязкой к документу |
| Знает ли ИИ о задачах и сроках | Нет | Да, работает в этом контексте |
| Используются ли шаблоны фирмы | Нужно прикладывать каждый раз | Подключены к системе |
| Связан ли результат с учётом времени | Нет | Да |
| Видит ли команда результаты коллег | Нет, история личная | Да, в рамках прав доступа |
4. Качество и проверяемость
Качество ответа само по себе оценить сложно и субъективно. Оценивайте вместо этого проверяемость — она объективна и напрямую влияет на время работы.
Что должна обеспечивать система
- Ссылку на конкретный документ и фрагмент для каждого утверждения
- Возможность перейти к первоисточнику одним действием
- Явное указание, когда ответ не найден в материалах, вместо додумывания
- Различение того, что взято из ваших материалов, и того, что модель добавила от себя
- Отсутствие автоматической генерации ссылок на судебную практику без привязки к проверяемому источнику
Последний пункт критичен. Российская практика уже дала прецедент: в мае 2026 года Арбитражный суд Западно-Сибирского округа по делу № А27-7831/2025 взыскал 50 000 рублей штрафа за жалобу с несуществующими ссылками. Система, которая свободно генерирует реквизиты судебных актов без привязки к базе, создаёт риск, а не снимает его. Методика проверки — в материале «ИИ для правового исследования».
5. Управляемость и журналирование
Раздел, который становится важным ровно в тот момент, когда что-то пошло не так.
Что должно быть
- Неизменяемый журнал действий: кто, что и когда делал
- История обращений к ИИ с указанием пользователя и переданных материалов
- Разграничение прав по ролям и по делам
- Возможность ограничить доступ к отдельному делу узким кругом
- Отчётность по использованию для руководителя практики
- Фиксация факта проверки результата человеком
Эти механизмы напрямую поддерживают внутренние правила фирмы: значительная часть требований AI-политики исполняется системой автоматически, а не самодисциплиной сотрудников.
6. Условия выхода
Вопрос, который почти никогда не задают на этапе выбора и почти всегда задают на этапе расставания.
Зафиксировать в договоре до подписания
- В каком формате выгружаются данные при расторжении
- Выгружаются ли не только документы, но и структура: связи, задачи, история
- В какой срок предоставляется выгрузка и на каких условиях
- Что происходит с данными на стороне поставщика после расторжения и в какой срок
- Сохраняется ли доступ к данным при неоплате в переходный период
Второй пункт важнее первого. Выгрузка папки с файлами формально исполняет обязательство и практически бесполезна: теряется именно то, ради чего система внедрялась.
7. Стоимость владения
Сравнивать цены лицензий бессмысленно без остальных составляющих.
| Статья затрат | Что учитывать |
|---|---|
| Лицензии | Модель тарификации: за место, за организацию, за объём использования |
| Внедрение | Настройка, перенос данных, интеграции |
| Время команды | Часы юристов на пилот, обучение, перестройку процессов |
| Обучение | Первичное и для новых сотрудников |
| Поддержка | Входит ли в стоимость, какие сроки реакции |
| Развитие | Стоимость доработок под ваши процессы |
| Выход | Стоимость миграции при смене решения |
Третья строка обычно оказывается крупнейшей и почти никогда не попадает в сравнительную таблицу.
8. Зрелость поставщика
Что проверить
- Кто разработчик: юридическое лицо, срок работы, состав команды
- Есть ли в команде практикующие юристы, а не только разработчики
- Сколько клиентов и какого профиля, можно ли поговорить с действующим клиентом
- Частота обновлений и наличие публичного плана развития
- Условия поддержки и реальные сроки реакции
- Финансовая устойчивость: риск исчезновения поставщика вместе с вашими данными
Второй пункт заслуживает внимания: решения, спроектированные без участия практикующих юристов, обычно хорошо решают технические задачи и плохо — процессные, потому что их авторы не сталкивались с реальным ходом работы по делу.
Пилотная проверка
Демонстрация показывает, что система умеет в идеальных условиях. Пилот показывает, что она даёт в ваших.
- 1
Возьмите своё дело, а не демонстрационное
Реальный массив с плохими сканами, приложениями и противоречиями. Идеальные данные скрывают именно то, что вам нужно увидеть.
- 2
Дайте задачу, ответ на которую знаете
Так вы оцените не убедительность, а точность.
- 3
Проверьте поведение при отсутствии ответа
Задайте вопрос, ответа на который в материалах нет. Хорошая система скажет об этом; плохая — придумает.
- 4
Замерьте время сборки контекста
От начала работы до получения применимого результата, включая подготовку.
- 5
Дайте попробовать разным сотрудникам
Разброс результатов между опытным и неопытным пользователем — важный показатель.
- 6
Проверьте выгрузку данных
Не описание в договоре, а фактическую выгрузку на пилотных данных.
Третий и шестой шаги делают редко, и они дают больше всего информации.
Типичные ошибки выбора
| Ошибка | Чем оборачивается |
|---|---|
| Выбор по впечатлению от демонстрации | Демонстрация показывает лучший случай, а не типичный |
| Оценка только качества ИИ | Игнорируется главный фактор — встроенность в процессы |
| Решение принимается без юристов-практиков | Система не соответствует реальному ходу работы |
| Вопрос о данных откладывается на потом | После внедрения менять поставщика дорого |
| Пилот на демонстрационных данных | Проблемы проявляются уже в эксплуатации |
| Не проверены условия выхода | Зависимость обнаруживается в момент расставания |
| Сравнение цен лицензий | Игнорируется основная статья затрат — время команды |
| Внедрение без перестройки процессов | Инструмент не компенсирует беспорядок в работе |
Последняя ошибка самая дорогая: если материалы разбросаны между почтой, дисками и мессенджерами, никакая платформа не даст ожидаемого эффекта, пока это не исправлено. Об этом — материал «Порядок в делах».
Короткий список вопросов, если времени мало
Пять вопросов, которые отсекают большинство вариантов
- Где физически хранятся данные и подтверждено ли это договором
- Что именно передаётся во внешние модели и в каком виде
- Сколько действий нужно, чтобы ИИ получил контекст дела
- Есть ли неизменяемый журнал действий
- В каком виде выгружаются данные при расторжении договора
MyLex спроектирована именно под эти требования: работа собирается вокруг дела, ИИ получает контекст без ручной сборки, данные анонимизируются при обращении к внешним моделям, хранение локализовано в соответствии с 152-ФЗ, действия фиксируются в неизменяемом журнале, а для организаций с повышенными требованиями возможно размещение в собственной инфраструктуре. Подробнее — в разделах «Возможности» и «Безопасность», условия — на странице тарифов.
Организационная последовательность после выбора — в руководстве «Как внедрить ИИ в юридической фирме». Правила, которым должна соответствовать выбранная система, — в материале об AI-политике фирмы.
Источники
- Федеральный закон от 27.07.2006 № 152-ФЗ «О персональных данных», статья 18 часть 5 — текст статьи
- Федеральный закон от 27.07.2006 № 152-ФЗ, статья 12 «Трансграничная передача персональных данных» — текст статьи
- Постановление Арбитражного суда Западно-Сибирского округа по делу № А27-7831/2025 — обзор прецедента
- American Bar Association, Formal Opinion 512, 2024 — текст заключения
- Magesh V. и др. «Hallucination-Free? Assessing the Reliability of Leading AI Legal Research Tools», Stanford RegLab, 2024 — публикация
Частые вопросы
- Что важнее: качество ИИ или интеграция с рабочими процессами?
- Интеграция. Разница в качестве ответов между современными решениями обычно меньше, чем разница во времени, которое уходит на сборку контекста и перенос результатов. Модель можно заменить, встроенность в процессы — нет.
- Сколько должен длиться пилот?
- Четыре–шесть недель на реальной работе одной команды. Короче — не пройден этап новизны, дольше — теряется темп и размывается ответственность за результат.
- На что смотреть в первую очередь при ограниченном времени?
- На три вещи: где обрабатываются и хранятся данные, можно ли выгрузить свои данные при расторжении, и есть ли журнал действий. Эти три ответа отсекают большинство неподходящих вариантов быстрее любых демонстраций.
- Нужно ли требовать локальное размещение?
- Не всем. Оно оправдано при повышенных требованиях к конфиденциальности, но существенно повышает стоимость и требует собственных ресурсов на поддержку. Для большинства фирм достаточно локализации хранения в России и контролируемого режима обращения к моделям.
Команда MyLex
Практикующие юристы и инженеры, которые проектируют MyLex — систему управления юридической практикой с ИИ под контролем юриста.
Материал носит информационный характер и не является юридической консультацией. О команде MyLex
Оставьте заявку на подключение MyLex
Покажем, как организовать работу вокруг дела и безопасно применять ИИ под контролем юриста.
Запросить демо