Veltos.Tech

AI и ML

Что проверить в CRM и 1С до старта ИИ-проекта, чтобы не потратить бюджет впустую

Большинство неудачных ИИ-проектов упираются не в модель, а в данные, о качестве которых заказчик узнаёт только после того, как деньги уже потрачены.

Коротко

Прежде чем платить подрядчику за ИИ-проект, стоит самостоятельно проверить четыре вещи в собственной CRM или 1С: заполненность обязательных полей на реальных, а не тестовых записях; согласованность форматов данных (даты, статусы, категории) между разными сотрудниками и отделами; отсутствие дублей записей о клиентах или сделках; и наличие вообще достаточного объёма исторических данных для задачи. Проект, запущенный поверх данных с этими проблемами, почти гарантированно даст разочаровывающий первый результат, который спишут на «ИИ не работает», хотя причина — в данных, а не в модели.

Почему ИИ-проекты чаще спотыкаются о данные, чем о модель

Модель, даже не самая совершенная, обычно справляется с задачей достаточно хорошо, если данные, на которых она работает, чистые, полные и последовательные. Обратное тоже верно: даже лучшая модель на грязных, неполных или противоречивых данных даёт плохой, непредсказуемый результат. Именно поэтому диагностика готовности данных — это самостоятельная задача, которую заказчик может и должен выполнить сам, до того как платить подрядчику за то, что тот обнаружит те же проблемы на первой неделе проекта.

Чек-лист из четырёх пунктов

ПунктКак проверить самостоятельно
Заполненность обязательных полейВыгрузить 100 случайных реальных записей и посчитать долю пустых полей
Согласованность форматовСравнить, как разные сотрудники заполняют один и тот же тип поля (даты, статусы)
Дубли записейПроверить наличие клиентов или сделок, продублированных вручную
Достаточный объём историиПосчитать число релевантных записей за последние 6–12 месяцев
Что проверить и как

Почему тестовые записи вводят в заблуждение

Проверка на нескольких аккуратно заполненных карточках, которые сотрудник показывает на демонстрации системы, почти всегда даёт ложно позитивную картину. Реальная база, накопленная за годы разными людьми с разной дисциплиной ввода данных, выглядит иначе — часть полей пропущена, часть заполнена в свободной форме там, где ожидался стандартный формат, часть содержит клиентов, добавленных дважды под слегка разными именами. Именно поэтому выборку для проверки нужно брать случайно из реальных, боевых данных, а не из показательных примеров.

Что делать, если данные оказались не готовы

Обнаружить проблему с данными до подписания договора с подрядчиком — не повод отказываться от ИИ-проекта, а повод изменить его первый этап: вместо того чтобы сразу переходить к разработке модели, первым платным этапом становится приведение данных в порядок — либо силами внутренней команды, либо как отдельная, явно обозначенная часть работы подрядчика с собственным сроком и стоимостью, а не скрытая внутри общей сметы на «внедрение ИИ».

Частые вопросы

Почему ИИ-проект может провалиться даже с хорошей моделью?

Потому что даже лучшая модель даёт плохой, непредсказуемый результат на грязных, неполных или противоречивых данных. Диагностика готовности данных — задача, которую заказчик может выполнить сам до старта проекта, а не то, что обнаруживается постфактум за деньги подрядчика.

Как проверить готовность данных, не привлекая подрядчика?

Выгрузить случайную выборку из 100 реальных записей и проверить заполненность обязательных полей, согласованность форматов между сотрудниками, наличие дублей и достаточный объём истории за последние 6–12 месяцев. Это можно сделать силами внутренней команды за один-два дня.

Почему проверка на демонстрационных записях вводит в заблуждение?

Потому что несколько аккуратно заполненных карточек, показанных на демонстрации, почти всегда выглядят лучше реальной базы, накопленной за годы разными сотрудниками с разной дисциплиной ввода. Выборку для проверки нужно брать случайно из боевых данных, а не из показательных примеров.

Что делать, если данные оказались не готовы к ИИ-проекту?

Не отказываться от проекта, а сделать приведение данных в порядок отдельным, явно обозначенным первым этапом со своим сроком и стоимостью — своими силами или как выделенная часть работы подрядчика, а не скрытая внутри общей сметы на внедрение ИИ.

Нужна помощь с этой задачей?

Мы делаем это на практике, а не только пишем об этом. Опишите задачу — разберём и пришлём смету по этапам.

Услуги по теме

Читать дальше