Все DSы в моей команде начинают решение задачи с изучения бизнес-процесса, подобно тому, как физик изучает природу. Чтение документации, глубинное интервью с участниками процесса, наблюдение за процессом и даже участие — это не полный список инструментов исследователя. В результате, складывается картина, где, как и в каком объеме модель сможет принести профит компании или, наоборот, приходит осознание бессмысленности затеи. Сейчас это кажется очевидной необходимостью, но это понимание пришло далеко не сразу. Сегодня расскажу об опыте участия в проектах, которые этому научили.

📞 Граф диалогов в колл-центре
Моя первая рабочая задача была довольно масштабная и наукоемкая - требовалось построить граф диалогов операторов колл-центра на основе текстов разговоров. В литературе, как и у конкурентов, отсутствовал опыт решения подобных задач, ведь на дворе был 2016-ый год. Задача решалась с нуля 1.5 джунами на part-time при помощи консультаций научника: были придуманы и реализованы алгоритмы частичного обучения для сегментации текста, размечены данные сначала самостоятельно, затем на аутсорсе разработан интерфейс для разметчиков и развернут в контуре компании, обучен штат асессоров и настроен контроль качество их работы, наконец, обучена модель с хорошим качеством. В ходе решения задачи мы плотно общались с заказчиком, но когда проект был на финальной стадии, оказалось, что дальше «***тесь как хотите» не подходит. В итоге, пришлось потратить еще полгода, и мы нашли пару применений для разработанного алгоритма самостоятельно.
🤔Вывод: убеждайтесь перед стартом проекта, что заказчик действительно знает, как использовать модель и уже произвел оценку потенциального финансового эффекта.

📰Классификация новостей по компаниям
Инвестиции набирали свой оборот «среди домохозяек», а мы в свою очередь количество задач по анализу текстов. Задача была настолько классной и очевидной, что в наших глазах был гарантирован стопроцентный результат. Более того, был подготовлен размеченный по категориям датасет на 100к+ семплов. В результате, за пару месяцев была разработана модель, еще за пару задеплоена и интегрирована в мобильное приложение. Наконец-то мы запустили а/б-тест, по результатам которого генерировались аж десятки тысяч рублей в месяц дополнительной прибыли.
🤔Вывод: продумывайте заранее, где и как будет применяться ваша модель и какой у нее финансовый потенциал.

💬Поделитесь в комментариях историями ваших неудачных проектов чтобы читали не совершали и ваших ошибок.

#mlsysdesign #неудачи