Кейс: Как ИИ оценивал работу специалистов по продажам
«Сергей, зайди ко мне», — написал в служебном чате Игорь Петрович, — «Требуется твоя помощь с ИИ».
В кабинете владельца «СтройХолдинга» находился руководитель коммерческого отдела Владимир Токарев.
«Сергей, ты лучше всех в нашем коллективе освоил VisGPT», — произнес Игорь Петрович, — «Ко мне обратился Владимир с запросом о дополнительных кадрах, а я полагаю, что эту функцию можно доверить нейросети. Владимир, изложи ситуацию?»
«Сергей, видишь ли, мои сотрудники отдела продаж совершают обзвон клиентов, оставивших заявку на веб-сайте или в рекламной кампании. Это начальный этап в воронке сбыта, и критически важно, чтобы на данном шаге все было выполнено безупречно и исключались провалы, ибо потом клиента вернуть уже не удастся».
«А кто такие СОПы?»
«Специалисты отдела продаж. Так вот, я ввел систему оценки их действенности. Мы по пятнадцати пунктам анализируем каждый звонок. Да/нет – то есть, выполнил ли он задачу (узнал ли информацию у обратившегося) или нет. Если менее двенадцати баллов – это неудовлетворительно, и мы разбираемся подробнее. Если много неудовлетворительных оценок – СОПу назначается удержание из премии и тому подобное».
«А кто производит эту оценку?»
«Ты прямо в точку, Сергей! Я нанял отдельного специалиста – она прослушивает записи разговоров, которые фиксирует наша телефонная система, и заполняет таблицу оценок в Яндекс документы. Я уже каждый день, неделю, месяц отслеживаю сводные данные».
«И ты желаешь...»
«Именно! Проводить экспертизу с помощью нейросети. У нас двенадцать СОПов, каждый совершает десять и более вызовов ежедневно. Целый работник занят исключительно этой оценкой, я взял молодую девушку после университета, Людмилу, но она порой не справляется, задерживается после шести вечера, дослушивает разговоры. Жалуется мне, а брать еще одного сотрудника Игорь Петрович не одобряет. Да и справедливо, мой бюджет ограничен, и существуют ограничения по расходам. Поможешь?»
«Можно попробовать. Пришли мне аудиозаписи разговоров – штуки три на твой выбор с оценками твоей сотрудницы, а я обращусь к нейросети, чтобы она провела анализ, и посмотрим, каков будет результат».
На следующий день Сергей изучал материалы, присланные Владимиром. Три аудиофайла с записью разговоров и таблицу с оценками.
Список критериев его озадачил: среди них были как простые – например, какой бюджет у клиента или имеется ли сумма для первоначального взноса, так и качественные: инициативность, работа с возражениями. Сумеет ли VisGPT справиться с такой разнообразной оценкой? Какой запрос здесь понадобится?
После нескольких часов работы с присланными данными Сергей позвонил Владимиру и попросил его зайти, чтобы продемонстрировать предварительный итог.
«Ты быстро! Я думал, на мою задачу уйдет неделя работы!»
«В этом ты прав. Для достижения окончательного результата может потребоваться неделя, а то и больше. Сейчас я покажу уже полученный результат, и мы его обсудим. Я сделал транскрибацию разговоров в текст с помощью SaluteSpeech, это система искусственного интеллекта от Сбера...»
«Транс... чего?»
«Транскрибация – это преобразование голосовой записи в письменный текст. Нейросети – это языковые модели, они функционируют с текстом. Для этого необходимо расшифровывать звонки – и это нейросеть также умеет выполнять».
«Ага, ясно. Интересно...»
«Затем, — продолжил Сергей, — я взял файл с полученными звонками, перечень параметров, и напрямую, то есть почти не адаптируя запрос, лишь слегка расшифровав пункты, попросил провести оценивание:»
«Нейросеть немного подумала и выдала ответ:»
«Так, любопытно, любопытно, а ты сопоставил с тем, как выполнила оценку Людмила?»
«Ты шутишь, разумеется, сопоставил. Вот я свел данные в таблицу – по восьми из пятнадцати пунктов совпадение полное, по остальным частичное или отсутствует».
«Да, результат не очень впечатляет. Чуть более половины совпадений в оценке».
«Конечно, но это при первом, прямолинейном запросе. Например, по пункту «Одобрение ипотеки» нейросеть поставила зачет во втором и третьем диалоге, поскольку менеджер обсуждал ипотеку с клиентом, и нейросеть решила, что все в порядке. Я переформулировал вопрос иначе: «Одобрена ли клиенту ипотека?» – и тогда итог оценки изменился и совпал с человеческим. Нужно будет дорабатывать запрос».
«Хорошо, давай попробуем уточнить. Что от меня требуется?»
«Помощь необходима: нужно сопоставить больше звонков, и чтобы кто-то в случае разногласий в оценке предполагал, почему это произошло?»
«Ладно, организую, зайди завтра ко мне в отдел».
На следующий день Владимир энергично объяснял задачу сотруднице.
«Вот, Людмилочка, тебе Сергей Андреевич помощника-нейросеть настроит. Не будешь больше задерживаться».
Сергей объяснил Людмиле, что от нее ожидается. В течение недели, основываясь на данных сравнения, подготовленных девушкой, Сергей и Владимир корректировали запрос и увеличили точность его работы до 97%.
«А сто процентов возможно?»
«Вряд ли, в работе с нейросетями всегда присутствует вариативность в конечном результате».
«Ну и ладно, один из тридцати с ошибкой – это ерунда, в конце концов, и человек ошибается».
«Да, такой уровень точности – отличный результат, даже очень. Нужно и Людмилу поздравить. Кстати, а где она, на своем месте ее нет?»
«Верно, отсутствует. Уволилась с сегодняшнего дня».
«Серьезно, а сводный отчет?»
«А отчет мне будет готовить секретарь – ей на это потребуется полчаса. И вообще, я поговорил с нашими программистами, они скоро автоматизируют это с модулем VisGPT в Битриксе».
«Владимир, а с увольнением ты не поспешил? Что-то другое предложить ей не мог, что ли?»
«Конечно, я предложил ей должность СОП, но она сказала, что продажи ей не интересны. Что ей вообще интересно, может, ты, Сергей, ей интересен?»
«Не знаю, не обращал внимания».
«Понятно, у тебя Галочка перед глазами сейчас, у Людмилы не было ни единого шанса».
По окончании рабочего дня Сергей вышел на парковку возле офиса и заметил, что на одной стороне его автомобиля краской написано «Козел!».
К нему подошел охранник и сообщил: «Сергей Андреевич, это какая-то девушка написала, в джинсах и куртке с капюшоном, но по силуэту понятно, я по камерам отследил...»
Сергей стоял в замешательстве. Подошел Владимир.
«Сергей, ёлки-палки! Похоже, Людмила и вправду влюбилась в тебя, а когда поняла, что их совместный с тобой проект завершен – примкнула к нейро-луддитам».
«Похоже, так, Владимир, у любого прогресса есть своя стоимость, которую приходится платить. Мне вот теперь предстоит отмывать машину».
«Не переживай, отгони на автомойку, я тебе возмещу. Я же втянул тебя в это дело, мне и нести издержки».
«Отлично. Мне иногда кажется, что единственное, с чем прогресс и нейросети VisGPT никогда не совладают – это с постижением женской логики!»
Поможем с выбором наиболее подходящего инструмента под ваши задачи.
ai@vis.center
+7 495 177-37-13