Заполните форму
И наши менеджеры ответят на ваши вопросы
Нажимая на кнопку, вы соглашаетесь с нашей Политикой в отношении обработки персональных данных пользователя
Иннополис
ул. Университетская, д. 7
Позвоните нам
Напишите нам
Мы используем cookies и собираем технические данные
Находясь на сайте вы соглашаетесь с применением данных технологий
Находясь на сайте вы соглашаетесь с применением данных технологий
One. Анимированный помощник в кофейне
Голосовые ассистенты
В фильме «Назад в будущее 2» Марти Макфлай посещает кофейню, в которой заказы принимает не человек, а компьютер. На его экране появляются разные лица, которые озвучивают меню.
Мы в EORA создали похожего помощника для московской сети кофеен One&Double.
Наш клиент хотел, чтобы бот помогал посетителям в выборе заказа и развлекал их.
Наш клиент хотел, чтобы бот помогал посетителям в выборе заказа и развлекал их.
Помощника зовут One. Это брендовый персонаж One&Double. Он черного цвета и похож на кофейное зернышко.
One встречает посетителей кофейни — машет им с экрана планшета, установленного вблизи стойки бариста.
One встречает посетителей кофейни — машет им с экрана планшета, установленного вблизи стойки бариста.
01/
Он умеет
Знакомить с меню. Советовать напитки, выпечку, десерты
Принимать отзывы
Рассказывать об акциях кофейни
Сообщать, когда тема ему неизвестна
Отвечать на популярные вопросы посетителей
Поддерживать разговор, когда речь идет о чем-то простом
Что внутри
02/
Мы создали «живого» персонажа с мимикой и жестами, имея на руках лишь плоское изображение.
Анимация
One начинает разговаривать, только когда видит человека достаточно близко.
Система распознавания лиц
Помощник внимательно слушает, что ему говорит посетитель кафе, и отвечает в соответствии со сценарием беседы.
Система распознавания речи
Цитата
«One — не только умный голосовой помощник, который «знает» множество разных сценариев, но и харизматичный, яркий персонаж»
03/
Руководитель проекта
Рита Пылаева
Процесс разработки
04/
Разработали сначала «начинку», а затем «оболочку» сервиса
Шаг 03
Создали анимацию. Она «оживила» картинку
Шаг 02
Спроектировали сценарии диалогов с пользователем, написали тексты
Шаг 01
Установили и настроили систему распознавания лиц
Шаг 04
Протестировали помощника
Шаг 05
Полноценно запустили сервис
Шаг 06
One — это программа, которая запускается в браузере. В рамках пилотного проекта помощника установили только в одной кофейне
Сроки разработки
05/
4 месяца
январь — апрель 2022 года
Инструменты
Сервис для работы с речью. В этом проекте мы использовали
технику распознавания
и синтеза речи.
технику распознавания
и синтеза речи.
Yandex SpeechKit
Готовый сервис для детекции лиц.
MediaPipe
06/
Spine, Lotty
Программы для работы с анимацией.
Команда проекта
07/
Проектирование, сценарий и дизайн чат-бота
Анастасия Лисовая
Тимлид, фронтенд-разработчик
Сергей Веренцов
Руководитель проекта
Рита Пылаева
Бэкенд-разработчик
Алексей Зеленов
Сложности и открытия
08/
Сначала One «видел» очень далеко и пытался разговаривать с бариста или теми, кто стоял в очереди.
Перенастроили систему распознавания лиц
Мы думали, что посетители кафе будут активно общаться с помощником. Но для них визуальные голосовые помощники в новинку. Люди к ним пока относятся настороженно, не решаются начать разговор.
Оказались неважными психологами
Мы взяли планшет Samsung Tab S7, потому что у него яркий тонкий дисплей. Но оказалось, что в шумной обстановке встроенный микрофон планшета работает плохо. Из-за неточностей в распознавании речи и бот не всегда хорошо срабатывал.
Ошиблись в выборе «железа»
Интересный факт
В стандартном наборе Yandex SpeechKit не было голосов, подходящих для One. Мы сами обработали голос так, чтобы он получился мультяшным, мальчишечьим — прямо как у персонажа
Итоги
09/
У сервиса хорошие перспективы. В приоритете — самостоятельный прием заказов
Успешно запустили пилот. Планируем заменить планшет на другое устройство с более качественным микрофоном
Цитата
Самостоятельный прием и обработка заказов — очень важная функция. Она может принести много пользы бизнесу в плане продаж и «охвата» посетителей
Рита Пылаева
Руководитель проекта
Сферы применения
10/
Кофейни и рестораны
Ритейл (продуктовые, книжные, магазины одежды)
Многофункциональные центры
Банки и страховые компании
Цитата
«Визуальный голосовой помощник можно много где использовать. Его функционал практически универсальный. Экран с ассистентом можно установить везде, где есть поток людей, которым нужна помощь»
Рита Пылаева
Руководитель проекта
Похожие проекты
Автоматизация контакт-центра «Додо-пиццы»
«Сказки для Алёши» — навык для Google Assistant
Purina. Навык-викторина для Алисы
11/
Напишите нам