Тинькофф Олег Голосовой помощник

Продукт
Разработчики: Т-Банк (Тинькофф Банк)
Дата премьеры системы: 2019/06/13
Дата последнего релиза: 2020/12/24
Отрасли: Интернет-сервисы,  Финансовые услуги, инвестиции и аудит
Технологии: Речевые технологии

Содержание

Основные статьи:

2020

Запуск голосового помощника 2.0, которого можно настроить под себя

24 декабря 2020 года Тинькофф Мобайл объявил о запуске версии 2.0 голосового ассистента Олега, в которой абоненты могут создавать собственного телефонного секретаря с индивидуальными навыками и параметрами.

Голосовой помощник Тинькофф Мобайла позволяет задать индивидуальное имя, выбрать голос и пол, настроить общение ассистента под разные контакты из телефонной книги и незнакомые номера, прописать собственные фразы приветствий и др.

Каждый пользователь может создать своего Олега, и не только Олега: в функционале можно выбрать голос и имя для своего телефонного секретаря. Привычное имя «Олег» можно поменять на «Оля» или любое другое имя или прозвище, а голос можно установить мужской или женский.Витрина данных НОТА ВИЗОР для налогового мониторинга

Абонент Тинькофф Мобайла может выбрать, как Олег будет его представлять на звонках. Можно задать имя, характеристику, прозвище, должность и т.д. Под разные контакты можно установить и как секретарь будет представлять пользователя: например, контактам не из телефонной книги Олег скажет, что передаст информацию «абоненту», а знакомым — «Косте», «Костылю» или «Супер Боссу» (в зависимости от того, какое представление для себя пропишет абонент).

Для телефонного секретаря Тинькофф Мобайла можно настроить приветствия и фразы, которыми Олег будет общаться с собеседниками (до 400 символов). Абонент может оставить либо стандартные приветствия, либо задать свои собственные обороты и фразы, которые будет озвучивать голосовой помощник.

Разные приветствия можно установить отдельно для номеров из телефонной книги, и отдельно для незнакомых контактов.

Контакты из телефонной книги абонента Олег сможет приветствовать по имени - причем ассистент умеет определять имя контакта даже если оно записано не в стандартной форме.

Например, контакту «Света брови» Олег скажет: «Привет, Света! Саша не может ответить. Я ассистент Олег, что мне передать?».

Контакт, записанный в телефонной книге без конкретного имени — например, «Доставка цветов» — Олег встретит стандартным приветствием без персонального обращения.

Для Олега 2.0 можно также настроить, когда отвечать на звонки:

  • автоматически отвечать на все входящие вызовы вместо абонента;
  • телефон находится не в сети;
  • человек сбрасывает вызов;
  • абонент не отвечает 10 и более секунд.

Расшифровка и аудиозапись каждого звонка будут сохраняться в приложении Тинькофф Мобайла.

В ближайшее время личный секретарь научится блокировать спам-звонки или автоматически принимать их вместо абонента. Также Олег в Тинькофф Мобайле интегрирован с сервисом определения номеров Тинькофф «КтоЗвонит»: секретарь пришлет в смс-сообщении информацию о звонках с неизвестных номеров и предупредит, если абоненту звонили спамеры или мошенники.

«
Голосовому ассистенту Олегу в Тинькофф Мобайле исполнился один год. За это время он многому научился и полюбился многим нашим абонентам. Следующая версия личного секретаря была создана на основе их пожеланий, многие из которых мы реализовали в следующей версии помощника. Теперь Олег сможет стать alter ego своего абонента — говорить его же фразами, узнавать знакомые контакты. И при этом с ним остались его умение упрощать любую коммуникацию, надежность и чувство юмора. Уверены, что обновленный голосовой помощник сможет порадовать и сэкономить время еще большему количеству абонентов,

- говорит Георгий Чесаков, CEO Тинькофф Мобайла
»

Обновленная версия голосового помощника Олега уже доступна абонентам Тинькофф Мобайла в следующих версиях мобильного приложения на iOS и Android. В течение 7 дней опробовать возможности Олега можно бесплатно, затем — по стоимости от 59 рублей в месяц.

Дополнительные навыки Олега: помощь в экономии и напоминание о платежах

21 июля 2020 года стало известно, что Олег приобрел сразу несколько навыков, которые помогут клиентам Тинькофф сделать свои расходы и траты эффективнее. Так, теперь Олег будет помогать клиентам в приложении Тинькофф ставить ограничения для своих расходов, вовремя совершать регулярные платежи и проводить платежи по кредитке.

Голосовой ассистент Олег поможет пользователям ограничить незапланированные траты. По команде в чате мобильного приложения Тинькофф «Олег, давай экономить» он установит выбранные клиентом ограничения расходов на день, неделю или месяц, и будет следить за их соблюдением. Если расходы клиента приблизятся к лимиту, Олег предупредит об этом и напомнит, что на этой неделе или в этом месяце пользователь решил тратить меньше. В любой момент у голосового помощника можно уточнить, какой бюджет остался до превышения лимита. По итогу дня, недели или месяца Олег отчитается, удалось ли уложиться в бюджет.

Также Олег будет напоминать клиентам о регулярных платежах, которые нужно вовремя совершить. Часть платежей в экосистеме Тинькофф автоматизирована (например, оплата налогов, услуг ЖКХ, штрафов ГИБДД), а часть клиенты совершают вручную. Например, ежемесячно оплачивают аренду квартиры или услуги репетиторов. Если операции такого рода совершаются регулярно (например - раз в месяц), Олег это заметит и в следующий раз заранее напомнит о них в пуш-уведомлении. И не только напомнит, но и поможет сразу же совершить платеж.


Еще один навык Олега - быстрые платежи по кредитной карте. По команде «Олег, проверь кредитку» голосовой ассистент покажет сумму минимального платежа по карте, размер платежа для беспроцентного периода и полную сумму долга. Для оплаты даже не нужно выходить из чата с Олегом — можно просто сказать ему нужную сумму, выбрать счет для оплаты и подтвердить операцию.

С момента запуска в июне 2019 года голосовой помощник Олег научился выполнять различные операции, облегчающие повседневную жизнь клиентов экосистемы Тинькофф. Сейчас Олег умеет:

  • совершать денежные переводы;
  • оплачивать мобильный телефон;
  • показывать доходы и расходы клиента;
  • консультировать по банковским вопросам;
  • оплачивать кредитную карту;
  • регистрировать заявления о страховом событии для владельцев полисов ОСАГО и КАСКО от Тинькофф Страхования;
  • заказывать и отправлять на почту электронные документы — например, справку для визы в иностранные посольства;
  • изменять личные данные в экосистеме Тинькофф;
  • просто общаться на свободные темы и давать небанальные финансовые советы.

Для абонентов Тинькофф Мобайл Олег и вовсе выступает в роли личного голосового консьержа — принимает за них входящие звонки, может разговаривать и шутить с собеседниками, записывать и расшифровывать сообщения с помощью речевых технологий.

В будущем Олег станет еще способнее: он будет рассказывать о главных финансовых новостях, подсказывать стоимость ценных бумаг, будет напоминать о всех важных платежах, помогать вести бюджет — подскажет, сколько свободных денег и что можно запланировать по ближайшим крупным покупкам. Также Олег сможет организовать путешествие, подобрать и оплатить отели, ж/д и авиабилеты, сможет управлять бронированиями, купить билеты в театр, на концерты и спортивные мероприятия, записать на прием к врачу, предложить варианты досуга на вечер, подскажет инвестиционную идею в приложении Тинькофф Инвестиции и т.д.

Кроме того, Олег сможет идентифицировать голос клиента с помощью собственных биометрических технологий Тинькофф и выполнять его голосовые команды, требующие авторизации в мобильном приложении — например, совершить перевод денег во время управления автомобилем.

2019: Анонс голосового помощника в сфере финансов и лайфстайл-услуг

13 июня 2019 года компания Тинькофф представила Олега — голосового помощника в сфере финансов и лайфстайл-услуг, созданного в России. Его миссия - помогать пользователям в решении задач в экосистеме Тинькофф.

По информации компании, Олег – мужчина от 25 до 40 лет. Он вежливый, не любит панибратства, и, если нужно, может быть настойчивым. Ему не чуждо чувство юмора, и он не учит пользователя жизни, пока тот не попросит. В иррациональных ситуациях он может выразить несогласие или даже неодобрение – но не долго, нудить он не будет. Олег догадывается, что он не совсем человек, но это его не слишком волнует. Для него важнее другое: день, который Олег прожил, не помогая людям, прошел зря.

Олег говорит голосом российского актера кино и дубляжа Никиты Прозоровского. Никита Прозоровский записал около 30 часов реплик для голосового помощника Тинькофф, на основе которых в дальнейшем стал синтезироваться голос Олега.

Олег будет «жить» в мобильном приложении Тинькофф. Голосовой помощник сможет распознавать и интерпретировать запросы пользователей, задавать уточняющие вопросы, решать их задачи, беседовать на разные темы. Олег поможет им управлять голосом всеми ключевыми финансовыми и lifestyle услугами экосистемы Тинькофф.

В первой версии Олег сможет:

  • совершать денежные переводы на счета в Тинькофф и Сбербанке
  • бронировать столики в ресторанах
  • записывать пользователей в салоны красоты
  • покупать билеты в кино с кэшбэком 15%
  • искать скидки на товары и услуги
  • общаться на свободные темы
  • давать полезные советы и лайфхаки из Тинькофф Журнала
  • консультировать по банковским вопросам и акциям
  • управлять финансовыми продуктами (дебетовой и кредитной картами)
  • изменять личные данные в экосистеме Тинькофф
  • заказывать и отправлять на почту электронные документы (например, справку для посольства)

В будущем Олег станет еще способней: он будет интегрирован во все элементы экосистемы Тинькофф – Путешествия, Мобайл, Инвестиции, Страхование, Развлечения, Бизнес, Джуниор и др. Так, Олег сможет заказать такси, организовать путешествие, подобрать и оплатить авиа и жд-билеты, отели, управлять бронированиями, купить билеты в театр, на концерты и спортивные мероприятия, записать на прием к врачу, оплатить счета, предложить варианты досуга на вечер, показать статистику расходов, подсказать инвестиционную идею в приложении Тинькофф Инвестиции и многое другое. Мобильным банком Тинькофф можно будет управлять целиком с помощью Олега.

Также Олег сможет идентифицировать голос клиента с помощью собственных биометрических технологий Тинькофф и выполнять его голосовые команды, требующие авторизации в мобильном приложении. Например - совершить перевод денег во время управления автомобилем.

На старте Олег будет поэтапно появляться у пользователей в мобильном приложении Тинькофф на iOs, чуть позже - на Android. Первые обладатели Олега смогут поделиться им со своими друзьями, переведя деньги через голосового помощника. Нужно просто попросить Олега сделать перевод нужному клиенту Тинькофф, и – в течение часа после поступления денег на счет получателя - в его мобильном приложении появится Олег (на Android - после обновления приложения до версии 4.8, которая будет опубликована в ближайшее время).

Чтобы начать общение с помощником в мобильном приложении Тинькофф - достаточно сказать: `Привет, Олег!` или `Слушай, Олег!` (у приложения должен быть доступ к микрофону смартфона). Найти Олега можно также в разделе «Чат» или нажав на кнопку «Микрофон» рядом со строкой поиска на любом экране.

Помощнику можно задать вопрос, например – «Что делать вечером?» или обратиться с просьбой сделать перевод другу и пр. Чтобы узнать о текущих возможностях Олега, нужно спросить его: `Что ты умеешь?`

Олег Голосовой помощник

Олег сможет беседовать с пользователями на разные темы, в том числе — о себе. К примеру, он с удовольствием ответит на такие вопросы: «Как тебя зовут?», «Как дела?», «Что ты делаешь в свободное время?», «Какую музыку ты слушаешь?», «Что нового в банке?», «Олег — красавчик?», `Какой курс доллара?` и т.д.

Олег Голосовой помощник

У Олега можно попросить совет, и он даст рекомендацию из Тинькофф-Журнала про деньги и жизнь. Или сказать: «Покажи скидки на кроссовки», на что Олег покажет все подходящие спецпредложения от Тинькофф (скидки можно искать по категориям или по названиям любимых фирм). Он также может поиграть с пользователем в викторину, если сказать ему «Олег, задай вопрос». Он предложит догадаться, например, какие продукты нельзя купить в Австралии, что Лев Толстой мог купить на гонорар за «Анну Каренину» или сколько кэшбэка вы получили за прошлый год.

Олег Голосовой помощник

Голосовой помощник также проконсультирует по финансовым и банковским вопросам - его можно спросить: `Что такое беспроцентный период`, `Какая у меня полная сумма задолженности`, `Как перевыпустить карту`, `Какой у меня минимальный платеж`, `Как начисляется кэшбэк`, `Как оплатить коммунальные платежи` и т.д. Он расскажет про комиссии, лимиты, программы лояльности, как пользоваться текущими банковскими услугами в Тинькофф и т.д.

Олег сможет интерпретировать запросы пользователя и при необходимости задавать уточняющие вопросы. Например, если клиент произносит «Хочу в ресторан завтра», голосовой помощник не будет спрашивать дату, а уточнит только недостающую информацию (название ресторана, количество гостей, время) и подтвердит заказ. Если клиент решит перенести поход в ресторан, голосовой ассистент отменит бронирование и предложит другие варианты.

На июнь 2019 года Олег - совсем молодой голосовой помощник, и ему еще многому предстоит научиться. Ему интересно все новое, он ежедневно совершенствует свои навыки общения. Иногда Олег может сказать или ответить на вопрос, не подумав. Он объясняет это вспыльчивым характером, но работает над собой и каждый день становится лучше. Пользователи могут помочь в обучении Олега - ставить его репликам `лайки` или `дизлайки`, которые будут анализироваться командой Тинькофф. В случае, если у Олега возникнут затруднения с решением задачи клиента, ему можно сказать `Хватит` или `Позови человека`.

Большую часть пользовательских задач Олег будет решать автоматически. Для оставшегося круга задач голосовой помощник будет привлекать операторов из колл-центра Тинькофф: он уточнит у пользователя необходимую информацию, а затем поставит задание, которое уже будет выполнять человек. Такое решение позволит максимально автоматизировать все процессы, например — записывать клиентов в те салоны красоты, которые пока еще не подключены к общей системе через партнеров.

По мере развития и общения с пользователями Олег будет обучаться и менять свой характер. Например, сможет проводить речевой анализ реплик клиента: изучать его настроение в режиме реального времени и подбирать стиль ответов — от дружелюбного до более официального.

Олега помогает обучать суперкомпьютер Тинькофф (Кластер `Колмогоров`) - на июнь 2019 года один из самых мощных в России. С его помощью команда Тинькофф быстрее обучает нейросетевые модели для распознавания речи, синтеза речи, обработки естественного языка, общения на свободные темы.

Для создания Олега использовались глубокие нейросетевые модели и речевые технологии, с которыми Тинькофф работает с 2014 года в рамках стратегии AI First. В 2016 году Тинькофф начал разработку собственной технологии распознавания речи. Она одинаково хорошо справляется с шумной речью в телефонном канале, так и с чистой речью, полученной с качественных источников данных. На июнь 2019 года технология распознавания речи правильно определяет до 95% произнесенных слов, использует для обучения терабайты данных и десятки тысяч часов человеческой речи. В 2017 году Тинькофф запустил собственную биометрическую систему, которая правильно принимает решение в 99.99% случаев. В 2018 году Тинькофф стал первым банком-вендором Единой биометрической системы по голосовой биометрии. В 2018 году Тинькофф начал разработку собственной технологии синтеза речи на основе таких нейросетевых моделей, как WaveNet, Tacotron, Deep Voice. Нейросетевые архитектуры позволяет качеству синтезированного голоса вплотную приблизиться к человеческому.

Голосовые технологии используются не только в голосовом помощнике: они помогают группе Тинькофф автоматизировать процессы, связанные с обслуживанием. Так, через распознавание речи ежедневно проходит около миллиона звонков обслуживания, а биометрическая система, обученная на голосах клиентов, успешно помогает отсеивать все мошеннические действия в колл-центре.

Смотрите также Голосовые помощники (бормотографы)



Смотрите также (мессенджеры)


Мессенджеры

Чатботы


Системы мгновенных сообщений с пользователями сайта


Локальные







Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Группа компаний ЦРТ (Центр речевых технологий) (44)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (29)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (27)
  SteadyControl (18)
  Naumen (Наумен консалтинг) (15)
  Другие (191)

  Группа компаний ЦРТ (Центр речевых технологий) (5)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (4)
  SteadyControl (4)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (2)
  3iTech (ранее 3i Technologies) (2)
  Другие (17)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (12)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (7)
  Naumen (Наумен консалтинг) (3)
  Voice Systems Robotics (VSR, VS Robotics) (3)
  Мегапьютер Интелидженс (Megaputer Intelligence) (2)
  Другие (14)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (9)
  Группа компаний ЦРТ (Центр речевых технологий) (8)
  SteadyControl (6)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (5)
  Naumen (Наумен консалтинг) (4)
  Другие (29)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (6)
  SteadyControl (5)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (3)
  Robovoice (Робовойс) (3)
  SberDevices (СалютДевайсы, ранее СберДевайсы) (3)
  Другие (26)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Группа компаний ЦРТ (Центр речевых технологий) (17, 46)
  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (3, 30)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (12, 29)
  SteadyControl (1, 23)
  SteadyControl HoReCa (1, 23)
  Другие (351, 210)

  Группа компаний ЦРТ (Центр речевых технологий) (2, 5)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 5)
  SteadyControl HoReCa (1, 4)
  SteadyControl (1, 4)
  SberDevices (СалютДевайсы, ранее СберДевайсы) (2, 2)
  Другие (9, 13)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (2, 12)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  SteadyControl HoReCa (1, 3)
  Voice Systems Robotics (VSR, VS Robotics) (1, 3)
  Naumen (Наумен консалтинг) (1, 3)
  Другие (12, 16)

  МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1, 9)
  Группа компаний ЦРТ (Центр речевых технологий) (4, 7)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  SteadyControl HoReCa (1, 7)
  SteadyControl (1, 7)
  Другие (17, 29)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (2, 7)
  SteadyControl HoReCa (1, 5)
  SteadyControl (1, 5)
  Ростелеком (2, 4)
  СалютДевайсы (ранее SberDevices) (2, 4)
  Другие (20, 33)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  МТТ VoiceBox - 24
  SteadyControl Система контроля и управления персоналом - 23
  BSS Digital2Speech - 21
  Voice2Med Система распознавания речи в медицине - 14
  Naumen Erudite - 13
  Другие 199

  BSS Digital2Speech - 5
  SteadyControl Система контроля и управления персоналом - 4
  Voice2Med Система распознавания речи в медицине - 4
  3i TouchPoint Analytics - 2
  МТТ VoiceBox - 2
  Другие 11

  МТТ VoiceBox - 11
  BSS Digital2Speech - 6
  Naumen Erudite - 3
  VS Robotics: VS Робот-оператор - 3
  SteadyControl Система контроля и управления персоналом - 3
  Другие 14

  МТТ VoiceBox - 9
  SteadyControl Система контроля и управления персоналом - 7
  EXpress Защищенный корпоративный мессенджер - 6
  BSS Digital2Speech - 6
  SmartLogger II - 4
  Другие 23

  SteadyControl Система контроля и управления персоналом - 5
  BSS Digital2Speech - 4
  YandexGPT (YaLM 2.0) - 3
  EXpress Защищенный корпоративный мессенджер - 3
  BSS: Виртуальный голосовой ассистент - 3
  Другие 25