Na voz social Network Clubhouse apareceu axudante Tinkoff chamado Oleg. Este é o primeiro caso de integrar asistencia de voz e tecnoloxías de síntese e recoñecemento de voz nesta plataforma.
Como resultou ser un asistente, grazas ás súas habilidades de recoñecemento e sintetizando o discurso en liña, poderá funcionar na rede social como un usuario de Internet de pleno dereito que proporcionase moderadores de sala para ferramentas de contacto adicionais con suscriptores e modelos de discusión. O asistente de voz poderá asistir á sala de servizo e escoitar altofalantes ao mesmo tempo descifrar textos e as principais emisións en vivo na súa canle de telegrama "Oleg in Clabukhause". Será capaz de actuar como moderador para expresar as palabras dos altofalantes para lembrar de regulamentos e tempo e realizar moitas outras accións informes Live24.ru
Asistente 11 de marzo xa pasou a primeira emisión con decodificación de texto da sala de Tinkoff. Durante o evento con xornalistas e investimentos, emitíase o principal director de Oliver Hughes.
A discusión na sala dedicouse ao tema dos resultados financeiros e os beneficios do grupo
Actividades para 2020. O director da tecnoloxía II Tinkoff Pavel Kalaidin dixo que nesta etapa o equipo experimenta con varios escenarios no clubhouse que podería ser útil para os desenvolvedores e interesantes para os estudantes. Probar a ferramenta de conversión do sinal de audio ao texto por conta propia
Resultou ser exitoso.
O asistente de voz de Oleg tamén é útil para os creadores das habitacións e os moderadores de discusión cando non hai oportunidade de facer unha pregunta cunha voz. Para tales casos, os desenvolvedores prepararon unha interface que permite facer preguntas a través do chat cun asistente de telégrafo. Oleg é capaz de non só ler perfectamente os textos senón tamén preservar o anonimato dos autores. Nesta fase, traballa para mellorar o asistente continúa. Entre outras cousas, as posibilidades de total información e limpeza de texto para que a transcrición sexa máis lexible.
O asistente de voz presentado está baseado nas tecnoloxías de voz de Tinkoff VoiceKit. Estes son modelos de rede neuronais profundos desenvolvidos no marco do primeiro proxecto AI. Esta ferramenta foi utilizada, así como para crear un asistente chamado Oleg que é o primeiro asistente de voz financeira do mundo para desenvolver Tinkoff. Tinkoff VoiceKit Technology pódese usar para crear robots para automatizar o traballo en centros de chamadas para audiobooks de gravación rápida, así como editar e expresar video.
Estes modelos axudarán a desenvolver os seus propios
e programas para persoas con discapacidade. Ademais, estas ferramentas poden ser usadas para a optimización de motor de busca, incluíndo a investigación para transcrición de audio e vídeo de calquera gravacións de son públicas e construción dun sistema de análise de discurso para fontes transcritas.
Pavel Kalaidin subliñou que no grupo preparado para experimentos conxuntos con comunidades de clubhouse porque esperan que Oleg se converta nun bo asistente para os oíntes e os fabricantes de contidos. Para a cooperación, póñase en contacto con mediá[email protected]. Pode deixar a aplicación Tinkoff VoiceKit por referencia
.