Karaoke presentation

1. МЫ ДЕЛАЕМ ТОЛЬКО ПОЛЕЗНЫЕ ВЕЩИ

2. ТЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ 2
Обработка на ближнем конце CITY DENOISE PLAYER
AUDIOBOOK DENOISE PLAYER
SUPERTALK CC
CITY SUPERTALK
CAR PC DENOISE PLAYER
SUPERTALK CC
CITY SUPERTALK
Petralex hearing aid
Dectone hearing aid
Обработка на дальнем конце
Подавление шума и акустической
обратной связи (АОС)
РЕЧЕВЫЕ ТЕХНОЛОГИИ
Технология “Убедительный голос” SUPERTALK CC
CITY SUPERTALK
AUDIOBOOK DENOISE PLAYER
SPEECH TRAINER (SUPERTALK CC)
SING ASSIST KARAOKE
SUPERTALK CC
CITY SUPERTALK
Технология “Речевой помощник”
Технология “Трансформации вокала”
Технология “Антистресс речь”
ТЕХНОЛОГИИ УЛУЧШАЮЩИЕ СЛУХОВОЕ ВОСПРИЯТИЕ
Технология “3D hearing” 3D HEARING PLAYER
CITY DENOISE PLAYER
Petralex hearing aid
Dectone hearing aid
Технология улучшающая восприятие
музыки
Технологии для слабослышащих

3. ТЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ
Альтернатива активному шумоподавлению
Индексразборчивостиречи
Входящий сигнал к уровню шума, дБ
ТЕХНОЛОГИИ “DENOISE”
Компенсация эффекта шумового маскирования
Повышение разборчивости сигнала
-30
0
0,1
0,2
0,3
0,4
0,5
0,6
0,7
0,8
0,9
Хорошо
Плохо
1
-20 -10 0 10 20
30
До обработки
После обработки
Автоматическое повышение
разборчивости сигнала в
шумовой обстановке – метод
частотно-зависимого усиления
звукового сигнала с учетом
шума внешней среды, в
которой осуществляется его
воспроизведение.
Analysis
lter bank
Adaptive
compressor
Source
signal
Output
signal
Noise
Analysis
lterbank
Synthesis
lterbank
Adaptive
compressor
Personal
amplier
Принципиальная схема цифровой обработки сигнала
3

4. TЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ
Оценка спектральной плотности мощности окружающего шума производится при помощи внешнего
микрофона. В результате обработки создается эффект повышения разборчивости сигнала.
Для автоматического повышения разборчивости предполагается наличие двух сигналов:
полезный звуковой сигнал
шумовой сигнал, характеризующий внешнюю среду, в которой воспроизводится.
речь на фоне шума без обработки музыка на фоне шума без обработкиречь на фоне шума с обработкой музыка на фоне шума с обработкой
4
Применение в голосовых системах связи
Tехнология одинаково хорошо подходит, как для
прослушивания музыкальных композиций, так и для
работысречевымисигналами.Вчастности,вспециальное
приложение для колл-центров SUPERTALK CC, которое
устанавливается на рабочее место оператора. Технология
помогает лучше услышать удалённого абонента на фоне
внутреннего шума в самом колл-центре. Данный шум
появляется из-за высокой концентрации одновременно
разговаривающих людей.
Особенно перспективным является применение
данной технологии в системах телеконференций,
где предусмотрено клиентское приложение и связь
обеспечивается с помощью IP-протокола. Пользователям
подобных приложений, которые участвуют в
телеконференции, при том, что находятся в шумном
месте, будет полезным применить данную технологию,
реализованную в виде приложения или отдельного
плагина CITY SUPERTALK.
Здоровье слуха
Tехнология сохраняет слух
пользователей,посколькувыполняется
избирательное усиление только
тех составляющих сигнала, которые
маскируются шумом, что позволяет
достигать высокой разборчивости при
относительно небольшом повышении
общей громкости.
Обработка аудиоконтента
Применение данной технологии
даёт наилучший эффект при
прослушивании музыки, аудиокниг,
просмотре видео в местах с высокой
интенсивностью шума: в поездах,
автомобилях, самолётах, метро, на
городских улицах и т.д. Технология
будет эффективна как с обычными
наушниками-вкладышами, так и с
накладными наушниками.

5. Режим «Denoise» поддерживает разборчивость
любимых треков и книг в окружающем шуме и
не допускает превышение безопасного порога
громкости.
Режим «World Around» - это первая функция в мире,
которая обеспечивает безопасность слушателей
на улице. Это обеспечивается интеллектуальным
микшированием окружающего звука и контента.
Алгоритм микширования основан на тех же
принципах, что и режим «Denoise», для достижения
высокой разборчивости и выделения важного из
фонового шума.
ТЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ
ВНЕДРЕНИЕ ТЕХНОЛОГИИ
UrbanDenoiser Player
Применение данной технологии дает наилучший
эффект при прослушивании музыки, аудиокниг,
просмотре видео в местах с высокой интенсивностью
шума (в поездах, автомобилях, самолетах, метро,
городские улицы и т.д.) Технология будет эффективна,
как с обычными наушниками-вкладышами, так и с
накладными наушниками.
Audiobook Denoise Player
Режим “Denoise” повышает
разборчивость речевого
сигнала в системах голосовых
коммуникаций (системы
телеконференций и т.д.)
City supertalk City supertalk
Supertalk колл-центр Увеличение уровня громкости голоса
Эффект от внедрения технологии
DistanceDenoise: исследования
проведенные по методике
артикуляционных измерений
независимыми аудиторами в
шумовых условия показали
увеличение разборчивости
тестовых фраз на 16 %.
5

6. ТЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ
Принципиальная схема обработки цифрового сигнала
Компенсацияакустическойобратнойсвязидляулучшенияслышимостиприпрослушиваниичерезгромкоговорители.
Analysis
lter bank
Feedback
compensation
Adaptive
compressor
Source signal Output signal
Noise
Acousticfeedback
Analysis
lterbank
Synthesis
lterbank
Adaptive
compressor
Personal
amplier
Режим “Denoise“ в автомобильных
аудиосистемах использует более
сложную схему обработки аудиосигнала,
предназначенную для работы с внешними
источниками полезного сигнала (динамики
аудиосистемы).
Подстройка звукового сигнала,
воспроизводимого через динамик, к
условиям окружающего шума позволяет
пользователям деловой и личной
голосовой связи слышать собеседника
разборчиво на шумной улице, в
общественном транспорте и т. д.
City supertalkCar PC denoise player
6

7. ТЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ
Сниженная вычислительная сложность модулей отвечающих за подавления шума и акустической
обратной связи (АОС) позволяет применять их, в таком классе устройств, который особо требователен к
алгоритмической задержке (к примеру - слуховые аппараты).
g(m)
w(m)
AFB
Acoustic feedback channel
v(n) u(n) u(m) e(m)
DelayMic Speakergc
x(n)
Amplification
Z-d1
Наша реализация технологий подавления шума и АОС.
AFB
SFB
Подавление шума Подавление аккустической обратной связи
Пример car composite noise attenuation в слуховом аппарате,
реализованном на базе смартфона с низкой алгоритмической
задежкой 5-8 мс.
Пример подавления возникающей акустической обратной
связи (АОС) в слуховом аппарате, реализованном на базе
смартфона с низкой алгоритмической задежкой 5-8 мс.
7

8. ТЕХНОЛОГИИ ПРОТИВОДЕЙСТВИЯ ШУМУ
ПОРТРЕТ ПОЛЬЗОВАТЕЛЯ
Пользователи музыкальных стрим-
сервисов
Пользователи систем конференцсвязи
Пассажиры практически всех видов
транспорта, метро и т.д.
Любители аудиокниг
Зрители видео
Пользователи слуховых аппаратов
8
Перспективность нашей
технологииподтверждена
победой приложения
- плеера UrbanDenois-
er, созданного на базе
данной технологии
в европейском кубке
р а з р а б о т ч и к о в ,
проводимым компанией
Microsoft, в марте 2015
года.
Отзывы пользователей
Прикольное приложение
от Oshanin
Свежий взгляд в области приложений
проигрывания музыки
от Stiv24
Двепрекрасныеидеи:1)изменениеикорректировка
звука под индивидуальную чувствительность
слушателя в комплекте с наушниками; возможность
слышать окружающие тебя звуки даже в наушниках
с шумоподавлением на которых нет такой функции.
Желаю авторам дорасти до платной версии или
аддонов. DLNA, SMB.
1
от Boriskan
Плеер супер советую всем

9. РЕЧЕВЫЕ ТЕХНОЛОГИИ
измененние качественных
параметров речевого сигнала
для решения профессиональной
и развлекательной деятельности
глубокая обработка сигнала с
сохранением натуральности и
разборчивасти речи
real time управление просодикой
для целевой окраски звучания
голоса
алгоритмы технологии параметризируют речевые сигналы
технология учитывает индивидуальные особенности
артикуляции и речевого тракта
синтезированная речь звучит естественно, без характерных
артефактов присущих “синтезу речи по тексту”
речьсинтезируетсязасчетиспользованиязапатентованныхмоделей
речевого сигнала, модифицирующих гармонические параметры
технологияприменяетсядлямодификацииречевогоконтентаи
повышения эффективности деловых голосовых коммуникаций
Убедительный голос
City supertalk
Supertalk CC
В системах деловых коммуникаций
данный модуль применяется для:
Систем конференц-связи в
виде специализированного
приложения Supertalk CC;
Оборудования колл-
центров и входит в состав
специализированного решения
для контакт-центров City Supertalk.
Более 70% пользователей
считают обработанный голос
более убедительным
Представленное решение актуально
как для широкополосных, так
и для узкополосных каналов
связи и устойчиво к цифровому
кодированию с потерями.
9

10. РЕЧЕВЫЕ ТЕХНОЛОГИИ
ВНЕДРЕНИЕ
Метод речевой коррекции для
комфортного восприятия
Вплеерах,предназначенныхдлявоспроизведения
речевого контента данный модуль применяется
для:
модификации голоса диктора (регулировка
частоты основного тона);
сохранения естественности и разборчивости
речевого сигнала при изменении скорости
проигрывания контента.
Audiobook Denoise Player
Технология изменяет режим фонации модели, описывающей речевой тракт пользователя в режиме
реального времени. В результате обработанный голос звучит менее экспрессивно, чем оригинал.
Технология “Антистресс”
Источник Результат
10

11. РЕЧЕВЫЕ ТЕХНОЛОГИИ
графическая визуализация
интонационного контура фраз
оценка интонированного произношения в
сравнении с эталонным
разметка-подсказка фрагментов фраз
возможность добавления новых фраз
изменения длительности эталонных фраз
ручная коррекция интонационного
профиля эталонных фраз
Технология “Речевой помощник”
SUPERTALK CC SPEECH TRAINER
Источник Результат
Технология реального времени
оценивает произношение по
степени совпадения с заданным
интонационным контуром фразы.
Для создания эффекта обратной
связи, приложение визуализирует
интонационные контура
произнесенных и эталонных фраз.
Предусмотрена возможность
изменения эталонных фраз
с помощью графического
интерфейса (ручная коррекция
интонационного контура).
11

12. РЕЧЕВЫЕ ТЕХНОЛОГИИ
Технология
“Трансформации вокала”
Коррекция певческого голоса в
режиме реального времени, с
низкой алгоритмической задержкой
(<30 мс). Технология основывается
на квазипериодической модели с
нестационарными параметрами на
основе мгновенной частоты основного
тона, обеспечивающей широкий
диапазон звучания голоса.
Певческийпроцессорреальноговремени
«Sing Assist Karaoke» обрабатывает
вокал исполнителя, синтезируя голос
под нужные ноты. Опционально
доступно моделирование искусственной
полифонии.
Приложение не требует
предварительного обучения на голос
пользователя.
12

13. РЕЧЕВЫЕ ТЕХНОЛОГИИ
ВНЕДРЕНИЕ
Технология “Трансформации вокала”
Технология реализована в качестве программного обеспечения, способного
работать на рядовых персональных компьютерах и адаптированно для работы
на устройствах ОС iOS и Android.
Приложение можно использовать в качестве тренажера для развития
вокальных навыков. Интерфейс программы демонстрирует обратную связь в
виде визуализируемых контуров – эталонного и оригинального пения.
Присутствует система объективной оценки.
Разработчиком реализовано решение, при котором нет необходимости
предварительно обучать систему. Что позволяет пользователю определить
набор эффектов и петь сразу после выбора песни.
Приложение можно использовать для обучения иностранному языку через
пение.
Sing Assist Karaoke
Приложениеинтегрировановсоциальныхсетяхипользователимогутделиться
своими записями, создавать альбомы, получать комментарии, оценивать
пение других пользователей и многое другое.
Приложение предоставляет возможности использования профессиональный
эффектов (реверберация, многоголосие и прочее) без звукорежиссера.
13

14. человек со слабыми вокальными данными сможет чувствовать себя уверенно
пользователи, изучающие иностранные языки с помощью приложений для смартфонов и планшетов
дети и взрослые, нуждающиеся в реабилитации и коррекции речевых нарушений
пользователи могут улучшить свое психоэмоциональное состояние
пользователи смартфонов и планшетов, которым необходима коррекция дефектов дикции
люди, готовящиеся к публичным выступлениям при помощи приложения для смартфона/планшета
или ноутбука
сотрудники контакт-центров, служб поддержки, отделов продаж, использующих специализированные
приложения с данным функционалом
изучающим иностранные языки при постановке произношения
используя приложение в качестве тренажера, пользователь развивает вокальные данные
в качестве игры приложение предназначено для пользователей с 6 лет
SING ASSIST KARAOKE
РЕЧЕВОЙ ПОМОЩНИК
РЕЧЕВЫЕ ТЕХНОЛОГИИ
ПОРТРЕТ ПОЛЬЗОВАТЕЛЯ
пользователи приложений для голосового общения и недовольные тем, как звучит их собственный голос
пользователи, профессиональных систем связи, стремящихся повысить эффективность деловых
голосовых коммуникаций
УБЕДИТЕЛЬНЫЙ ГОЛОС
люди, нуждающиеся в стабилизации своего эмоционального состояния во время напряженных
голосовых коммуникаций
сотрудники служб поддержки и других служб «переднего края» отвечающего за взаимодействие с
клиентами
АНТИСТРЕСС
пользователи приложений «аудиокниги»
слушатели подкастов и прочего контента, содержащего речь
AUDIOBOOK DENOISE PLAYER
14

15. Технология коррекции звука позволяет реализовать
эффектпогружениявобъемныйзвукдляпрослушивания
записей, предназначенных специально для наушников
(бинауральные записи), а также эффект “реконструкции
сцены” для прослушивания записей в наушниках,
предназначенных для колонок (видеофильмы и
концертные записи)
A
A
B
B
listener
Real sound sources
Perceived sound sourcer
listenerRecovering
acoustical imagery
Технология “3D hearing”
Эффект реконструкции натурального звучания
достигается за счет применения персонально
настраиваемой психоакустической модели слушателя.
Настройка модели выполняетсяпри помощи пороговой
и надпороговой бинауральной аудиометрии.
Существует возможность ручной настройки,
позволяющей изменять звучание в соответствии с
личными предпочтениями пользователя.
15ТЕХНОЛОГИИ УЛУЧШАЮЩИЕ СЛУХОВОЕ ВОСПРИЯТИЕ
ТЕХНОЛОГИЯ “3D HEARING”
любители «живой» музыки
ПОРТРЕТ ПОЛЬЗОВАТЕЛЯ
пользователи устройств
виртуальной реальности
любители кино и зрители видео
контента

16. ТЕХНОЛОГИИ УЛУЧШАЮЩИЕ СЛУХОВОЕ ВОСПРИЯТИЕ
Обработка музыки в соответствии с проприетарным алгоритмом «восстановления естественного
звучания», на основе персонального профиля слуха.
Два типа эквалайзеров - классические и частотно-зависимые, отрегулированные в зависимости от
уровня слуха.
Normalizer – выравнивает громкость для потоковой музыки.
Virtual speakers – имитация звука, характерного для воспроизведения через динамики.
16
пользователи музыкальных
стрим-сервисов
Портрет пользователя
меломанывсе, кто слушает музыку в
транспорте, на оживленной
магистрали и заботится о
своей безопасности

17. ТЕХНОЛОГИИ ДЛЯ СЛАБОСЛЫШАЩИХ
Данная технология позволила реализовать нелинейные,
программируемые, мультиканальные слуховые аппараты
Petralex и Petralex Pro со встроенной аудиометрией на базе
мобильной платформы. Приложения «слуховой аппарат»
отличается эффективной организацией вычислений,
обеспечивающих низкие требования к производительности
устройства и энергопотреблению, что должно обеспечить
снижение стоимости слуховой помощи для нуждающихся в
ней людей.
Acoustic feedback
x(n)
y(n)
x(n)
X(l,m)
GNR
(l,m) GAF
(l,m) GHL
(l,m)
GNR
(K,m) GAF
(K,m) GHL
(K,m)
X(K,m)
x(n)
a(n)
Background
noise
Noise
reduction
Acoustic
feedback
cancellation
Hearing loss
compensa-
tion
AFB
SFB
Принципиальная схема Dectone/Petralex
Задержка обработки
Программируемый слуховой аппарат
Измерение In-Situ аудиометрии
Количество каналов
Нелинейный слуховой аппарат
Широкий динамический диапазон компрессора
Регулировка степени сжатия
Выбор формулы усиления
Возможность адаптации к окружающей обстановке
Функция подавления акустической обратной связи
Встроенный ручной эквалайзер для низких и высоких
частот
Поддержка Bluetooth гарнитур
Цена
*beta
6 мс/10 мс
да
да
8
да
да
да
да
да
да
да
да
FREE/FREE*
17

18. ТЕХНОЛОГИИ ДЛЯ СЛАБОСЛЫШАЩИХ
Технология улучшения слуха
c низкой алгоритмической
задержкой обработки сигнала;
бинауральным частотно-
зависимое усилением в
соответствии с существующими
и собственными
спецификациями усиления
(gain prescription formulas);
коррекцией рекруитмента (re-
cruitment) (т.е. нарастания
громкости); подавлением
эффекта акустической обратной
связи и т.д.
Petralex
18
Новая формула усиления
Обработка скользящего диапазона с
низким временем обработки - 10 мс
Низкая вычислительная нагрузка
Регулируемый режим шумоподавления
Защита от избыточного усиления
Улучшенное подавление акустической
обратной связи АОС), которое резко
увеличивает эффективное усиление
Equal loudness’ mode – Тонкая
персональная компенсация, которая
восстанавливает зависящую от
частоты чувствительность к тихим и
громким звукам здорового уха
Специальная бинауральная
коррекция, которая восстанавливает
нормальный акустический фон, даже
когда чувствительность правого и
левого ушей существенно отличается Dectone