- •МГЛУ
- •Новые информационные технологии в лингвистике
- •Автоматическое распознавание речи
- •Процесс порождения речи
- •Процесс порождения речи у человека
- •Речевая волна во временной области
- •Речевая волна во временной и частотной областях
- •Речевая волна во временной и частотной областях
- •Представление речи в виде формантных траекторий
- •Перекрытие областей формантных частот
- •Положение центроидов основных гласных
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Колонка коры (по Батуеву А.С.)
- •Гиперколонка коры (по Батуеву А.С.)
- •Отдельные слова словарей раскладываются по
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Процесс восприятия речи человеком
- •Коммуникационный акт
- •Структура коммуникационной системы для организации речевого поведения
- •Структура коммуникационной системы для организации речевого поведения
- •Структура коммуникационной системы для организации речевого поведения
- •Информационно-кодовая модель коммуникации Шеннона и Уивера
- •Под распознаванием речи понимается выделение информации из преобразованного сигнала, полученного адресатом от адресанта
- •Правило Байеса
- •Правило Байеса
- •Правило Байеса
- •Правило Байеса
- •Правило Байеса
- •Информационно-кодовая модель коммуникации Шеннона и Уивера, модифицированная для коммуникационного акта Якобсоном
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Автоматическое распознавание речи
- •Акустико-фонетический подход
- •Акустико-фонетический подход
- •Акустико-фонетический подход
- •Подход, основанный на распознавании образов
- •Подход, основанный на распознавании образов
- •Подход, основанный на распознавании образов
- •Подход, основанный на распознавании образов
- •Подход на основе искусственного интеллекта
- •Подход на основе искусственного интеллекта
- •Подход на основе искусственного интеллекта
- •Подход, основанный на искусственных нейронных сетях
- •Подход, основанный на искусственных нейронных сетях
- •Нейронные сети
- •Первичная обработка
- •Спектральный анализ
- •Спектральный анализ
- •Спектральный анализ
- •Анализ на основе линейного предсказывающего кодирования
- •Анализ на основе линейного предсказывающего кодирования
- •Анализ на основе линейного предсказывающего кодирования
- •Анализ на основе линейного предсказывающего кодирования
- •Векторное квантование
- •Векторное квантование
- •Векторное квантование
- •Векторное квантование
- •Антропоморфная модель анализа
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Психоакустическое сглаживание спектра
- •Принятие решения
- •Принятие решения
- •Динамическое программирование
- •Динамическое программирование
- •Динамическое программирование
- •Динамическое программирование
- •Динамическое программирование
- •Динамическое программирование
- •Динамическое программирование
- •Динамическое программирование
- •Правило Байеса
- •Правило Байеса
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Стандартный СММ распознаватель
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Скрытые Марковские модели
- •Реализация и использование систем распознавания речи
- •Реализация и использование систем распознавания речи
- •Промышленные системы распознавания речи Стандартная система распознавания речи
- •Промышленные системы распознавания речи
- •Промышленные системы распознавания речи
- •Промышленные системы распознавания речи
- •Промышленные системы распознавания речи
- •Промышленные системы распознавания речи
- •Промышленные системы распознавания речи
- •Диалог человека и машины
- •Диалог человека и машины
- •Диалог человека и машины
- •Диалог человека и машины
- •Сравнение эффективности распознавания человеком и искусственными системами
- •Сравнение эффективности распознавания человеком и искусственными системами
- •Сравнение эффективности распознавания человеком и искусственными системами в условиях шума
Гиперколонка коры (по Батуеву А.С.)
I. Пирамидные
нейроны II. Колонка
а. Аксонные пучки
б. Специфические
афферентные
волокна В. Горизонтальная клетка
4
Отдельные слова словарей раскладываются по |
37 |
колонкам коры |
|
Процесс восприятия речи человеком
Многоуровневая иерархическая |
|
структура из процессов обработки |
|
речевой информации, в которой на |
|
каждом уровне имеется множество |
|
параллельно включенных процессов, |
|
связанных с процессами следующего |
|
уровня по типу "каждый-с-каждым". |
|
Каждый процесс формирует подсловарь |
32 |
|
Процесс восприятия речи человеком
Первичная обработка
{A}
Первичная
обработка
{Речевая волна}
Очистка от шума Предобработка Формирование вектора параметров Сегментация
33
Процесс восприятия речи человеком
Морфологический и лексический уровни
Морфологическая
обработка
^ |
- Словарь флективных |
{B} |
морфем (окончаний) |
{A} -Последовательность векторов параметров
Формирование
лексикона
^
{D} - Словарь корневых основ (корень+суффикс)
{C} - Множество текстов с купюрами вместо флективных морфем
^
{B} - Словарь флективных морфем
{A} |
- Множество произнесенных текстов |
|
34 |
Процесс восприятия речи человеком
Синтаксический и семантический уровни
Синтаксическая |
Семантическая |
обработка |
обработка |
^ |
|
|
|
|
|||
- Словарь графов-синтаксем |
^ |
|
|||||
{F} |
|
{H} |
|
||||
|
|
|
(синтаксических групп) |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
||
{E} |
|
|
|
|
|||
- Произнесенный текст |
{G} |
||||||
|
|
|
с купюрами вместо |
||||
|
|
|
корневых основ |
|
|
|
|
|
|
|
|
|
|
||
|
|
|
|
|
|
||
^ |
|
|
|
|
|
||
|
^ |
|
|||||
{D} |
|
- Словарь корневых основ |
|
||||
|
{F} |
|
|||||
|
|
|
(корень+суффикс) |
|
|
|
|
|
|
|
|
|
|
||
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
{A} |
- Последовательность |
|
|
|
|||
{A} |
|||||||
векторов параметров |
-Словарь попарной сочетаемости корневых основ
-Текст с купюрами вместо флективных морфем
-Словарь синтаксем (синтаксических групп)
- Произнесенный текст |
35 |
|
Процесс восприятия речи человеком
Семантический уровень
Попарная сочетаемость корневых основ ключевых слов и словосочетаний
(ассоциативная , или семантическая сеть) – понятия с их весом и связи с их в
Семантические представления – сеть для предметной области
Вес понятий – частота встречаемости в тексте Вес связей – частота попарной встречаемости в фрагментах текста 36
Коммуникационный акт
1.Структура коммуникационного акта
2.Правило Байеса
3.Структура коммуникационной системы человека
5
Структура коммуникационной системы для организации речевого поведения
(1) |
индивидуальная многомодальная модель мира |
|
(2) |
правого полушария |
|
социализированная модель мира левого |
|
|
(3) |
полушария |
|
подсистема управления синтезом речи |
|
|
(4) |
артикуляторные органы |
|
(5) |
периферия слуховой подсистемы |
16 |
(6) |
подсистема распознавания речи |
Структура коммуникационной системы для организации речевого поведения
6