- •Чинники, що зумовили формування комп’ютерної лінгвістики як науки
- •Поняття кл. Історія розвитку кл
- •Зв’язки кл з іншими нелінгвістичними науками
- •Поняття кл. Основні напрямки кл
- •Основні напрямки кл. Комп’ютерна лексикографія
- •Основні напрямки кл. Аналіз текстів на природній мові
- •Історія розвитку та сучасний стан систем машинного перекладу
- •Прикладні системи розробку яких, забезпечує кл
- •Характеристика об’єкту досліджень в кл
- •Характеристика предмету досліджень в кл
- •Два типи моделей опису мовленнєвої діяльності. Розширена класифікація моделей
- •Класифікація моделей опису мовленнєвої діяльності
- •Етапи створення лінгвістичної моделі
- •Вимоги до побудови лінгвістичних моделей
- •Класифікація лінгвістичних моделей за способом побудови
- •Класифікація лінгвістичних моделей за способом аналізу мовних об’єктів
- •22. Система рівнів абстракції опису лінгвістичних явищ в кл
- •23. Критерії вибору формалізму для представлення лінгвістичних явищ в кл
- •24. Граматики, що використовуються для опису в кл
- •25.Загальна схема опрацювання текстів на природній мові
- •26. Аналіз окремих слів. Характеристика етапу
- •27. Аналіз окремих речень. Характеристика етапу
- •28. Аналіз тексту в цілому. Характеристика етапу
- •29. Поняття автоматизована система опрацювання текстів. Характеристика основних підходів до її розробки
- •30. Які задачі вирішує модуль ама в системах автоматичного опрацювання текстів природною мовою
- •Загальна умовна структура системи ама
- •32. Основні принципи розробки систем ама
- •33.34.35 Основні групи методів ама
- •37. Етапи ма з використанням словників
- •38. Етапи створення швидкодіючого алгоритму ма
- •39. Які основні вимоги висуваються до систем ама
- •40.Основні поняття морфологічної моделі мови флективного типу
- •41.Основні складові лінгвістичного забезпечення систем ма.
- •43. Які складові необхідні для опису мови в її морфологічній моделі?
- •44. Поняття таблиці морфів. Навести приклад
- •45. Поняття списки масок. Навести приклад
- •46. Поняття списки морфів. Навести приклад
- •47. Поняття технічної частини мови
- •48 Яку інформацію повинен містити кожен запис у словнику основ
- •49. Порівняння методів ма «справа-наліво» і «зліва-направо»
- •50. Переваги методів ма «зліва-направо»
- •51. Характеристика задачі побудови словника основ і пошуку в ньому, як задачі керування базою даних
- •52. Загальна структура словника основ, яка забезпечує мінімум звертань до диска
- •53. Алгоритм пошуку у словнику основ. Навести приклад
- •54.Алгоритм роботи «стека вкладених ключів». Навести приклад
- •55.Алгоритм формування словника основ. Навести приклад
- •57.Типи граматичних правил для зняття омонімії
- •58.Використання прихованої моделі Маркова в алгоритмах зняття омонімії
- •60.Алгоритм зняття омонімії методом на основі нормалізуючи підстановок і позицій сусідніх слів
Етапи створення лінгвістичної моделі
В загальному випадку для створення потрібні наступні стани:
1) виділення формальних ознак які є визначальними для модельованого об’єкту
2) Встановлення функціонального навантаження формальних ознак об’єктів і відношень між ними.
3) З’ясування схем взаємодії чи взаємо виключення формальних ознак.
4) Вироблення правил дії моделі, для одержання інфо про будову об’єкта або його властивості.
Для того, щоб модель дійсно служила аналогом натур. об’єкта вона повинна відповідати певним вимогам до її побудови.
Вимоги до побудови лінгвістичних моделей
Вимоги до будови моделі (Піотровський):
1) Модель повинна бути спрощеним аналогом, але не копією об’єкта
2) Модель не повинна бути складнішою за оригінал, разом з тим застосування дозволяє отримати потрібну інфо про оригінал швидше за інші прийоми його досліджень.
3) побудована модель має бути вільною від суперечностей, гранично простою, вичерпною, між цими критеріями є пріоритетна залежність. Перший критерій найважливіший, але якщо всі рівні, то пріорітет надається моделі з найвищою швидкодією.
4) Модель повинна мати універсальний характер, що дозволяє їх застосовувати до класу об’єктів і не тільки до одної.
5) Модель має мати пояснювальну силу, тобто здатність виявляти, аналізувати і передбачати і пояснювати ще нереалізовані властивості.
6) Модель повинна мати евристичні пошукові властивості, тобто генерувати нові знання про оригінал.
Класифікація лінгвістичних моделей за об’єктами моделювання
Об’єкт моделювання |
Тип моделі |
Структурні властивості оригіналу, його будова |
Статична, структурна, класифікаційна |
Функціонування оригіналу |
Динамічна, функціональна
|
Система мови |
мовна |
Мовна діяльність |
Мовленнєва |
Аналіз оригіналу |
Індуктивна (аналітична) |
Синтез оригіналу |
Дедуктивна (синтетична), породжувальна |
Нові знання про оригінал |
Гіпотетична (або евристична), пошукова |
Нові об’єкти, заданими властивостями |
Відтворювальна, імітаційна
|
Класифікація лінгвістичних моделей за способом побудови
За способом побудови виділяють:
індуктивні - на основі аналізу конкретно мовного матеріалу форм. гіпотезу про його будову та функціонування
дедуктивні – будуються на основі якоїсь гіпотези і перевіряють її вірогідність на певному мовному матеріалі.
Ці моделі мають бути розроблені для всіх рівнів мови, пов’язані між собою, доповнювати одна одну.
Класифікація лінгвістичних моделей за способом аналізу мовних об’єктів
статистичні
динамічні
22. Система рівнів абстракції опису лінгвістичних явищ в кл
При русі від верхніх до нижніх рівнів наступної схеми відбувається перехід від опису конкретних лінгвістичних проблем до механізнів, на яких грунтується такі описи. Конкретна мова описується на основі конкретних правил і лексикону.
Рівень |
коментар |
Реалізація граматик природної мови |
Правила і словник для даної мови |
Лінгвістична теорія |
Зміст----текст |
Лінгвістична модель |
Семантична структура, глибинна синтаксична структура |
Лінгвістичний формалізм |
Математичний апарат,формальні граматики, апарат скінченних автоматів |
Обчислювальний формалізм |
Реалізація на певних мовах програмування |
Компютерна реалізація |
Технічні засоби реалізації, реалізація за їх допомогою віртуальних машин |