43. Количественные методы в лингвистике. Особенности метода лингвистического моде­лирования.

Естественные языки в отличие от искусственных, информационных не являются по своему устройству жесткими, логическими системами, поскольку между единицами естественного языка существуют не только связи, отражающие логико-предметные отношения реалий, но и вероятностные, градуальные связи. Определение языка и его плана содержания как вероятностной системы требует для их объективного познания квантитативных методов, связанных с исследованием частотных, вероятностных, градуальных и других нелогических характеристик языка.

Среди квантитативных методов, используемых в языкознании, следует различать количественные и статистические. С помощью количественных методов специалисты учитывают и регистрируют частоты встречающихся в текстах или в речи фактов благодаря их дискретности и повторяемости. Статистические методы используются для исследования фактов в их массовых проявлениях, с целью вскрыть закономерности (правила) появления этих фактов при функционировании языка. Статистические методы включают в себя разнообразные формулы, применяемые для выявления правил распределения языковых единиц в речи, для измерения различных как формальных, так и качественных явлений языка, для установления тех или иных тенденций в развитии и функционировании языка, для определения значимости исследуемых семантических явлений, установления зависимости между качественными и количественными, характеристиками языка. При употреблении квантитативных методов следует всегда придерживаться их основного назначения - исследовать качественное (семантическое, например) своеобразие рассматриваемого явления, степень интенсивности его свойств, поскольку связь между количественными и качественными показателями - один из основных законов диалектики.

Количественная оценка и характеристика качественных явлений языка представляет собой составную часть исследования сущности рассматриваемого языкового факта.

Важно только правильно установить, что считать, зачем считать и как считать, а после произведенных подсчетов верно интерпретировать полученные количественные данные.

Квантитативные методы могут иметь самостоятельную ценность при исследовании языка и его плана содержания и могут входить составной частью в другие методы.

Статистические закономерности лежат в основе организации словаря любого языка и текста. С широтой использования слов связан закон Крушевского-Куриловича, согласно которому, чем шире сфера употребления слова, тем беднее его содержание (Курилович 1962: 11). Это соответствие уже непосредственно выводит зависимость между количественными и семантическими свойствами слова.

Статистическая закономерность организации любого связного текста проявляется в том, что покрываемость текста разными словами подчиняется следующему правилу: в начале любого текста неповторяющихся (разных) слов встречается больше, а по мере продвижения в глубь текста их встречается все меньше, т. е. чем дальше от начала рассматриваемого текста мы находимся, тем меньше встречается в нем неповторяющихся ранее слов (Пап 1961).

Статистическая активность слова в тексте - показатель его семантической активности в языке. Частотность слова представляет собой не только его важную словарную или текстовую характеристику, но и оказывает решающее влияние на позицию слова в человеческой памяти. Об этом можно судить по ответам носителей языка, когда они, не задумываясь, называют первые пришедшие им в голову слова при таком, например, задании, как Назовите домашнюю птицу, Назовите плод фруктового дерева и т. п. Можно не сомневаться, что самыми регулярными ответами будут курица, яблоко и т. п. Именно потому, что эти слова занимают более высокий ранг и в частотном словаре, и в памяти человека. Подчеркнем, что между частотными характеристиками слова в памяти и в словаре существует устойчивая связь (Фрумкина 1971).

Неодинаковое распределение слов разных частей речи в научном и художественном текстах (в языке науки гораздо чаще используются существительные) служит показателем большей предметности языка научных текстов по сравнению с художественными.

Статистические методы. Статистика применяется как для изучения языка, так и речи. Количественные характеристики в системе языка не тождественны их количественным характеристикам в речи. Выясняется зависимость явления или свойство языка. Соответствие между качественной и количественной характеристикой языкового явления получили название корреляции. Число, показывающее степень корреляции – коэффициент корреляции. Если между исследуемыми признаками нет никакой зависимости, то коэффициент корреляции будет равен нулю.

Рождественский:

Разрабатывая на основе лингвистических методов различные дисциплины, языкознание может применять для решения своих задач частные методики из других наук. Языкознание заимствует частные методики у ма­тематики.

Наиболее «старой» областью, в которой может быть использована математика, является анализ текста. При­емы математической статистики были заимствованы для решения задач стилистики и установления автор­ства в XVIII в. Принцип применения аппарата стати­стики основан на установлении черт текста, характери­зующих стиль произведения словесности, и обобщении результатов наблюдения этих черт методами статистики с целью установить стилистическое сходство (и разли­чие) групп текстов и отдельных текстов внутри групп.

Более широко привлекаются методы статистики в так называемом контент-анализе. Целью контент-анали­за является установление сходства (и различия) содер­жания определенных групп текстов за пределами их детального филологического анализа и критики текстов. Из группы однородных произведений словесности дела­ется методами статистики представительная выборка (Выборка считается представительной, если в ней более или менее равномерно представлены различные языковые явления), определяются ее единицы (например, определенные слова, выражения, сюжеты, фигуры речи и т.п.). Когда единицы выборки, определенные и описанные метода­ми филологии, обработаны статистически, удается полу­чить примерное представление об основном содержа­нии текстов без чтения самих текстов. К контент-анали­зу прибегают в том случае, когда надо быстро оценить содержание большого массива текстов, а возможностей для их прочтения нет и можно удовлетвориться при­ближенной оценкой содержания.

В лексикографии при статистическом обследовании встречаемости слов, морфем, грамматических форм, звуков и букв в текстах был намечен ряд статистиче­ских констант. Эти константы указывают на относитель­ную замкнутость языковой системы на каждом ярусе языка. Константы, варьирующиеся в определенных пре­делах, указывают на частотные характеристики единиц языка на разных ярусах и на разные количественные соотношения между различными классами единиц од­ного и того же яруса, определяемыми по частоте встре­чаемости. Таковы: частота распределения гласных, со­гласных и полугласных звуков в разных языках; ран­жирование букв по частоте встречаемости в словах раз­ных частей речи в текстах вообще и в разных группах текстов; повторяемость лексики в одном и том же тек­сте и т.п. Эти исследования раскрывают количествен­ные соотношения в реализации системы языка.

Было предложено также статистико-комбинаторное моделирование языковой системы по встречаемости ее элементов в тексте, т.е. выявление признаков системы на основании характеристик текстов. Эти исследования позволяют автоматизировать часть описания дифферен­циальных признаков языковых единиц и классов язы­ковой системы и правил сочетаемости единиц.

Были предложены и другие способы применить ап­парат статистики для исследования текстов и языковых систем, в частности в области типологии языков и сравнительно-исторического языкознания.

Метод моделирования - центральный исследовательский метод в науке.

Моделирование в науке - это выяснение свойств какого-либо предмета при помощи построения его модели.

Моделью можно назвать образ какого-либо объекта, используемый в определенных условиях в качестве его заместителя (фотография в паспорте - модель человека).

Общие свойства моделей:

* условность

* образ может быть не только материальным, но и мысленным и передаваться посредством знаковой системы

* моделью может быть не только образ, но и прообраз оригинала

* модель чаще всего является гомоморфной оригиналу (то есть многим элементам оригинала соответствует меньшее количество элементов модели в отличие от изоморфизма)

Моделирование необходимо предполагает использование абстракции и идеализации. Отображая релевантные существенные (с точки зрения исследования) свойства оригинала и отвлекаясь от несущественных, модель выступает как некоторый абстрактный идеализированный объект. Всякая модель строится на основе гипотезы о возможном устройстве оригинала и представляет собой функциональный аналог оригинала, что позволяет переносить знания с модели на оригинал. Критерием адекватности модели является эксперимент.

В идеале модель должна быть формальной (т.е. в ней должны быть в явном виде и однозначно заданы исходные объекты, связывающие их отношения и правила обращения с ними) и обладать объяснительной силой (т.е. не только объяснять факты или данные экспериментов, необъяснимые с точки зрения уже существующей теории, но и предсказывать неизвестное раньше, хотя и принципиально возможное поведение оригинала, которое позднее должно подтверждаться данными наблюдения или экспериментов).

Типы лингвистических моделей

Модель в лингвистике - искусственно создаваемое лингвистом реальное или мысленное устройство, воспроизводящее, имитирующее своим поведением (обычно в упрощенном виде) поведение оригинала в лингвистических целях. Существует множество определений моделей в лингвистике:

• модель -тип, образец (language pattern) каких-либо текстовых единиц (слов, предложений);

• модель – символы, схемы для описания языковых объектов (ПР: схема модели составляющих в синтаксисе),

• модель – формализованная теория структуры с фиксированным метаязыком (ПР: формальные грамматики).

Главная цель моделирования в лингвистике - это моделирование целостной языковой способности человека.

Понятие лингвистической модели возникло в структурной лингвистике, но вошло в научный обиход в 60-70 гг. 20 в. с возникновением мат. лингвистики и проникновением в лингвистику мат. методов.

Содержание термина "модель" в современной лингвистике в значительной степени охватывалось ранее термином "теория" (особенно Ельмслевым). Считается, что наименования модель заслуживает лишь такая теория, которая достаточно эксплицитно изложена и в достаточной степени формализована (в идеале каждая модель должна допускать реализацию на ЭВМ).

Конструирование модели - не только одно из средств отображения языковых явлений, но и объективный практический критерий проверки истинности знаний о языке. В единстве с другими методами изучения языка моделирование выступает как средство углубления познания скрытых механизмов речевой деятельности, его движения от относительно примитивных к более содержательным моделям, полнее раскрывающим сущность языка.

Внутри языка как системы существует принцип моделирования: одни его подсистемы моделируют другие, например, система письменной речи является моделью устной речи; внутри письменной речи мы имеем дело с несколькими моделями (печатной, рукописной); план выражения является моделью плана содержания.

Метод моделирования обычно опирается на знаковые систем, но язык - сам знаковая система, т.е. слова мы моделируем при помощи слов.

Всякая модель, в том числе лингвистическая, должна быть формальной. Модель считается формальной, если в ней в явном виде и однозначно заданы исходные объекты, связывающие их утверждения и правила обращения с ними (правила образования или выделения новых объектов и утверждений). В идеале всякая формальная модель является математической системой. Поэтому в некотором смысле понятие формальности равнозначно понятию математичности, точности, или однозначности.

Формальность, точность, однозначность — это свойство языка, на котором излагается теория. Само по себе это свойство не обеспечивает совпадения предсказаний формальной теории с объективными экспериментальными данными. Точность теории делает возможной постановку недвусмысленных экспериментов, которые способны подтвердить или опровергнуть ее, но никакой необходимой логической связи между точностью и истинностью теории нет и не может быть.

Формальная модель связывается с опытными данными посредством той или иной интерпретации. Дать интерпретацию модели — значит указать правила, вероятностные или строгие, подстановки объектов некоторой предметной области, например языка, вместо объектов (символов) модели.