Введение в общую теорию языковых моделей

1. Вступление

Традиционное языкознание, загруженное накопленными в течение десятилетий огромными материалами, несомненно, требует уточнения своих основных категорий и частичного пересмотра своих методов. Так, в фонетике всегда господствовало чистое описательство, невыясненность и запутанность терминологии. В грамматике тоже всегда была, напр., неясность разделения морфологических и синтаксических функций и тоже большая неясность в терминологии («части речи», «залог», «наклонение» и пр.).

Необходимо признать целесообразным привлечение математики, как точнейшей дисциплины, для упорядочения и категорий, и терминов, и методов в языкознании. Особенно важно то, что для перестройки языкознания в настоящее время привлекается именно структурная математика, получившая особенно большое развитие в последние десятилетия. Язык не может считаться каким-то бесструктурным конгломератом звуков и их значений. Языковую закономерность чувствует даже всякий нелингвист, когда слушает, например, ломаную и исковерканную речь иностранца.

Однако на каждом шагу необходимо помнить и то, что лингвистика не есть математика, а математика не есть лингвистика. Смешение этих областей может вести к новым бедствиям науки и даже доводить до полного разрыва традиционную лингвистику с математической, до полной невозможности для лингвиста воспользоваться большими достижениями математических методов. Особенно тягостное впечатление производит увлечение арифметической и алгебраической символикой, для которой никакие существующие алфавиты оказываются недостаточными и еще требуется введение разных сложных символов наподобие восточных алфавитов.

Все эти внешние увлечения необходимо преодолеть и рассматривать их в настоящее время только как болезнь роста научной лингвистики. Будем помнить, что математика приложима к любой научной дисциплине, но это не значит, что каждая научная дисциплина есть отрасль математики. Само собою разумеется, мы имеем в виду здесь не специальные интересы математиков, инженеров и техников, имеющих право на свою собственную терминологию и на свои собственные методы исследования. Мы сейчас имеем в виду интересы только лингвистики, а это значит, что для нас в первую очередь необходимо переводить все достижения математической лингвистики на язык именно лингвистики, на язык филолога. Ни безраздельное погружение в математическую символику, ни отгораживание от новых идей, возникающих благодаря применению математики в лингвистической области, не может считаться в настоящее время целесообразным и допустимым.

Это использование математических методов для лингвистики должно быть доведено до максимальной ясности. А эта последняя может возникнуть только тогда, когда она будет доведена до практически-языковедческой и даже до педагогической целесообразности и понятности для учащегося (а не только для десятка специалистов по данной области). Ведь учащимся в данном случае является не только школьник или студент, но даже и всякий зрелый лингвист, работающий традиционными методами. Если взять хотя бы наши вузы, в которых преподаются языки, то таких лингвистов окажется несколько тысяч, если не десятки тысяч. Можно ли их оставлять без простого, ясного и отчетливого изложения основ математической лингвистики и ограничиваться только небольшой кучкой узких специалистов?

Нам казалось бы, что уже давно наступил тот момент, когда трудные методы математической лингвистики должны быть даны в яснейшей и простейшей форме, чтобы их могли усвоить и все передовые работники в области науки о языке. То, что товарищи лингвисты, работающие математическими методами, всегда писали и часто еще и теперь пишут трудно, непопулярно и заумно, не считаясь с потребностями языковедческих масс, это было вполне естественно для научного направления, пролагающего новые и еще не испробованные пути языковедческого исследования. Но сейчас эти пути уже достаточно выяснились, чтобы о них можно было говорить более широко и более популярно, не увлекаясь разрывом новых методов со старыми и не забивая головы представителей традиционного языкознания непонятной терминологией и еще менее понятными методами исследования.

В этих целях мы хотели бы сосредоточиться на какой-нибудь одной конкретной теории из тех, которые созданы и теперь разрабатываются методами математической лингвистики. Это необходимо сделать для наибольшего сосредоточения читателя на новейших методах, которые уже успели разрастись в трудно обозреваемую область науки. И это необходимо сделать для того, чтобы все практическое, все наглядное и конкретное значение новых методов выступило в наиболее простой и доступной форме. Для этих целей мы и воспользуемся современной теорией языковых моделей, стараясь излагать ее наиболее простым, а иной раз даже обывательским языком, максимально сторонясь всякого заумного изложения[1].