То
есть, они должны лежать на существенно разных уровнях. Напомним
еще раз, что иногда "горизонтальные прямые", отвечающие разным
авторам, могут оказаться близкими, лежащими на одном уровне. В
этих случаях значения авторских инвариантов близки. Мы отнесем к
одной группе писателей с близкими значениями параметров. Чтобы
авторский инвариант был действительно эффективен, он должен
разделить совокупность всех писателей на несколько групп с
существенно разными значениями инварианта.
Если значения авторского инварианта для двух сравниваемых
текстов оказываются близкими, отсюда нельзя делать заключение об
их принадлежности одному писателю.
Ясно, что априори само существование таких замечательных
лингвистических инвариантов ниоткуда не следует. Для их выявления
требуется обширный вычислительный эксперимент. И такой
эксперимент был нами проведен на протяжении нескольких лет.
Перейдем к изложению результатов.
4. ПОСТАНОВКА ЭКСПЕРИМЕНТА. СПИСОК ИССЛЕДОВАННЫХ
НАМИ ПАРАМЕТРОВ.
Для обнаружения "бессознательного параметра" - авторского
инварианта, слабо или вообще не контролируемого писателями, мы
изучили следующие количественные характеристики текстов.
1) ДЛИНА ПРЕДЛОЖЕНИЙ, т.е. среднее число слов в предложении
(подсчитанное для каждой выборки).
2) ДЛИНА СЛОВ, т.е. среднее количество слогов в слове,
подсчитанное для каждой выборки.
3) ОБЩАЯ ЧАСТОТА УПОТРЕБЛЕНИЯ СЛУЖЕБНЫХ СЛОВ - ПРЕДЛОГОВ,
СОЮЗОВ, ЧАСТИЦ, т.е. процентное содержание служебных слов в
каждой выборке.
4) ЧАСТОТА УПОТРЕБЛЕНИЯ СУЩЕСТВИТЕЛЬНЫХ, т.е. их процентное
содержание в каждой выборке.
5) ЧАСТОТА УПОТРЕБЛЕНИЯ ГЛАГОЛОВ, т.е. их процентное
солержание в каждой выборке.
6) ЧАСТОТА УПОТРЕБЛЕНИЯ ПРИЛАГАТЕЛЬНЫХ (в процентах).
7) ЧАСТОТА УПОТРЕБЛЕНИЯ ПРЕДЛОГА "В" (в процентах).
8) ЧАСТОТА УПОТРЕБЛЕНИЯ ЧАСТИЦЫ "НЕ" (в процентах).
9) КОЛИЧЕСТВО СЛУЖЕБНЫХ СЛОВ В ПРЕДЛОЖЕНИИ, т.е. среднее
число союзов, предлогов и частиц в предложении.
Некоторые из перечисленных параметров рассматривались ранее.
Однако предложенный нами параметр 3 - частота всех служебных слов
- является, насколько нам известно, НОВЫМ.
Указанные параметры существенно различны по своему
характеру. Наш параметр 3 особо выделяется своей интегральностью,
"массовостью", так как здесь подсчитывается суммарный процент
ВСЕХ СЛУЖЕБНЫХ СЛОВ, которых очень много! Большое число служебных
слов, используемых в русском языке, делает этот параметр
невероятно трудно контролируемым на сознательном уровне. Писатель
может легко следить, например, за длиной своих предложений.
Однако трудно представить себе автора, который при написании
книги смог бы уследить за процентом своих служебных слов!
Параметры 7 (частота предлога "в") и 8 (частота частицы
"не") описывают распределение отдельных служебных слов и заметно
менее "массовы", чем суммарный параметр 3. Мы включили параметра
7 и 8 в наш список, чтобы выяснить - стабилизируются ли они и
могут ли они служить в качестве авторских инвариантов (ответ
оказался отрицательным!).
Параметр 9 - количество служебных слов в предложении - хотя
и носит интегральный характер, однако существенно зависит от
длины предложений и следовательно от их числа в выборке. А эта
последняя величина, как показали подсчеты, весьма неустойчива и
может колебаться в заметных пределах, не стабилизируясь.
Мы специально собрали в нашем списке самые разнородные
числовые характеристики, чтобы составить представление о
сравнительном поведении этих параметров и выбрать из них
действительно стабилизирующийся (т.е. авторский инвариант), если
таковой вообще найдется.
В основу исследования был положен описанный выше выборочный
метод из генеральной совокупности. Величина шага, т.е. интервал
между соседними выборками, для книг большого объъема равнялся 60
страницам стандартного книжного текста.
Величина же выборки варьировалась. Размер начальной порции,
в отличие от 1000 слов, ранее принимавшийся многими авторами, был
принят равным 2000 слов. Затем объем выборок последовательно
увеличивался, а именно - 4000, 8000, 16000 слов.
Проведенный эксперимент показал, что дальнейшее увеличение
объема выборок не обязательно, так как искомый АВТОРСКИЙ
ИНВАРИАНТ был обнаружен уже при величине выборки в 16000 слов.
При исследовании текстов небольшого объема величина шага
уменьшалась и выборки производились чаще. Впрочем, как показал
эксперимент, величина шага (в отличие от объема выборки) мало
сказывается на окончательных результатах.
В качестве критерия стабилизации был взят следующий принцип.
Объем выборки увеличивался до тех пор, пока не обнаруживался
параметр, для которого средняя величина его отклонений от средних
значений вдоль произведений всех исследуемых писателей
оказывалась существенно меньше амплитуды колебаний параметра
между текстами разных авторов.
Другими словами, для каждого автора вычислялось отклонение
параметра от среднего значения, а затем эти отклонения
усреднялись по всем авторам. Разыскивался параметр, для которого
это последнее число существенно меньше разницы между максимальным
и минимальным значениями параметра по всем исследуемым писателям.
5. СПИСОК ИССЛЕДОВАННЫХ НАМИ АВТОРОВ
И ИХ ПРОИЗВЕДЕНИЙ.
Мы воспользовались традиционной периодизацией истории
русского литературного языка [9]. В качестве основного
исторического периода был избран XIX век, где были выбраны 9
писателей, писавших по-русски и создавших большие тексты. См.
список ниже.
Однако, чтобы составить более полное представление об
эволюции перечисленных параметров в зависимости от исторической
эпохи, рамки эксперимента были расширены. К списку авторов ЧШЧ
века мы добавили писателей XVIII и XX веков. В итоге получился
список из 23 писателей (см. ниже). Для каждого писателя были
обработаны все его основные книги. Оказалось, что полученные
результаты практически не зависят от объема произведений при
условии, что объемы достаточно велики.
Приведем список обработанных нами литературных произведений.
ПИСАТЕЛИ XVIII ВЕКА:
1) ЧУЛКОВ М.Д. (1743-1792) - роман "Пригожая повариха"
(написан в 1770 г.), М., 1971.
2) НОВИКОВ Н.И. (1744-1818) - сатирический журнал
"Живописец" (издан в 1772-1773 гг.), М., 1971.
3) ФОНВИЗИН Д.И. (1745-1792) - "Записки первого путешествия"
(написаны в 1777-1778 гг.), повесть "Повествование глухого и
немого" (издана в 1783 г.), повесть "Калисфен" (издана в 1786
г.), сочинение в письмах "Друг честных людей или стародум"
(написано в 1830 г.), мемуары "Чистосердечное признание в делах
моих и помышлениях" (изданы в 1830 г.), М., 1971.
4) РАДИЩЕВ А.Н. (1749-1802) - "Путешествие из Петербурга в
Москву" (издано в 1790 г.), М., 1971.
5) КАРАМЗИН Н.М. (1766-1826) - "История Государства Российского"
(написана в 1816-1826 гг.), повесть "Бедная Лиза" (издана в 1792
г.), повесть "Остров Бернгольм" (издана в 1794 г.), повесть
"Марфа Посадская" (издана в 1803 г.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172
есть, они должны лежать на существенно разных уровнях. Напомним
еще раз, что иногда "горизонтальные прямые", отвечающие разным
авторам, могут оказаться близкими, лежащими на одном уровне. В
этих случаях значения авторских инвариантов близки. Мы отнесем к
одной группе писателей с близкими значениями параметров. Чтобы
авторский инвариант был действительно эффективен, он должен
разделить совокупность всех писателей на несколько групп с
существенно разными значениями инварианта.
Если значения авторского инварианта для двух сравниваемых
текстов оказываются близкими, отсюда нельзя делать заключение об
их принадлежности одному писателю.
Ясно, что априори само существование таких замечательных
лингвистических инвариантов ниоткуда не следует. Для их выявления
требуется обширный вычислительный эксперимент. И такой
эксперимент был нами проведен на протяжении нескольких лет.
Перейдем к изложению результатов.
4. ПОСТАНОВКА ЭКСПЕРИМЕНТА. СПИСОК ИССЛЕДОВАННЫХ
НАМИ ПАРАМЕТРОВ.
Для обнаружения "бессознательного параметра" - авторского
инварианта, слабо или вообще не контролируемого писателями, мы
изучили следующие количественные характеристики текстов.
1) ДЛИНА ПРЕДЛОЖЕНИЙ, т.е. среднее число слов в предложении
(подсчитанное для каждой выборки).
2) ДЛИНА СЛОВ, т.е. среднее количество слогов в слове,
подсчитанное для каждой выборки.
3) ОБЩАЯ ЧАСТОТА УПОТРЕБЛЕНИЯ СЛУЖЕБНЫХ СЛОВ - ПРЕДЛОГОВ,
СОЮЗОВ, ЧАСТИЦ, т.е. процентное содержание служебных слов в
каждой выборке.
4) ЧАСТОТА УПОТРЕБЛЕНИЯ СУЩЕСТВИТЕЛЬНЫХ, т.е. их процентное
содержание в каждой выборке.
5) ЧАСТОТА УПОТРЕБЛЕНИЯ ГЛАГОЛОВ, т.е. их процентное
солержание в каждой выборке.
6) ЧАСТОТА УПОТРЕБЛЕНИЯ ПРИЛАГАТЕЛЬНЫХ (в процентах).
7) ЧАСТОТА УПОТРЕБЛЕНИЯ ПРЕДЛОГА "В" (в процентах).
8) ЧАСТОТА УПОТРЕБЛЕНИЯ ЧАСТИЦЫ "НЕ" (в процентах).
9) КОЛИЧЕСТВО СЛУЖЕБНЫХ СЛОВ В ПРЕДЛОЖЕНИИ, т.е. среднее
число союзов, предлогов и частиц в предложении.
Некоторые из перечисленных параметров рассматривались ранее.
Однако предложенный нами параметр 3 - частота всех служебных слов
- является, насколько нам известно, НОВЫМ.
Указанные параметры существенно различны по своему
характеру. Наш параметр 3 особо выделяется своей интегральностью,
"массовостью", так как здесь подсчитывается суммарный процент
ВСЕХ СЛУЖЕБНЫХ СЛОВ, которых очень много! Большое число служебных
слов, используемых в русском языке, делает этот параметр
невероятно трудно контролируемым на сознательном уровне. Писатель
может легко следить, например, за длиной своих предложений.
Однако трудно представить себе автора, который при написании
книги смог бы уследить за процентом своих служебных слов!
Параметры 7 (частота предлога "в") и 8 (частота частицы
"не") описывают распределение отдельных служебных слов и заметно
менее "массовы", чем суммарный параметр 3. Мы включили параметра
7 и 8 в наш список, чтобы выяснить - стабилизируются ли они и
могут ли они служить в качестве авторских инвариантов (ответ
оказался отрицательным!).
Параметр 9 - количество служебных слов в предложении - хотя
и носит интегральный характер, однако существенно зависит от
длины предложений и следовательно от их числа в выборке. А эта
последняя величина, как показали подсчеты, весьма неустойчива и
может колебаться в заметных пределах, не стабилизируясь.
Мы специально собрали в нашем списке самые разнородные
числовые характеристики, чтобы составить представление о
сравнительном поведении этих параметров и выбрать из них
действительно стабилизирующийся (т.е. авторский инвариант), если
таковой вообще найдется.
В основу исследования был положен описанный выше выборочный
метод из генеральной совокупности. Величина шага, т.е. интервал
между соседними выборками, для книг большого объъема равнялся 60
страницам стандартного книжного текста.
Величина же выборки варьировалась. Размер начальной порции,
в отличие от 1000 слов, ранее принимавшийся многими авторами, был
принят равным 2000 слов. Затем объем выборок последовательно
увеличивался, а именно - 4000, 8000, 16000 слов.
Проведенный эксперимент показал, что дальнейшее увеличение
объема выборок не обязательно, так как искомый АВТОРСКИЙ
ИНВАРИАНТ был обнаружен уже при величине выборки в 16000 слов.
При исследовании текстов небольшого объема величина шага
уменьшалась и выборки производились чаще. Впрочем, как показал
эксперимент, величина шага (в отличие от объема выборки) мало
сказывается на окончательных результатах.
В качестве критерия стабилизации был взят следующий принцип.
Объем выборки увеличивался до тех пор, пока не обнаруживался
параметр, для которого средняя величина его отклонений от средних
значений вдоль произведений всех исследуемых писателей
оказывалась существенно меньше амплитуды колебаний параметра
между текстами разных авторов.
Другими словами, для каждого автора вычислялось отклонение
параметра от среднего значения, а затем эти отклонения
усреднялись по всем авторам. Разыскивался параметр, для которого
это последнее число существенно меньше разницы между максимальным
и минимальным значениями параметра по всем исследуемым писателям.
5. СПИСОК ИССЛЕДОВАННЫХ НАМИ АВТОРОВ
И ИХ ПРОИЗВЕДЕНИЙ.
Мы воспользовались традиционной периодизацией истории
русского литературного языка [9]. В качестве основного
исторического периода был избран XIX век, где были выбраны 9
писателей, писавших по-русски и создавших большие тексты. См.
список ниже.
Однако, чтобы составить более полное представление об
эволюции перечисленных параметров в зависимости от исторической
эпохи, рамки эксперимента были расширены. К списку авторов ЧШЧ
века мы добавили писателей XVIII и XX веков. В итоге получился
список из 23 писателей (см. ниже). Для каждого писателя были
обработаны все его основные книги. Оказалось, что полученные
результаты практически не зависят от объема произведений при
условии, что объемы достаточно велики.
Приведем список обработанных нами литературных произведений.
ПИСАТЕЛИ XVIII ВЕКА:
1) ЧУЛКОВ М.Д. (1743-1792) - роман "Пригожая повариха"
(написан в 1770 г.), М., 1971.
2) НОВИКОВ Н.И. (1744-1818) - сатирический журнал
"Живописец" (издан в 1772-1773 гг.), М., 1971.
3) ФОНВИЗИН Д.И. (1745-1792) - "Записки первого путешествия"
(написаны в 1777-1778 гг.), повесть "Повествование глухого и
немого" (издана в 1783 г.), повесть "Калисфен" (издана в 1786
г.), сочинение в письмах "Друг честных людей или стародум"
(написано в 1830 г.), мемуары "Чистосердечное признание в делах
моих и помышлениях" (изданы в 1830 г.), М., 1971.
4) РАДИЩЕВ А.Н. (1749-1802) - "Путешествие из Петербурга в
Москву" (издано в 1790 г.), М., 1971.
5) КАРАМЗИН Н.М. (1766-1826) - "История Государства Российского"
(написана в 1816-1826 гг.), повесть "Бедная Лиза" (издана в 1792
г.), повесть "Остров Бернгольм" (издана в 1794 г.), повесть
"Марфа Посадская" (издана в 1803 г.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172