КАК ПРИМЕР КОЛИЧЕСТВЕННОГО ПОДХОДА К ИЗМЕРЕНИЮ ИНФОРМАЦИИ Метод корреляции. - презентация

1 КАК ПРИМЕР КОЛИЧЕСТВЕННОГО ПОДХОДА К ИЗМЕРЕНИЮ ИНФОРМАЦИИ Метод корреляции

2 Математико-статистический анализ числовых характеристик исторических текстов: общ. подход 1. формулируется статистическая гипотеза для моделирования какого-либо процесса - например, утери информации с течением времени. 2. вводятся числовые коэффициенты, позволяющие количественно измерять отклонения экспериментальных кривых от предсказанных теоретически 3. математико-статистическая модель проверяется на заведомо достоверном историческом материале 4. если она подтверждается, то методику можно использовать для датировки событий

3 ПРИНЦИП КОРРЕЛЯЦИИ МАКСИМУМОВ Пусть исторический период от года A до года B в истории региона P описан в летописи X, разбитой на куски (главы) X(T), каждый из которых посвящен событиям одного года T Подсчитаем объем всех кусков X(T), т. е. число страниц или строк в каждом X(T) Полученные числа изобразим в виде графика объемов, отложив по горизонтали годы T, а по вертикали - объемы глав функция объема данной летописи X vol X(T)

4 Для другой летописи Y, описывающей те же события, график объемов будет иметь иной вид (скажутся интересы и склонности летописцев X и Y - одно и то же событие может быть описано разным количеством слов и разными словами) Насколько существенны эти различия? Есть ли что-то общее в графиках объемов текстов, рассказывающих об одних и тех же событиях?

5 Существенная характеристика всякого графика - его ПИКИ, экстремальные точки Обозначим через C(T) объем всех текстов, написанных о годе T его современниками. Это – «первоначальный фонд» информации. Его график нам точно неизвестен, поскольку тексты постепенно утрачиваются, гибнут

6 Сформулируем модель потери информации ОТ ТЕХ ЛЕТ, КОТОРЫМ ПЕРВОНАЧАЛЬНО БЫЛО ПОСВЯЩЕНО БОЛЬШЕ ТЕКСТОВ, БОЛЬШЕ ТЕКСТОВ И ОСТАНЕТСЯ

7 Фиксируя какой-то момент времени M (справа от точки B) можем выстроить график C M (T), показывающий объем текстов, которые "дожили" до момента времени M и описывают события года T C M (T) - это остаточный (сохранившийся) фонд информации, который дошел от эпохи (A,B) до года M Модель может быть переформулирована: график C M (T) должен иметь всплески примерно в те же годы (на интервале (A,B)), что и исходный график C(T) Разумеется, проверить модель в таком ее виде трудно, поскольку график C(T) первоначального фонда информации нам сегодня не известен, но одно из следствий проверить можно

8 Более поздние хронисты X и Y, описывая один и тот же период (A,B) (и не будучи его современниками), вынуждены опираться на сохранившийся до их времени фонд информации (текстов) от эпохи (A,B) Если хронист X живет в эпоху M, то он будет опираться на фонд C M (T) Если хронист Y живет в эпоху N (отличную от M), то он опирается на сохранившийся фонд C N (T)

9 Ожидается что "в среднем" хронисты работают более или менее добросовестно, а потому они должны более подробно описать те годы (из эпохи (A,B)), от которых до них дошло больше информации (текстов) График объемов vol X(T) будет иметь всплески примерно в те годы, где имеет всплески график C M (T) График vol Y(T) будет иметь всплески примерно в те годы, где делает всплески график C(T) Точки всплесков графиков C M (T), C N (T) близки к точкам всплесков исходного графика C(T) Следовательно, графики vol X(T) и vol Y(T) должны делать всплески примерно одновременно, т.е. точки их локальных максимумов должны коррелировать (при этом, конечно, амплитуды графиков могут быть существенно различными)

10 Окончательно наш принцип корреляции максимумов звучит следующим образом: Если тексты (хроники) X и Y зависимы (т.е. описывают примерно одни и те же события на одном и том же интервале времени (A,B) в истории одного и того же региона), то точки локальных максимумов их функций объемов должны коррелировать (рис. а) Если тексты (хроники) X и Y независимы (т.е. описывают существенно разные исторические периоды или разные регионы), то точки локальных максимумов их функций объемов не коррелируют (рис. б)

11 графики объемов глав для зависимых текстов должны делать всплески одновременно (т.е. годы, подробно описанные в X и подробно описанные в Y, должны совпадать или быть близкими) если тексты независимы, то графики объемов достигают локальных максимумов в разных точках (после совмещения двух описываемых в них периодов времени)

12 Выводы: Например, если при сравнении двух династий царей будет обнаружена зависимость времен их правлений (т.е. соответствующие графики периодов правлений чрезвычайно близки), то это можно интерпретировать: 1.намеренное подражание летописца некоему авторитетному образцу 2.дубликаты, которые в свое время не были распознаны (хронологами) как тождественные, об одном и том же говорящие тексты и были отнесены к разным историческим периодам Методика применима не только для датирования событий. Она позволяет обнаруживать в сравниваемых текстах разнообразные заимствования, повторы, литературные штампы, цитирования, параллели