Обработка базы катастроф с помощью Excel
Оригинал взят у chispa1707 в Обработка базы катастроф с помощью Excel
Научился делать то, чего раньше не умел, - прорыв налицо.
Описываю сразу по получению результата, - каким бы он ни был.
Цель выяснить само наличие и границы сдвигов, - их здесь 33 типа (и это не все).
Некоторые сдвиги, например, в 271 год, объяснить не могу, но на практике встречаю.
Думаю, эти сдвиги производные от нахлеста двух иных сдвигов.
18
23
36
41
59 (59*1)
64
72 (72*1)
76 (76*1)
83 (83,5*1)
98 (98*1)
100
108 (72+36)
118 (59*2)
144 (72*2)
152 (76*2)
167 (83,5*2)
177 (59*3)
196 (98*2)
216 (72*3)
228 (76*3)
236 (59*4)
251 (83,5*3)
271
295 (59*5)
304 (76*4)
310 (251+59)
334 (83,5*4)
369 (251+118)
380 (76*5)
417 (83,5*5)
428 (251+177)
456 (76*6)
501 (83,5*6)
За первичную единицу учета взял регионо-катаклизм, например, "ураган в Баварии".
Если через количество лет, равное сдвигу, встретится "ураган в Германии", это будут разные события.
Соответственно, дубликата, работающего на мою версию, не будет, - потому что нет буквального совпадения.
Подобные события можно и объединить в более крупные группы: страны или регионы, но - не сейчас.
На сегодня цель - задать максимально жесткие условия.
Поэтому ВСЕ извержения именные; здесь нет единицы "извержение на Камчатке", есть "извержение Ключевской сопки".
Даже если взорвался вулкан в двух шагах от Ключевской сопки, это в данной выборке будет самостоятельное событие.
Если в одном году отмечены два-три урагана в Баварии, я беру один - сам факт этого события в этом году.
Это ухудшает количественные показатели, но улучшает качественные.
В первичную обработку попали 35185 регионо-катаклизмов с 13-го по 2012 год.
Они дали 32161 совпадение с 33 типами сдвигов от 18 лет до 501 года. Вот они все.
Хорошо видно, что ранее 1200 примерно года совпадений немного.
В 19 веке появляются мощные пепреклички с данными 20-21 веков, - в силу избытка данных в 20-21 веках.
Аномальным выглядит участок с конца 15 века по начало 17-го века.
Поскольку до 1200 примерно года материала мало, удаляю все, что было до 1201 года, целиком.
И еще одну операцию следует сделать - суммировать близлежащие события: суть не изменится, а график станет нагляднее.
Я взял период 18 лет, то есть, в каждой ячейке прибавлены совпадения за 17 лет ранее. Повторю, это сути не меняет; просто пики сглажитваются.
График с накоплением, то есть, наблюдаемая синхронность пиков - кажущаяся.
Затем я привел все данные по количеству совпадений к тем годам, в которых события реально происходили.
То есть, данные со сдвигом 251 год перетащил из 16 века в 18-19 вв. Это упрощает понимание, а сравнивать правое с левым или наоборот - разницы нет.
Ну, и вычислил процент совпадений от общего числа данных о катастрофах. 10 совпадений из 2000 это ни о чем, а 10 из 10 это определенно дубликат.
Вот результат по сдвигу в 456 лет. Начиная с примерно 1815 года совпадений много, а процент совпадений мизерный.
Это означает, что хронологию не отбрасывали на 456 лет позже 1815 года.
Мы также видим мощный рост рост процентов совпадений с 1785 по 1809 год. То есть, отсюда данные отброшены в 1329-1353 годы.
Сразу можно датировать год Великой Чумы (1348), это 1804 год. То есть, Наполеон не просто коллектор, он еще и мародер, грабивший раненых.
Давайте рассмотрим наиболее интересный участок поближе.
Теперь можно кое-что уточнить: отбрасывали данные начиная с 1783 года, а это год, в котором зафиксировано смещение оси вращения Земли.
Искать это событие надо в 1327 году, и это правильно: в 1326 целиком замерзло Средиземное море, то есть, была просадка шельфов.
Само собой, центр тяжести сместился, и ось вращения сместилась вслед.
***
Очеень интересны два провала: в 1776-1783 годах. Данные отсюда отбрасывали в прошлое не на 456 лет, а на какой-то иной сдвиг.
Такой же провал мы видим в 1711-1736 годах. Будет интересно отыскать, куда сунули данные из этого интереснейшего периода.
Смотрим сдвиг в 251 год. Процент совпадений падает около 1862 года. Этот год - расчетный, Толстой начал писать "Войну и мир".
Искать данные надо в периоде от 1611 года и ранее. Думаю, в прошлое сдвигали, в основном, извержения в далеких странах.
Рассмотрим наиболее интересный участок поближе.
Видно, что здесь период 1783-1813 тоже вызвышается. Видимо, катаклизмов было так много, что их рассовывали по всем эпохам.
Но искать события этого периода следует в ином промежутке - 1532-1562 годах.
Здесь - прекрасно выраженный горб в периоде 1703-1783 - без лакун. Эти события мы найдем так же на 251 год ранее.
Самое время задать вопрос, почему все обстоит именно так. Видно, сдвиги как-то распределены между регионами.
Принцип распределения можно выяснить, просто желателен машинный способ обработки, - уж очень много работы.
Что ж, этот этап успешно завершен. В данных о катастрофах и наличие сдвигов, и места сшивок теперь отлично видать.
Забью их в табличку, покумекаю и попробую найти машинный способ распределения сдвигов по регионам.
Если все получится, можно будет выложить конкретный алгоритм.
***
Разумеется, отчет к 26 июня идет номером один.
Научился делать то, чего раньше не умел, - прорыв налицо.
Описываю сразу по получению результата, - каким бы он ни был.
Цель выяснить само наличие и границы сдвигов, - их здесь 33 типа (и это не все).
Некоторые сдвиги, например, в 271 год, объяснить не могу, но на практике встречаю.
Думаю, эти сдвиги производные от нахлеста двух иных сдвигов.
18
23
36
41
59 (59*1)
64
72 (72*1)
76 (76*1)
83 (83,5*1)
98 (98*1)
100
108 (72+36)
118 (59*2)
144 (72*2)
152 (76*2)
167 (83,5*2)
177 (59*3)
196 (98*2)
216 (72*3)
228 (76*3)
236 (59*4)
251 (83,5*3)
271
295 (59*5)
304 (76*4)
310 (251+59)
334 (83,5*4)
369 (251+118)
380 (76*5)
417 (83,5*5)
428 (251+177)
456 (76*6)
501 (83,5*6)
За первичную единицу учета взял регионо-катаклизм, например, "ураган в Баварии".
Если через количество лет, равное сдвигу, встретится "ураган в Германии", это будут разные события.
Соответственно, дубликата, работающего на мою версию, не будет, - потому что нет буквального совпадения.
Подобные события можно и объединить в более крупные группы: страны или регионы, но - не сейчас.
На сегодня цель - задать максимально жесткие условия.
Поэтому ВСЕ извержения именные; здесь нет единицы "извержение на Камчатке", есть "извержение Ключевской сопки".
Даже если взорвался вулкан в двух шагах от Ключевской сопки, это в данной выборке будет самостоятельное событие.
Если в одном году отмечены два-три урагана в Баварии, я беру один - сам факт этого события в этом году.
Это ухудшает количественные показатели, но улучшает качественные.
В первичную обработку попали 35185 регионо-катаклизмов с 13-го по 2012 год.
Они дали 32161 совпадение с 33 типами сдвигов от 18 лет до 501 года. Вот они все.
Хорошо видно, что ранее 1200 примерно года совпадений немного.
В 19 веке появляются мощные пепреклички с данными 20-21 веков, - в силу избытка данных в 20-21 веках.
Аномальным выглядит участок с конца 15 века по начало 17-го века.
Поскольку до 1200 примерно года материала мало, удаляю все, что было до 1201 года, целиком.
И еще одну операцию следует сделать - суммировать близлежащие события: суть не изменится, а график станет нагляднее.
Я взял период 18 лет, то есть, в каждой ячейке прибавлены совпадения за 17 лет ранее. Повторю, это сути не меняет; просто пики сглажитваются.
График с накоплением, то есть, наблюдаемая синхронность пиков - кажущаяся.
Затем я привел все данные по количеству совпадений к тем годам, в которых события реально происходили.
То есть, данные со сдвигом 251 год перетащил из 16 века в 18-19 вв. Это упрощает понимание, а сравнивать правое с левым или наоборот - разницы нет.
Ну, и вычислил процент совпадений от общего числа данных о катастрофах. 10 совпадений из 2000 это ни о чем, а 10 из 10 это определенно дубликат.
Вот результат по сдвигу в 456 лет. Начиная с примерно 1815 года совпадений много, а процент совпадений мизерный.
Это означает, что хронологию не отбрасывали на 456 лет позже 1815 года.
Мы также видим мощный рост рост процентов совпадений с 1785 по 1809 год. То есть, отсюда данные отброшены в 1329-1353 годы.
Сразу можно датировать год Великой Чумы (1348), это 1804 год. То есть, Наполеон не просто коллектор, он еще и мародер, грабивший раненых.
Давайте рассмотрим наиболее интересный участок поближе.
Теперь можно кое-что уточнить: отбрасывали данные начиная с 1783 года, а это год, в котором зафиксировано смещение оси вращения Земли.
Искать это событие надо в 1327 году, и это правильно: в 1326 целиком замерзло Средиземное море, то есть, была просадка шельфов.
Само собой, центр тяжести сместился, и ось вращения сместилась вслед.
***
Очеень интересны два провала: в 1776-1783 годах. Данные отсюда отбрасывали в прошлое не на 456 лет, а на какой-то иной сдвиг.
Такой же провал мы видим в 1711-1736 годах. Будет интересно отыскать, куда сунули данные из этого интереснейшего периода.
Смотрим сдвиг в 251 год. Процент совпадений падает около 1862 года. Этот год - расчетный, Толстой начал писать "Войну и мир".
Искать данные надо в периоде от 1611 года и ранее. Думаю, в прошлое сдвигали, в основном, извержения в далеких странах.
Рассмотрим наиболее интересный участок поближе.
Видно, что здесь период 1783-1813 тоже вызвышается. Видимо, катаклизмов было так много, что их рассовывали по всем эпохам.
Но искать события этого периода следует в ином промежутке - 1532-1562 годах.
Здесь - прекрасно выраженный горб в периоде 1703-1783 - без лакун. Эти события мы найдем так же на 251 год ранее.
Самое время задать вопрос, почему все обстоит именно так. Видно, сдвиги как-то распределены между регионами.
Принцип распределения можно выяснить, просто желателен машинный способ обработки, - уж очень много работы.
Что ж, этот этап успешно завершен. В данных о катастрофах и наличие сдвигов, и места сшивок теперь отлично видать.
Забью их в табличку, покумекаю и попробую найти машинный способ распределения сдвигов по регионам.
Если все получится, можно будет выложить конкретный алгоритм.
***
Разумеется, отчет к 26 июня идет номером один.