Тестирование нового метода оценки ДПП

ПОГОДА ПРОГНОЗ
ПОГОДЫ		 КАРТЫ
ПОГОДЫ		 АЭРОПОРТЫ ОБЛАКА ПТИЦЫ Библио-
тека		 Полезные
ссылки		 FAQ о погоде ФОТО Метео-
клуб
Главная Карта сайта     КАРТЫ ПОГОДЫ для профессионалов ИНФОРМЕРЫ ПОГОДЫ ПУБЛИЦИСТИКА
Добавить в Избранное Написать нам Автор сайта Лирика
Долгосрочный прогноз Термограф Метеограммы (графики погоды)  

Полезные ссылки:
Метеоцентр.Азия - наш сайт с высокодетализированными прогнозами погоды по пунктам Pоссии и мира
Облегчённая версия Метеоклуба (для смартфонов)

Тестирование нового метода оценки ДПП

Сейчас в Метеоклубе:
Участников - 1 [ Ilgiz ] 		Максимальное одновременное количество посетителей: 308 [2 Ноя 2013 22:42]
Гостей - 296 / Участников - 12

 - Начало - Ответить - Статистика - Pегистрация - Поиск -

МЕТЕОКЛУБ : независимое сообщество любителей метеорологии (Европа и Азия) : ФОРУМ О ПОГОДЕ И ПРИРОДЕ / Голосования / Тестирование нового метода оценки ДПП
Автор Сообщение
Alter
Участник

Москва, ЮЗАО 		# Дата: 18 Jul 2015 15:32 - Поправил: Alter


Итак, как я грозился, начато тестирование нового метода оценки ДПП по интервальной вероятности нормального распределения - с принятием гипотезы о том, что к нему должен сходиться ряд среднемесячных температур.
Подробнее можно почитать тут
http://meteoclub.ru/index.php?action=vthread&forum =3&topic=5355&page=4#5
Но метод немного модифицирован. Более верным считаю оценивать не попадание прогноза в некий интервал от измеренной температуры, а наоборот - попадание итогового значения температуры в определенный двухсторонний интервал от прогнозируемого.
Проще говоря, методика та же, только Tm и Tf надо поменять местами.
Итак приступим.
Полигон испытания - конкурс прогноза среднемесячных температур на сайте pogodaiklimat.
Объект испытания - прогнозы участников среднемесячных температур в Москве.
Первые итоги за февраль-июнь 2015 года. Сводная таблица по участникам. В зачет взяты все, у кого было хотя бы 3 прогноза.



Карамелька лидирует бесспорно. Даже если бы он дал прогнозы на февраль-март и показал бы средний результат, он был бы вторым. А если чуть выше среднего - сохранил бы первое место.
Среди регулярных участников, которых не так много, лидирует danz с показателем 0,82.
А вот irregular, вопреки нику, участвующий регулярно, показывает худший результат.
Показательно, что климат пока оправдывается всего на 50%, то есть оказывается практически бесполезным, в отличие от прогнозов большинства участников.

gribnik
Участник

Ступино 		# Дата: 18 Jul 2015 15:54


Карамелька лидирует
бесспорно

это кто? Он (она) есть в метеоклубе?

Alter
Участник

Москва, ЮЗАО 		# Дата: 18 Jul 2015 15:59


gribnik, понятия не имею. Я оцениваю результат.
А вот результаты "нормированной" таблицы, где пропускавшим участникам назначены результаты, равные среднему прогнозу по всем голосовавшим.
Кому-то это помогло, а кому-то(той же Карамельке) навредило))


MrX
Участник

СЗФО 		# Дата: 18 Jul 2015 15:59


gribnik

Это alter ego Saturn57~

Alter
Участник

Москва, ЮЗАО 		# Дата: 18 Jul 2015 16:02


MrX, кстати, тот Виктор - какой-то совсем не Виктор. Там его прогнозы расходятся с теми, что он здесь дает в своих ДПП.
Потому и результат не такой уж плохой.

gribnik
Участник

Ступино 		# Дата: 18 Jul 2015 17:55


с июля и меня в вашу статистику включайте ) буду делать ''прогноз'' на каждый месяц

Alter
Участник

Москва, ЮЗАО 		# Дата: 18 Jul 2015 18:40 - Поправил: Alter


какой-то совсем не Виктор.
А вот если взять "официальные" прогнозы от "уважаемого " SATURN57, то его средний коэффициент за 5 месяцев самый худший - 0,41. Так что подтверждаются предположения, что его прогнозы не совсем бесполезны, и их можно использовать в обратном направлении. Но и обратная зависимость хромает, так что не советую. К тому же, учитывая относительно удачный прогноз на январь(ошибка 1,6 гр. при большой дисперсии), Виктор как раз подтягивается к заветным 50%, но все равно не может выиграть даже у климата.

qwerty
Участник

Владимирская область, г.Киржач 		# Дата: 18 Jul 2015 19:23


У меня только 53% оправдываемость

Alter
Участник

Москва, ЮЗАО 		# Дата: 19 Jul 2015 00:37 - Поправил: Alter


В общем, потестировал этот метод и понял, что он никуда не годится. Старый лучше. По второму получается, например, на январь хоть -5, хоть -20 прогнозируй, оценка будет той же.
Так что теперь все оценивается именно так, как описано по ссылке
http://meteoclub.ru/index.php?action=vthread&forum =3&topic=5355&page=4#5

Включен январь, что, впрочем расстановку наверху и внизу тоже не изменило.

В июле-августе в общем зачете будут учтены участники только с 4 и более прогнозами.
В сентябре-октябре с 5 и более, и т.д.

Max_F
Участник

# Дата: 19 Jul 2015 12:02 - Поправил: Max_F


Alter
Я так понимаю, если прогнозируется что-то экстремальное, то оценка будет более высокой при одном и том же отклонении от факта, нежели когда прогнозируется наиболее вероятное? Вполне разумно.

И, кстати, по результатам за 30 лет можно построить реальную функцию распределения (путем суперпозиции нормальных распределений) для каждого месяца и оценивать уже по ней.

Shadow
Участник

Санкт-Петербург 		# Дата: 23 Jul 2015 13:53


Alter

Большое спасибо! А то меня тут справедливо критикуют, что я часто не подвожу итоги голосований...

lelik
Участник

Ekaterinburg 		# Дата: 25 Jul 2015 10:15


В продолжение http://meteoclub.ru/index.php?action=vthread&forum =3&topic=5498&page=16#9
и
http://meteoclub.ru/index.php?action=vthread&forum =3&topic=5355&page=4#5
отвечу тут.
Alter
в норму все же должно вписываться большинство месяцев. Что при более-менее симметричном распределении как раз будет выполняться в сигма-интервале(интегр. вероятность около 2/3).
А не слишком ли большой интервал получится? СКО, скорее, определяет климатическую изменчивость. Т.е. действительно «норму», но в отношении климата. С потребительской точки зрения разброс слишком велик.
Вот помесячные СКО для температурных рядов за последние 42, 30 и 15 лет в Екатеринбурге:

Видно, что, во-первых, помесячные СКО сравнительно постоянны для разных временных рядов. Хороший признак в плане репрезентативности коротких выборок. Во-вторых, СКО для лета в среднем около 2 градусов, а для зимы порядка 3.5. Отсюда следует, что действительно для разных сезонов рамки норм должны отличаться.
Или использовать средневзвешенный диапазон как аналог среднегодовых Тан.
Например, такой: рассмотрен ряд в 42 года. Построен амплитудный спектр для Тан каждого месяца (всего 504 точки):

На первый взгляд похоже на нормальное распределение. Аппроксимация (логарифмический масштаб):

Даже визуальный анализ позволяет отметить небольшую асимметрию – избыток положительных амплитуд и недостаток отрицательных. Свидетельство ли это потепления за указанный период или что-то другое – предмет дополнительных исследований. Но тем не менее, признак наличия линейной составляющей присутствует.

СКО полученного гаусса 2.3 градуса, мат. ожидание 0.0 (!) градусов. Но самое интересное другое: интегралы в диапазонах плюс-минус сигма, два сигма и три сигма от мат. ожидания.
СКО (-2.5..+2.5) – 67%.
2*СКО (-4.5..+4.5) – 92%.
3*СКО (-7..+7) – 99%.
Думаю, что последние три строчки в комментариях не нуждаются))

Alter
Участник

Москва, ЮЗАО 		# Дата: 25 Jul 2015 16:27


С потребительской точки зрения разброс слишком велик.
lelik, так, секундочку. Давайте определимся, кто "за белых", кто "за красных". Изначально все и начиналось с того, что речь зашла о климатической изменчивости и о том, что простые критерии оценки аномалии с ней никак не связаны. Поэтому, если привязать аномалии к климатической изменчивости, то можно будет смело говорить о том, что экстремальные месяцы будут действительно экстремальными, а не в порядке вещей для данного климата. По поводу процентов - ну это уже другой вопрос. Можно оставить 0,5-квантиль для нормального, 0,75 квантиль - 0,5-квантиль для холодного и теплого, остальное - для очень теплого и очень холодного.
Можно и до 0,5-сигма - норма, до сигма - холодный/теплый - остальное ОХ и ОТ. Но это уже перебор, по-моему.

lelik
Участник

Ekaterinburg 		# Дата: 26 Jul 2015 09:47


Alter
если привязать аномалии к климатической изменчивости, то можно будет смело говорить о том, что экстремальные месяцы будут действительно экстремальными, а не в порядке вещей для данного климата.
да я полностью с этим согласен)

ail37
Участник

Москва Водный стадион. Балашиха микрорайон Николо—Архангельское 		# Дата: 30 Сен 2015 22:05


Alter
Давненько Вы не обновляли таблицу...
Или интерес пропал?

Alter
Участник

Москва, ЮЗАО 		# Дата: 6 Окт 2015 22:28


ail37, интерес не пропал, хотя есть стойкое ощущение, что я разговариваю со стенами.
Как-нибудь продолжу, просчитать пару месяцев особого труда не составляет.

Ваш ответ

          Отменить *Что это?

 » Логин  » Пароль 
 
 


Поддержка: miniBB forum software © 2001-2024