Откуда можно импортировать прогнозы погоды?

Полезные ссылки:
Метеоцентр.Азия - наш сайт с высокодетализированными прогнозами погоды по пунктам Pоссии и мира
Облегчённая версия Метеоклуба (для смартфонов)

Откуда можно импортировать прогнозы погоды?

Сейчас в Метеоклубе:
Участников - 0
Максимальное одновременное количество посетителей: 308 [2 Ноя 2013 22:42]
Гостей - 296 / Участников - 12

 - Начало - Ответить - Статистика - Pегистрация - Поиск -

МЕТЕОКЛУБ : независимое сообщество любителей метеорологии (Европа и Азия) : ФОРУМ О ПОГОДЕ И ПРИРОДЕ / Компьютерная техника и интернет в метеорологии / Откуда можно импортировать прогнозы погоды?
. 1 . 2 . >>
Автор Сообщение
dom1n1k
Участник

Russian Federation
# Дата: 17 Фев 2011 13:33


У меня есть мысль сделать свой небольшой сайт с прогнозом погоды. С монстрами, конечно же, конкурировать бессмысленно, но собрать свою маленькую аудиторию - почему бы и нет?

Естественно, первая возникающая в этом случае мысль: откуда импортировать данные? Вообще экспорт погоды предоставляют очень многие сервера, но в основном в очень урезанном виде - как правило, лишь 1-2 дня с шагом в 12 часов. Это подходит, чтобы сделать маленький погодный информер, но явно недостаточно для полноценного прогноза. Хотелось бы не менее 5 дней. Повсеместно предоставляемые графические информеры в контексте данной темы можно вообще не рассматривать.
Конечно, есть ещё вариант с парсингом любого понравившегося сайта :) Но это нечестно, да и ненадежно.

В итоге, многодневный поиск выявил лишь 2 источника, где можно на законных основниях брать XML-фид:

1. http://weather.co.ua
Плюсы этого сайта в абсолютной бесплатности и отсутствии каких-либо ограничений на использование. Они так и пишут в лицензии - что хотите, то с данными и делайте.
Минусы (по результатом моих наблюдений) в очень подозрительном качестве прогноза и неважной стабильности сервера. Может кто-то из специалистов сталкивался с ними и может дать оценку?

2. Всем известный RP5
Плюс: качество прогноза одно из лучших.
Минус: платный и куча дополнительных условий (часть из них выглядит вполне справедливо, но некоторые совсем не нравятся).

Возможно я что-то пропустил и есть ещё источники?

Subtropic
Участник

Ростов н/Д, Россия
# Дата: 17 Фев 2011 14:23


dom1n1k
где можно на законных основниях брать XML-фид:
Посмотрите здесь, может что пригодится (Норвежский метеорологический институт), на англ и т.д.

dom1n1k
Участник

Russian Federation
# Дата: 17 Фев 2011 14:38


Subtropic
Спасибо, по первому впечатлению выглядит интересно.
Правда, у меня он почему-то упорно всё пишет только по-норвежски, но это уже детали. Обязательно посмотрю.

И тогда второй вопрос: как у них, по опыту, с качеством прогнозов применительно к территории России? Особенно по далеким от Норвегии областям - юг, Сибирь, дальний восток?

Subtropic
Участник

Ростов н/Д, Россия
# Дата: 17 Фев 2011 15:33


dom1n1k
с качеством прогнозов применительно к территории России?
Многие участники используют их данные, прогнозы считаются неплохими.

Adrenalines
Участник

Rhein-Neckar
# Дата: 17 Фев 2011 16:00


dom1n1k
Считаю, что лучшие по качеству прогнозы погоды в конечном виде предоставляет вот этот сайт. Можете легально экспортировать данные.

dom1n1k
Участник

Russian Federation
# Дата: 17 Фев 2011 16:27 - Поправил: dom1n1k


Adrenalines
Можете легально экспортировать данные.
Спасибо. Я видел meteoservice.ru, но к сожалению, его экспорт аналогично многим другим сайтам сильно урезан - лишь ближайшие сутки (4 момента через 6 часов). Да и данные в нем, в отличие от их собственного сайта, сильно загрублены. Думаю, загрублены сознательно.

Смотрю вот фид норвежцев - есть пара очень подкупающих деталей. Надо за ними понаблюдать.

update Очень странно, но норвежцы не прогнозируют влажность... А без нее температура комфорта не считается.

Corvus
Автор сайта

###Corvus###
# Дата: 18 Фев 2011 13:38


но норвежцы не прогнозируют влажность
dom1n1k

Во-первых, не норвежцы, а британцы. Тот сайт использует модель европейского центра среднесрочных прогнозов, расположенного в Рединге (Великобритания).

Во-вторых, ничто не мешает парсить текстовый детальный прогноз, в нём влажность есть (а также детализация облачности по слоям).

Надо окончание ссылки поменять на time_for_time_detaljert.htm

Правда, по Москве и некоторым другим городам это почему-то не срабатывает, но по многим пунктам такой прогноз есть.

dom1n1k
Участник

Russian Federation
# Дата: 19 Фев 2011 01:24


Во-первых, не норвежцы, а британцы. Тот сайт использует модель европейского центра среднесрочных прогнозов, расположенного в Рединге (Великобритания).
Ну если там написано Norwegian institute of Meteorology, логично называть их норвежцами :)
То что у них модель британская - любопытно, но не думаю, что это автоматически означает полную тождественность прогноза. Любую модель можно по-разному настроить, наверняка там куча нюансов.

А вот куда нужно приписывать time_for_time_detaljert.htm, я что-то не понял. Уточните, пожалуйста.

dom1n1k
Участник

Russian Federation
# Дата: 19 Фев 2011 01:34


А вот куда нужно приписывать time_for_time_detaljert.htm, я что-то не понял. Уточните, пожалуйста.
Всё, разобрался. Там просто буква на конце потерялась - нужно html.
Действительно работает, причем включая Москву:
http://www.yr.no/place/Russia/Moscow/Moscow/time_f or_time_detaljert.html
Попробовал сейчас наугад Питер, Новосибирск и Нижний Новгород - тоже работает.

Но этот самый детализованный погноз только на 2 суток. Везде засада...

Corvus
Автор сайта

###Corvus###
# Дата: 19 Фев 2011 07:45


Ну если там написано Norwegian institute of Meteorology, логично называть их норвежцами :)
dom1n1k

Институт норвежский, но используют они модель Рединга (одну из лучших в мире), об этом написано на сайте.

Но этот самый детализованный погноз только на 2 суток. Везде засада...

Прогнозировать влажность и облачность более чем на 2-3 суток особого смысла нет, слишком велика погрешность.

Это общий подход на большинстве серьёзных метеосайтов: на первые 2-3 суток даётся детальный ход метеовеличин с шагом 3-6 часов - осадки, Т, ветер, облачность, влажность. А на больший срок обычно только кол-во осадков, Тмин и Тмакс за сутки. Это вполне обоснованно.

dom1n1k
Участник

Russian Federation
# Дата: 19 Фев 2011 14:10


Институт норвежский, но используют они модель Рединга (одну из лучших в мире), об этом написано на сайте.
Да я охотно верю, что модель у них британская. :)
Я просто имею в виду, что "модель" - это ещё не конечный программный продукт с жестко забитыми параметрами. Который запусти хоть на британском компьютере, хоть норвежском, хоть японском - на выходе будут строго одинаковые цифры.
Использование аналогичной модели ещё не означает автоматически полного совпадения прогноза. Я конечно не спец в метеорологии, но имея небольшое представление о матмоделировании, знаю - любая сложная модель может быть настроена по-разному.

По поводу влажности.
Насчет переменного шага по времени - полностью с вами согласен. А вот самого факта отсутствия влажности в прогнозе через 2 дня...
Сейчас бегло посмотрел: у bbc, rp5, foreca, weather.com, weather underground, intellicast - у ВСЕХ она есть.
Понятно, что к достоверности такого прогноза нужно относиться осторожно, это подразумевается. Но просто брать и вычеркивать, мне кажется, неверно.

Corvus
Автор сайта

###Corvus###
# Дата: 19 Фев 2011 18:20 - Поправил: Corvus


Я просто имею в виду, что "модель" - это ещё не конечный программный продукт с жестко забитыми параметрами. Который запусти хоть на британском компьютере, хоть норвежском, хоть японском - на выходе будут строго одинаковые цифры.
Использование аналогичной модели ещё не означает автоматически полного совпадения прогноза.

dom1n1k

Вы не очень представляете, о чём говорите. Большинство ГДМ моделей атмосферы - это уникальный продукт, очень сложный и дорогостоящий, существующий в единственном экземпляре и используемый только её владельцем, одним из крупнейших метеоцентров мира. Один прогон модели занимает несколько часов процессорного времени на суперкомпьютере. То есть американская модель (GFS) работает только в Вашингтонском центре, английские (UKMO и ECMWF) - только в Эксетере и Рединге, и так далее.

Пользователям (в первую очередь метеослужбам разных стран (чаще всего бесплатно), во вторую очередь - прочим заинтересованным организациям и компаниям (зачастую за деньги)) предоставляется доступ не к самой модели, а к конечному результату счёта модели - это глобальные поля метеовеличин по планете для разных уровней и разных моментов времени.

Большинство метеосайтов используют американскую модель (её результаты оперативно выкладываются свободно в интернете), некоторые (как РП5 и норвежцы) - английские модели. А вот сайты, строящие прогнозы по этим данным, используют несколько разные алгоритмы обработки интерполяции и представления этих данных, вот отсюда и возникают некоторые различия в прогнозах на разных метеосайтах.

Corvus
Автор сайта

###Corvus###
# Дата: 19 Фев 2011 18:24


dom1n1k

Если у Вас есть некоторые навыки в веб-программировании, гораздо интереснее было бы заняться не использованием готовых прогнозов с каких-то сайтов, а использованием сырых модельных данных (по американской модели, например). Именно таким путём я и создал сайт Метеоцентр в 2002 году.

dom1n1k
Участник

Russian Federation
# Дата: 19 Фев 2011 20:51 - Поправил: dom1n1k


Вы не очень представляете, о чём говорите. Большинство ГДМ моделей атмосферы - это уникальный продукт, очень сложный и дорогостоящий, существующий в единственном экземпляре и используемый только её владельцем
Теперь ясно. Различие в трактовке терминов в разных прикладных областях :)
Меня сбило слово "модель" - обычно так называется математическая абстракция и набор алгоритмов, а не конкретный программный продукт на конкретном вычислительном кластере.
Хорошо, с этим разобрались.

Если у Вас есть некоторые навыки в веб-программировании, гораздо интереснее было бы заняться не использованием готовых прогнозов с каких-то сайтов, а использованием сырых модельных данных
Об этом я не думал...
Интереснее - возможно, но лучше ли? Я все же хочу сделать не собственную программистскую игрушку, а полезный для пользователей сервис. Будет ли пользователям толк от моей самодеятельности вместо работы профессионалов?
Не подскажете, где можно посмотреть такие сырые данные?

Большинство метеосайтов используют американскую модель (её результаты оперативно выкладываются свободно в интернете)
Не знаю, виной ли тому американская модель или её интерпретации, но по моим наблюдениям, по территории России американские сайты дают очень посредственные прогнозы в сравнении с европейскими.
В чем причина, в невысоком разрешении глобальной модели GFS? Наверное, у себя американцы прогнозируют по более точным локальным моделям.

Выходит, что городить огород с собственными прогнозами на основе GFS просто нет смысла, даже безотносительно лишних трудозатрат. Вот если бы где-то в свободном доступе были данные MetOffice или того же Рединга... это был бы повод задуматься.

Кстати, чьи данные использует Foreca, не знаете?

Corvus
Автор сайта

###Corvus###
# Дата: 20 Фев 2011 10:18


где можно посмотреть такие сырые данные?
dom1n1k

Например, тут:
http://nomad1.ncep.noaa.gov:9090/dods/gfs/rotating

Но, чтобы использовать их, нужно изучить форматы и специфический вспомогательный софт.

по территории России американские сайты дают очень посредственные прогнозы в сравнении с европейскими.
В чем причина, в невысоком разрешении глобальной модели GFS?



Дело не в разрешении (оно у американки в общем-то приличное, 0.5 градуса по долготе и широте), а в неадаптированности её к нашим условиям (наличию длительно залегающего снежного покрова, формированию мощных зимних приземных инверсий температуры воздуха, и так далее).

Вот если бы где-то в свободном доступе были данные MetOffice или того же Рединга... это был бы повод задуматься.


Данные этих моделей стоят немалых денег, никто в инет их выкладывать не будет. Но есть ещё одна хорошая глобальная модель, данные которой недавно стали выкладывать в инет - канадская. Я недавно давал ссылку в другой теме.

dom1n1k
Участник

Russian Federation
# Дата: 20 Фев 2011 14:13


Данные этих моделей стоят немалых денег
Ну вообще я так и понял в ходе своих раскопок.
Единственное что смущает - присутствие прогноза UKMET на сайте MeteoInfo.by. Судя по открытой статистике, популярность этого сайта относительно невелика, и чем они окупают эти предположительно большие затраты - непонятно. Правда, там вообще непонятно, что это за сайт - то ли частный, то ли коммерческий, то ли государственный.

Но есть ещё одна хорошая глобальная модель, данные которой недавно стали выкладывать в инет - канадская.
Вы (имею в виду не только лично Corvus, а форум в целом) наверняка за ней успели понаблюдать?
Какие впечатления от неё в сравнении с британскими, выявлены ли какие-то устойчивые особенности?
Повторюсь, в первую очередь интересует территория России/Украины.

И уточните пожалуйста ссылку, сам я нашел только вот этот древний пост и несколько упоминаний о ней вскользь.

Corvus
Автор сайта

###Corvus###
# Дата: 20 Фев 2011 18:42


MeteoInfo.by
dom1n1k

Это сайт Белгидромета. Данные моделей они, как и метеослужбы всех стран-участниц ВМО, получают бесплатно.

И уточните пожалуйста ссылку

Глобальная канадская модель (разрешение 0.6 градуса по широте и долготе):

ГРИБ1
http://www.weatheroffice.gc.ca/grib/High-resolutio n_GRIB_e.html

ГРИБ2
http://www.weatheroffice.gc.ca/grib/grib2_glb_HR_e .html

Corvus
Автор сайта

###Corvus###
# Дата: 20 Фев 2011 18:48


dom1n1k

По качеству канадской модели данных пока очень мало, но на первый взгляд она не уступает ГФС и УКМО.

Вообще прогностические карты по разным моделям и разным регионам можно смотреть вот тут:

http://www.pogodaonline.ru/cgi-bin/expertcharts?LA NG=ru&MENU=0000000000&CONT=casp&MODELL=gfs&MODELLT YP=1&BASE=-&VAR=prec&HH=3&ARCHIV=0&PANEL=0&ZOOM=0& PERIOD=


Очень полезный ресурс.

Наиболее важные глобальные модели там (по которым есть более-менее детальные данные, а не парочка дежурных карт):

GFS - американская авиационная
NOGAPS - американская морская
UKMO - английская (Эксетер, бывший Брокнелл)
CMC - канадская.

dom1n1k
Участник

Russian Federation
# Дата: 20 Фев 2011 20:05


Спасибо, посмотрю на досуге.

Я еще вот такую табличку нашел:
http://method.hydromet.ru/estimate/results3/table9 -13.html
По ней выходит, что UKMO с большим отрывом превосходит отечественные модели. Но там почему-то отсутствуеют GFS и Рединг.
Кроме того, я читал, что GFS недавно обновилась (только непонятно - только количественно, по разрешению, или качественно тоже?)


Ещё есть наверняка известный вам рейтинг прогнозов mycli.me - но более близкое знакомство показало полную его несостоятельность. Даже не вдаваясь в метеорологию, а глядя чисто математически - тамошние алгоритмы чрезвычайно грубы и некорректны. Немножко общался с автором - у него на развитие проекта нет ни времени, ни (как мне показалось) желания. К сожалению.


Подытоживая... Как я понимаю, у меня есть такие альтернативы:
1. Самостоятельно разбирать открытые данные GFS или CMC
2. Брать данные Рединга через посредничество yr.no
3. Покупать прогнозы UKMO через посредничество RP5
Верно?

Возможно, есть какой-то европейский сайт, который бесплатно (или недорого) экспортирует свои 5-7-дневные прогнозы на основе UKMO?
Цена RP5 (1 доллар*пункт*месяц) вполне приемлема, если тебе нужно охватить всего несколько городов (например, для регионального портала), но высоковата для бОльших масштабов. По моим грубым прикидкам, чтобы накрыть все более-менее значительные города стран СНГ, нужно порядка 300-400 точек. 10 тыс рублей в месяц для любительского сайта-хобби это явно крутовато :)

dom1n1k
Участник

Russian Federation
# Дата: 20 Фев 2011 20:46


И вдогонку еще вопрос - что за модель ECMWF, имеет смысл ее рассматривать?
http://www.ecmwf.int/services/computing/

ThunderStorm
Участник

Ростов-на-Дону
# Дата: 20 Фев 2011 22:22


dom1n1k
И вдогонку еще вопрос - что за модель ECMWF, имеет смысл ее рассматривать?
Это и есть Рединг :) Смысл есть, прогнозы в целом точные, модель наиболее адекватна в плане прогнозирования температур. Сайт Форека использует данные этой модели.

Вы из Ростова-на-Дону? Приветствую земляка! Если впредь будете принимать участие на этом метеофоруме, то будем только рады :)
*Сорри за оффтоп.

dom1n1k
Участник

Russian Federation
# Дата: 20 Фев 2011 22:56


ThunderStorm
Да, я из РнД. У меня от этих аббревиатур уже голова кругом идет. Я вот поначалу думал, что UKMO==UKMET, просто вариации одного названия. Сейчас смотрю, вроде бы разное :)

Форека тоже на Рединге? А Яндекс сейчас берет прогнозы у Фореки, от Метеоновостей они отказались. Оказывается, Рединг намного ближе, чем кажется.

Но среди большинства моих друзей/знакомых почти непререкаемый авторитет - это RP5 (метеорологи могут думать всё что угодно, но мнение пользовательской аудитории сложно преодолеть :)), поэтому мне бы хотелось как-то добраться до данных UKMO. Но видимо не судьба.

Subtropic
Участник

Ростов н/Д, Россия
# Дата: 20 Фев 2011 23:41


dom1n1k
Но среди большинства моих друзей/знакомых почти непререкаемый авторитет - это RP5 (метеорологи могут думать всё что угодно, но мнение пользовательской аудитории сложно преодолеть :))
Среди моих никто и не знает такого сайта :) все гисметео глядят, а в последнее время и ростовметео.ру (это гфс)

ThunderStorm
Участник

Ростов-на-Дону
# Дата: 20 Фев 2011 23:45


dom1n1k
Форека тоже на Рединге? А Яндекс сейчас берет прогнозы у Фореки, от Метеоновостей они отказались. Оказывается, Рединг намного ближе, чем кажется.
Да, Рединг становится популярным :) А насчёт RP5 (данные модели УКМО, она же УКМЕТ) согласен, этот сайт у меня на первом месте по точности прогнозирования как вероятности осадков, так и температуры. При составлении своих прогнозов я в основном полагаюсь на УКМО, реже на Рединг и ГФС. А Яндекс отказался от ГФС видимо из-за чудовищных температур в долгосрочных прогнозах, которые почти никогда не сбываются, а только пугают народ. Большинством погодных сайтов по-прежнему заправляет ГФС.

ThunderStorm
Участник

Ростов-на-Дону
# Дата: 20 Фев 2011 23:57


dom1n1k
Я вот поначалу думал, что UKMO==UKMET, просто вариации одного названия. Сейчас смотрю, вроде бы разное :)
Не, это одно и то же. UK Met Office у них в Великобритании имеет 2 вариации аббревиатуры: UKMO или UKMet.

dom1n1k
Участник

Russian Federation
# Дата: 21 Фев 2011 00:53 - Поправил: dom1n1k


Еще один непонятный мне момент:
http://www.yr.no/place/Russia/Rostov/Taganrog/time _for_time_detaljert.html
Норвежцы зачем-то строят таблицу не по моментам времени, а диапазонам: 3-6 часов, 6-9 часов и так далее.
Я понимаю, что это логично для уровня осадков - параметр накопительный. Но ведь всё остальное (температура, влажность, давление, ветер) параметры мгновенные. Их нужно указывать для точек, потому что иначе получается, что между диапазонами они как бы меняются ступенчато.
Причем, если сравнить числа с графиком, то получается, что в таблице искусственно усредненные значения! Как из них восстановить нормальный числовой ряд непонятно.


О, вспомнил, что ещё хотел спросить!
Какая по-вашему модель самая лучшая по части предсказания ветра (направление, скорость, порывы)?
Дело в том, что я и большинство моих друзей велосипедисты - там при планировании поездок эта информация очень полезна.

ThunderStorm
Участник

Ростов-на-Дону
# Дата: 21 Фев 2011 08:01 - Поправил: ThunderStorm


dom1n1k
Какая по-вашему модель самая лучшая по части предсказания ветра (направление, скорость, порывы)?
Для меня ГФС и УКМО. Считаю, что по точности прогноза ветра эти 2 модели ведущие. Подробный прогноз скорости, направления и порывов ветра от ГФС с 3-часовым шагом можно смотреть здесь (порывы - столбец пор., м/с), а от УКМО здесь (6-часовой шаг).
Сайты, заправленные на Рединге к сожалению не прогнозируют порывы ветра (по крайней мере я не видел такого сайта).
Есть ещё один сайт, на основе ГФС, который более подробно прогнозирует среднюю скорость и порывы ветра (почасовой шаг!): Виндгуру. Это чешский сайт, информацией которого пользуются серфингисты, парапланеристы, парашютисты, которым просто необходимо знать поведение ветра для обеспечения безопасности во время занятий экстремальным видом спорта. Ростов-на-Дону к сожалению в базе этого сайта отсутствует, но есть ближайшие к нам точки: Азов (Павло-Очаково), Ейск, Приморско-Ахтарск.

Corvus
Автор сайта

###Corvus###
# Дата: 21 Фев 2011 08:51


По ней выходит, что UKMO с большим отрывом превосходит отечественные модели. Но там почему-то отсутствуеют GFS и Рединг.
dom1n1k

ГФС там есть, она обозначена как NCEP (по названию Вашингтонского метеоцентра).

Норвежцы зачем-то строят таблицу не по моментам времени, а диапазонам: 3-6 часов, 6-9 часов и так далее.

Это сделано для наглядности отображения осадков. На самом деле значения остальных метеоэлементов относятся к концу каждого периода.

met2
Участник

Минск
# Дата: 21 Фев 2011 12:11 - Поправил: met2


ThunderStormНе, это одно и то же. UK Met Office у них в Великобритании имеет 2 вариации аббревиатуры: UKMO или UKMet.

Разные. Вроде UKMO больше развиваться не будет, так и останется с шагом 1.25°.
Данные UKMET 144 ч, 0.83° х 0.56° х 6 ч.
А на сервере у них есть UKMET с разрешением 0.11° ;( Только доступ закрыт.


Так, что правильно будет - UKMET. UKMO здесь.

XML
UKMET
GFS

ThunderStorm
Участник

Ростов-на-Дону
# Дата: 21 Фев 2011 14:30


met2
Я тогда опять в непонятках. Здесь сказано, что это одно и то же. Даже через слеш написано UKMO/UKmet.

. 1 . 2 . >>
Ваш ответ

          Отменить *Что это?

 » Логин  » Пароль 
 
 


Поддержка: miniBB forum software © 2001-2024