в поисках архивов метеоданных GRIB, Grad, NCEP, NetCDF

ПОГОДА ПРОГНОЗ
ПОГОДЫ		 КАРТЫ
ПОГОДЫ		 АЭРОПОРТЫ ОБЛАКА ПТИЦЫ Библио-
тека		 Полезные
ссылки		 FAQ о погоде ФОТО Метео-
клуб
Главная Карта сайта     КАРТЫ ПОГОДЫ для профессионалов ИНФОРМЕРЫ ПОГОДЫ ПУБЛИЦИСТИКА
Добавить в Избранное Написать нам Автор сайта Лирика
Долгосрочный прогноз Термограф Метеограммы (графики погоды)  

Полезные ссылки:
Метеоцентр.Азия - наш сайт с высокодетализированными прогнозами погоды по пунктам Pоссии и мира
Облегчённая версия Метеоклуба (для смартфонов)

в поисках архивов метеоданных GRIB, Grad, NCEP, NetCDF

Сейчас в Метеоклубе:
Участников - 1 [ CorvusCorax ] 		Максимальное одновременное количество посетителей: 308 [2 Ноя 2013 22:42]
Гостей - 296 / Участников - 12

 - Начало - Ответить - Статистика - Pегистрация - Поиск -

МЕТЕОКЛУБ : независимое сообщество любителей метеорологии (Европа и Азия) : ФОРУМ О ПОГОДЕ И ПРИРОДЕ / Компьютерная техника и интернет в метеорологии / в поисках архивов метеоданных GRIB, Grad, NCEP, NetCDF
Автор Сообщение
sanhces7
Участник

# Дата: 22 Фев 2012 18:38


Здравствуйте, уважаемые форумчане. Сразу объясню свое присутствие здесь - пишется диссертация, в один из дней поставили задачу - исследовать форматы предоставления метеоданных, и создать некую программулину, которая сможет сама подкачивать свежие метеоданные и модно так строить диаграммы температуры, влажности, ветра, и прочее. То есть, мы занимаемся не предсказанием погоды, и вообще не погодой, а программированием, и начальству взбрело в голову замутить именно такой проект.
В общем, вчера часов пять исследовал просторы интернета, нашего и англоязычного, даже до итальянцев добирался, но особых результатов это не дало.
Нашел rp5.ru + готовые скрипты к нему для скачки актуальных метеоданных в формате XML, так же какую-то прогу для яхтсменов на www.grib.us (мануал для пользования http://shchsg.livejournal.com/102742.html), только не понял, какая именно инфа в этих grib - архивах лежит. Так же нашел сайт со скачкой в формате txt (http://meteo.infospace.ru/win/wcarch/html/r_day_s tn.sht?num=1130), вроде бы еще находил с формированием exel, но сейчас понял, что забыл сохранить сайт.

Итак, куча всего - номера и расположение метеостанций, описания форматов, куча готового софта и много много красивых слов про автоматизированные системы. Главного не нашел. Откуда эти самые заветные архива в хитрых форматах качать напрямую.

Проблема еще и в том, что нужно обстоятельно сравнить виды архивов, выбрать то, что удобнее и быстрее, обосновать, позаниматься болтологией и только потом что-то накодить.

В общем, благородные Доны, пожалуйста, помогите ссылками и полезной информацией: где без лишнего тремора брать архивы (актуальные) в формате grib (version 1 и 2; то, что я нашел, мне не очень нравится), NetCDF, NCEP, NCAR, Grad, NAEFS, CFS, RASP. И возможно ли вообще их где-то брать, или только с софтом.

Прошу извинить за длинный пост, заранее спасибо.

Александр

Corvus
Автор сайта

###Corvus### 		# Дата: 22 Фев 2012 19:36


sanhces7

Сейчас в основном используется формат grib2, а не grib.

Начните хотя бы вот с этой ветки, там масса ссылок на данные моделей:

http://meteoclub.ru/index.php?action=vthread&forum =6&topic=3915

Что касается американской модели ГФС (GFS), то её ГРИБ2 живут тут:

http://nomads.ncep.noaa.gov/pub/data/nccf/com/gfs/ prod/gfs.2012022206/master/

Corvus
Автор сайта

###Corvus### 		# Дата: 22 Фев 2012 19:38


Для обработки файлов ГРИБ2 Вам понадобится программа (юниксовая) wgrib2, погуглите.

sanhces7
Участник

# Дата: 22 Фев 2012 23:20


Corvus, спасибо, Дон!
Ознакомился, тут только про гриб2 и кфс. а еще?)))
Очень бы хотелось и другие форматы хранения метеоданных. Нам нужны именно данные, а не карты, как я уже говорил, мы программисты, а не метеорологи. И пишем мы не общественно - полезный софт, а околонаучную клиент - серверную поделку.

Уважаемые формучане, прошу, откликнитесь. За ссылки на метеоданные буду очень благодарен.

Corvus
Автор сайта

###Corvus### 		# Дата: 23 Фев 2012 08:11


Ознакомился, тут только про гриб2 и кфс. а еще?)))
sanhces7

Невнимательно читали. Там и НАЕФС

http://dd.weatheroffice.ec.gc.ca/ensemble/naefs/gr ib2/raw/

Рядом, на том же сервере, СМС лежит

http://dd.weatheroffice.ec.gc.ca/model_gem_global/ high_resolution/grib2/lat_lon/

Corvus
Автор сайта

###Corvus### 		# Дата: 23 Фев 2012 08:15


В принципе, для прогноза вполне достаточно этих моделей (на период до 10 суток - ГФС, СМС, НАЕФС, на месяц - КФС). До недавнего времени большинство метеосайтов сидели на ГФС, а СМС и НАЕФС появились в доступе буквально год-полтора назад.

Другие модели (Рединг, УКМО) в свободном доступе найти нереально (их данные распространяются только между метеослужбами стран).

sanhces7
Участник

# Дата: 23 Фев 2012 11:33


Все, рассмотрел. Corvus, спасибо огромное! Пойду с начальством спорить)))

sanhces7
Участник

# Дата: 23 Фев 2012 21:47


Как я уже говорил, нам нужно только мониторить, хотя вопрос прогнозирования в нашей задаче начал плавать, начальство вдруг захотело его задать, но вовремя одумалось - дескать, а кто предсказывать-то будет? Мы ведь программисты... В общем, Дон Corvus, с меня, как говорится, могарыч.

И, цитируя классика: "Почему бы одному благородному Дону не помочь другому благородному Дону")))

Corvus
Автор сайта

###Corvus### 		# Дата: 24 Фев 2012 12:58


sanhces7

А чем дело кончилось? Что решили в итоге делать?

sanhces7
Участник

# Дата: 25 Фев 2012 19:47


пока не знаю. по сбору информации отчитаюсь, потом будут задачу ставить.

sanhces7
Участник

# Дата: 25 Фев 2012 22:31


хочу еще вопрос задать. собственно, модели прогнозирования - это классно. но форматы сохранения этих данных - пока что я, перебрав кучу адресов и моделей, увидел только grib2. неужели ни в каких форматах никто больше не работает в свободном доступе? а если работает, дайте ссылки на файлы, пожалуйста.

Corvus
Автор сайта

###Corvus### 		# Дата: 26 Фев 2012 07:34


sanhces7

ГРИБ2 очень удобный формат, зачем другие нужны? Хозяева моделей именно в этом формате данные выкладывают.

С помощью проги wgrib2 ГРИБ2 легко преобразуется в простой бинарный формат (отдельные файлы для каждого элемента и каждого тайм оффсета), легко читаемый веб-скриптами (РНР, Перл, Питон и т.д.). Этого вполне достаточно для построения веб-сайта с прогнозами.

Вроде бы есть сайты разных западных университетов и научных центров, где можно найти данные отдельных моделей (ГФС, скорее всего) в формате NetCDF, но я всерьёз этим не интересовался - незачем.

sanhces7
Участник

# Дата: 26 Фев 2012 07:51


вот и я уже начал понимать, что все работают с гриб2, но тонкость всех этих псевдонаучных разработок в том, что нам надо сначала все форматы отловить, сравнить, минимум три статьи в ВАК отправить, и только потом взять спокойно гриб2 и сделать. NetCDF я нашел в одном месте - ftp://ftp.unidata.ucar.edu/pub/netcdf/, так и не понял, что это за данные - то ли карты, то ли сводки, а куча всего - в гриб2. если хотите, я все ссылки что откопал, выложу здесь в куче, там и про METAR, и про TAF, и про гриб2, и далее по ряду. хотя многие ссылки брал с вашего форума, но кое-что и сам находил

sanhces7
Участник

# Дата: 26 Фев 2012 10:57


Corvus, а можно еще вопрос. а с каких сайтов можно забирать сводки так, чтоб знать, что именно я забираю. а то по фтпишникам, где выложены гриб2, я лазаю, там куча файлов, а как они структурированы, я не понял. а надо так, чтоб раз, сводки и прогнозы забрал, и на своем ресурсе что-то построил - карты, сводки и т.д.

Corvus
Автор сайта

###Corvus### 		# Дата: 26 Фев 2012 12:24


с каких сайтов можно забирать сводки так, чтоб знать, что именно я забираю
sanhces7

Такой сервис существует для модели ГФС:

http://nomads.ncep.noaa.gov/cgi-bin/filter_gfs_hd. pl?dir=%2Fgfs.2012022600%2Fmaster

Но работает не всегда. Надёжнее всё-таки скачивать полные ГРИБЫ2 на свой сервер и дальше уже их обрабатывать (выделять нужные параметры, обрабатывать их и т.д.).

sanhces7
Участник

# Дата: 26 Фев 2012 13:15


Corvus, я просто щас втречался с начальством, мне выписали пинка))) это, конечно, так и так бы случилось, просто юмор в следующем: пока я ковырял виды форматов и моделей, что, собственно, от меня и просили, проблему немного переформулировали. например:
http://www.ncdc.noaa.gov/cdo-web/search;jsessionid =0C5E8C95C760F704BEB8C3372E285DAA.lwf2
http://www.infochimps.com/datasets/ncdc-weather
http://www.grib.us/GribData.aspx
просто там можно, запросив конкретное место, получить профит в каком-нибудь формате, даже в xml. а те ресурсы, что я откопал, во-первых, не совсем по России, а во-вторых, не очень удобно забирать, да и непонятно, что именно забираем. так что сижу, гуглю аглицкий интернет на тему автоматизированного веб-доступа.
за ссылку спасибо, с нее можно, извратившись, xml-ем забирать)

Corvus
Автор сайта

###Corvus### 		# Дата: 26 Фев 2012 14:40


sanhces7

А, ну раз такое дело, то многие метеосайты (российские и западные) предоставляют прогноз по пункту в примитивном (непрофессиональном) виде (небольшое число банальных параметров) в формате RSS, XML. Это вообще тривиальнейшая задача.

sanhces7
Участник

# Дата: 2 Мар 2012 19:51


вот-вот. а мне надо найти такие сайты, которые эту инфу в грибе и прочем предоставляют

Corvus
Автор сайта

###Corvus### 		# Дата: 2 Мар 2012 20:36


sanhces7

Что-что я совсем запутался.

То ли нужен Вам ГРИБ, то ли слишком сложен и лучше брать хмл?

sanhces7
Участник

# Дата: 2 Мар 2012 23:12


именно гриб. но чтоб просто было забирать, картирование по зонам и подходящие методы сбора. такого пока найти не могу

Corvus
Автор сайта

###Corvus### 		# Дата: 3 Мар 2012 07:25


sanhces7

Я же давал ссылки на серверы НОМАДС (американская модель ГФС)


Скачивание ГРИБОВ по зонам

http://nomad1.ncep.noaa.gov/cgi-bin/ftp2u_gfs0.5.s h


Картирование по любой выбранной территории

http://nomad1.ncep.noaa.gov/cgi-bin/pdisp_gfs0.5.s h

Ваш ответ

          Отменить *Что это?

 » Логин  » Пароль 
 
 


Поддержка: miniBB forum software © 2001-2024