МЕТЕОФОРУМ: форум о погоде и климате

Метеорология как наука => Компьютеры и Интернет в метеорологии => Тема начата: slr от 09 Февраль 2014, 00:37:10

Название: Прогресс в работе моделей.
Отправлено: slr от 09 Февраль 2014, 00:37:10
Интересно, ведь та же ГФС, и другие модели, они же совершенствуются со временем? В теории это должно быть так. Кто-то заметил существенное увеличение оправдываемости? Я например пользуюсь ГФС и иногда для сверки УКМО и Редингом помоему с 2005 года.. помему, если раньше хорошая оправдываемость "сложных" явлений- осадков, конвекции, улучшилась, примерно с 2-3х дней до 4х, хвосты стали поточнее! Я еще помню сколько суровых лажаний было до 2009 года, могло быть так что с дальних хвостов стоял определенный сценарий, и он стабильно сохранялся, и вот когда время подошло уже за 3 дня, он резк менялся на противоположный, который и сбывался. Поля с низким/высоким ЛИ/САРЕ сталь более точными. Соотв. и специальные ресурсы для прогнозирования гроз на базе ГФС стали работать лучше.

А какие перспективы дальше, как будет расти точность прогнозов, и будет ли вообще?
Название: Re: Прогресс в работе моделей.
Отправлено: Stasasan от 08 Август 2018, 10:45:09
Смотрю, этим летом GFS при Затоке СУВМ в московском регионе уверенно прогнозирует нулевую облачность днём. Сейчас только десять утра, а облаков, как и следовало ожидать, уже баллов на 6. Раньше такого за ней не наблюдал, вот уж действительно прогресс.
Название: Re: Прогресс в работе моделей.
Отправлено: Blitz от 08 Август 2018, 13:41:34
Stasasan
Какую старую тему откопали. Явно не новичек на форуме :)
Заток холода в СУВМ утром еще продолжался за ХФ, отсюда и облачность.
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 15 Ноябрь 2018, 22:26:49
Прогресс обходит канадскую модель стороной. Как чудила, так и продолжает чудить.
(https://pp.userapi.com/c849024/v849024471/ba292/k7UqrNCxd64.jpg)
Дело даже не в куполе, а в том, что в окрестностях Москвы сейчас -3... -5 всего на 18 UTC.
Да, и даже в самых холодных Черустях всего лишь -7.
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 17 Ноябрь 2018, 11:50:50
Прогресс обходит канадскую модель стороной. Как чудила, так и продолжает чудить.
(https://pp.userapi.com/c849024/v849024471/ba292/k7UqrNCxd64.jpg)
Дело даже не в куполе, а в том, что в окрестностях Москвы сейчас -3... -5 всего на 18 UTC.
Да, и даже в самых холодных Черустях всего лишь -7.

Тем не менее, именно канадская модель ближе всего попадает при прогнозе ночных минимумов в центре холодного антициклона. GFS чудовищно завышает температуру в такой ситуации: запросто может быть прогноз -5...-7, а по факту -13.
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 14 Июль 2019, 03:30:55
Не хочется создавать ветку, зная, что никто не будет ничего анализировать - гиблое дело.

Напишу тут.
Ударим сарказмом по почитателям модельных прогнозов.

В очередной раз подтверждается тот факт, что приземка у GFS провально прогнозируется именно в условиях АЦ, в то время, как при пониженном давлении средняя ошибка мало отклоняется от 0, да и даже по модулю вроде не так высока.
13 июля 15 мск
(http://fmeteo.ru/synop_archives/synops_tmpdef_2019071312.png)
Син. ситуация
(http://fmeteo.ru/archive/prec_1213072019.png)

А вот как было ровно месяц назад

(http://fmeteo.ru/synop_archives/synops_tmpdef_2019061312.png)

И барика
(http://fmeteo.ru/archive/prec_1213062019.png)

Особо сильно занижение по краям АЦ, что характерно в случае неправильного прогноза фронтальной облачности, но и на оси гребня виден систематический недуг модели - неспособность правильно рассчитать тепловой баланс подстилающей поверхности днем при поступлении активной солнечной радиации, что также является следствием наличия фантомной облачности преимущественно среднего яруса, которая по модельным данным должна была срезать прогрев.

Ночью с этим не так туго. 14 июня 3 ч. мск
(http://fmeteo.ru/synop_archives/synops_tmpdef_2019061400.png)
Тут плюс-минус, лотерея, опять же, по распределению облачности, но хотя бы не систематический пролет, как днем.
Название: Re: Прогресс в работе моделей.
Отправлено: Vasilii от 14 Июль 2019, 23:18:07
средняя ошибка мало отклоняется от 0, да и даже по модулю вроде не так высока.
Там градиент на графике просто немного вводит в заблуждение.
По ВДНХ, к примеру, разница (прогноз-факт) в в 6 вечера была +6 градусов - а там всё совсем светлым светло, ну ладно - спишем это на доджь и обвал Т в срок.

(http://fmeteo.ru/synop_archives/synops_tmpdef_2019071415.png)

А вот в Наро-Фоминске, к примеру, всё вроде сходится: разница +4, но и тут картинка путает немного - так как нет плавного перехода красок. На графике всего два оттенка и можно подумать, что 2 градуса - но это не так, судя по краскам на шкале справа.
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 19 Июль 2019, 12:27:07
Vasilii, с ВДНХ сложнее, так как в районе Москвы понапихано станций в обмен значительно плотнее анализируемой градусной сетки, так что там что-то среднее, скорее.
Название: Re: Прогресс в работе моделей.
Отправлено: Vasilii от 19 Июль 2019, 12:43:26
Alter, да там вообще всё гуд оказывается было - срок за 18.00 я посмотрел на рп5 - а там +13.5 почему-то значение??? (ошибка походу, а я думал дождь), а у Костяна +19.9...

(http://images.vfl.ru/ii/1563529275/c932c685/27259897.png)
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 08 Май 2020, 13:40:52
Я давно хотел выяснить, есть ли разница в оправдываемости различных прогонов GFS: за 00, 06, 12, 18 часов.  Существует такая гипотеза, что прогоны за 06 и 18 часов менее точные, т.к. туда не закладывается аэрология. Не секрет, что метеорологические зонды в мире запускают преимущественно в сроки 00 и 12 UTC, соответственно, логика подсказывает, что прогоны GFS в эти сроки должны быть точнее.  Сейчас ситуация с аэрологией стала еще хуже: 80% авиарейсов в мире отменены из-за коронавируса, это значит, что аэрологической информации поступает совсем мало.  Самое время проверить гипотезу.

Я взял прогнозы за 20 дней: с 17 апреля по 7 мая, сохранил каждый из прогонов GFS в базу по 500 станциям климатического монитора и посчитал  оправдываемость прогнозов. Всего получилось порядка 5 миллионов значений.  Результаты получились довольно неожиданными: все 4 прогона имеют практически одинаковую оправдываемость с точностью до десятых долей процента. Лишь самый хвост 18-часового прогона (12-14 дни) оправдывается чуть хуже.

00 - 57.6%
06 - 57.5%
12 - 57.5%
18 - 56.4%

(http://www.pogodaiklimat.ru/files/verify_gfs.jpg)

Таким образом получается, что неполнота аэрологических данных в сроки 06 и 18 UTC практически никак не влияет на точность прогнозов.
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 08 Май 2020, 14:44:39
Kostian но данные моделей уже давно не определяются зондированием, так что этот результат был очевиден.
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 11 Май 2020, 15:26:07
Продолжаем исследования оправдываемости прогнозов погоды по территории СНГ. На этот раз я решил сравнить ECMWF и GFS. Интуитивно я давно понимал, что прогнозы европейской модели оправдываются лучше, чем американской, но вот насколько и по всей ли территории СНГ? Теперь у меня есть ответ на этот вопрос.
Как и в предыдущем исследовании, я взял прогнозы за 20 дней: с 17 апреля по 7 мая, сохранил прогоны ECMWF и GFS в базу по 500 станциям климатического монитора и посчитал оправдываемость прогнозов. Получились очень интересные графики:

(http://www.pogodaiklimat.ru/files/verify_gfs_ecmwf.jpg)

Как видим, на территории СНГ GFS значительно уступает по точности прогнозов Редингу. Разница в оправдываемости в первые трое суток достигает 15-18%! Даже если смотреть прогнозы на неделю вперед, то все равно видим уверенное лидерство Рединга.

Если рассматривать отдельные регионы, то увидим колоссальную разницу в оправдываемости для таких регионов, как Эвенкия, Якутия, Казахстан, Средняя Азия. Прогнозы GFS в этих регионах оправдываются очень плохо: есть примеры, когда оправдываемость на первые 5 суток составляет 20-30%, в то время, как прогнозы Рединга оправдываются на 80-90%.
В то же время, GFS существенно лучше прогнозирует погоду в прибрежных районах и особенно - в Арктике. По арктическим островам и арктическому побережью Якутии и Чукотки Рединг практически бесполезен: оправдываемость очень низкая. Там может помочь только GFS. Нет преимущества у Рединга по Мурманской области, побережью Белого и Баренцева морей, Сахалину, Курилам. И плохо оправдываются прогнозы Рединга по Санкт-Петербургу, GFS - заметно лучше.
Есть места с локальными климатическими особенностями, которые не учитываются глобальными моделями, по которым они не могут дать точный прогноз. Это, как правило, горные или защищенные горами районы. Например, Ялта или Сулак-высокогорная. Прогнозы там систематически пролетают. Значительно улучшить оправдываемость по таким районам можно с помощью поправок. Также замечен недоучет солнечного прогрева днем, особенно при переменной облачности или недоучет ночного выхолаживания ночью по ряду метеостанций. Это тоже лечится поправками.

Выводы:
1. Рединг - континентальная модель, которая существенно лучше прогнозирует погоду по территории СНГ на территориях, удаленных от морей и океанов более чем на 100 км. И ее нужно использовать как основную модель.
2. GFS - морская модель, которая хорошо прогнозирует погоду в прибрежных районах. Поэтому прогнозы на сайте "Погода и климат" по арктическим островам, побережью северных морей, Санкт-Петербургу, Курилам, Сахалину и некоторым другим станциям на днях будут переведены на чистый GFS.
3. Нужна таблица поправок для уточнения прогнозов по горным районам, Ялте и некоторым другим точкам. Таким таблицы составлены, они будут динамически обновляться и использоваться на сайте при составлении прогнозов.
4. Переход на GFS для прибрежных районов и введение поправок позволит улучшить оправдываемость прогнозов на неделю на 2-4%.

(http://www.pogodaiklimat.ru/files/verify_gfs_ecmwf_mix.jpg)
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 11 Май 2020, 15:48:40
Да, если кто-то не догадался, то речь идет об оправдываемости срочной температуры воздуха. Прогноз считался оправдавшимся, если расхождение факт - прогноз в срок не превысило  +/-3 градуса.
Название: Re: Прогресс в работе моделей.
Отправлено: Dormih от 11 Май 2020, 17:39:52
Kostian! 
Интересные данные! Но я могу сказать, что прогноз гфс по Костроме меня вполне устраивает, несмотря на то, что от моря наш город достаточно далеко.
Название: Re: Прогресс в работе моделей.
Отправлено: Paxan96 от 11 Май 2020, 17:44:42
Kostian! 
Интересные данные! Но я могу сказать, что прогноз гфс по Костроме меня вполне устраивает, несмотря на то, что от моря наш город достаточно далеко.
Ну так и гфс может правильную температуру указать
Название: Re: Прогресс в работе моделей.
Отправлено: Paxan96 от 12 Октябрь 2021, 15:37:00
Завтра будет обновление модели ecmwf
https://confluence.ecmwf.int/plugins/servlet/mobile?contentId=235629304#content/view/235629304
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 07 Ноябрь 2021, 00:59:27
Ну что ж. Ходили тут споры о том, какие модели лучше всего работают для ЕТР. Естественно, такой статистики специально никто не ведет. Но все же для Европы такое сравнение есть. И только на 3 и 5 дней. Сосредоточимся на пределе достоверного прогноза - 5 дней.
Что же мы видим. А видим то, что и следовало ожидать. У GFS непонятные конвульсии смутного характера(иногда они совпадают с меньшими по силе падениями точности у рединга, а иногда и сами по себе), Рединг на этом фоне выглядит стабильнее и явно надежнее. Единственный тут достойный конкурент Рединг - канадская модель. Возможно, неплохо показал бы себя ICON, но, увы, он тут в статистику не входит.
Опираясь на эти данные, если и рассматривать мультимодельные ансамбли, то наибольший вес нужно отдавать данным CMC и ECMWF, наименьший GFS и UKMET. Это будет оптимальным решением при рассмотрении мультимодельных коллизий на срок 5 дней.
(https://sun9-63.userapi.com/impg/-emWJJAOZhGXlwZ_8J7zsxixMFcSe8l4-NIdXg/1Xmd3Lwg1gQ.jpg?size=1069x699&quality=96&sign=567e0b71fe59743c9a563a5c4f5690f0&type=album)
P.S. От прогнозов я отстраняюсь. Надоели тупые споры с некоторыми упертыми товарищами.
Просто посмотрим по факту, что там будет после 15. Например про "короткое похолодание, а после тепло".
Крайне любопытно. Буду наблюдать ;)
Название: Re: Прогресс в работе моделей.
Отправлено: Spasatel от 07 Ноябрь 2021, 01:22:18
Alter
если и рассматривать мультимодельные ансамбли, то наибольший вес нужно отдавать данным CMC и ECMWF, наименьший GFS и UKMET.
примерно такой подход используется в комплексном прогнозе ГМЦ, но там эти веса вычисляются на основе оправдываемости ГДМ в текущей синоптической ситуации (что-то типа самообучающейся системы).
Просто посмотрим по факту, что там будет после 15. Например про "короткое похолодание, а после тепло".
Например, короткое похолодание, а потом короткое потепление :)
А прогноз на ноябрь вы уже дали. Москва +2.5. Оправдается только, если "а после тепло ".
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 07 Ноябрь 2021, 02:27:59
А прогноз на ноябрь вы уже дали. Москва +2.5. Оправдается только, если "а после тепло ".
За этот прогноз я не переживаю. Провалится, и шут с ним.
Он такой же отфонарный, как и всех других участников тут. Плюс-минус это интерпретация прогноза от CFS, но первого попавшегося, без должного анализа. Просто я не натягиваю, как некоторые, давным-давно уже признанный неэффективным в ДПП(в среднесрочных, однако, он может быть полезен) метод аналогов, как сову на глобус. Но и это пройдет(с) :)
Название: Re: Прогресс в работе моделей.
Отправлено: Alexeyich от 07 Ноябрь 2021, 11:42:41
данным CMC

А можно ссылочку на их прогнозы? ::)
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 07 Ноябрь 2021, 13:20:14
А прогноз на ноябрь вы уже дали. Москва +2.5. Оправдается только, если "а после тепло ".
За этот прогноз я не переживаю. Провалится, и шут с ним.
Он такой же отфонарный, как и всех других участников тут. Плюс-минус это интерпретация прогноза от CFS, но первого попавшегося, без должного анализа. Просто я не натягиваю, как некоторые, давным-давно уже признанный неэффективным в ДПП(в среднесрочных, однако, он может быть полезен) метод аналогов, как сову на глобус. Но и это пройдет(с) :)

Как же так?  Вы ведь убедительно доказывали мне, что статистика - ерунда, CFS - наше все, поэтому надо давать +2 и выше, это точняк. Неважно, что +2 уже было два года подряд в ноябре. По теории вероятностей вы утверждали, что ничего не мешает случиться +2 трижды кряду. Разве не так? А теперь пишете, что отрекаетесь от своего прогноза и вообще CFS - сплошная отфонарщина. Как-то непоследовательно...
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 07 Ноябрь 2021, 17:14:20
Kostian,  я не отрекаюсь, я просто трезво смотрю на вещи. Это раз.
Я лишь подчеркнул тот факт, что ноябри в Москве в последние годы теплые, как и в прогнозах CFS, это два. Никаких выводов о надёжности CFS не было. Это было наблюдение фактов.
В-третьих, Вы не понимаете статистику и теорию вероятностей,  это совершенно очевидно после того, как Вы не смогли понять даже такую незамысловатую вещь, как ложный вывод Монте-Карло.
В-четвертых, Вы постоянно приписываете мне то, чего я никогда не писал и даже не думал.
Название: Re: Прогресс в работе моделей.
Отправлено: Alter от 07 Ноябрь 2021, 17:18:17
А да, и разбаньте калининградца. Наверняка после этого поста ему больше тут не с кем будет конфликтовать :) пусть пишет простыни чуши про меня вместе с хозяином форума. Мне абсолютно фиолетово.
Название: Re: Прогресс в работе моделей.
Отправлено: Spasatel от 07 Ноябрь 2021, 18:24:11
Объективно надо сказать, что одно дело - дать прогноз по Москве +2.5 в конце октября, и совсем другое - упорно держаться за теплую 4-ю пентаду сейчас, когда анализ прогонов ведущих ГДМ показывает, что это  маловероятно, а вот получить холодную 4-ю пентаду можно запросто.)
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 08 Ноябрь 2021, 12:40:06
Вот такой вот "прогресс" в работе моделей.

(http://www.pogodaiklimat.ru/files/sevastopol_20211108.jpg)

Сбудется?  ;D
Название: Re: Прогресс в работе моделей.
Отправлено: Spasatel от 08 Ноябрь 2021, 20:37:03
Прогресс несомненный. GFS просто убрала циклон 14-15-го с синоптической карты
http://fmeteo.ru/gfs/12/prec_144.png
Нет циклона, нет и проблем :)
А ICON за 12 сильно отличается от прогона за 0
https://www.wetterzentrale.de/de/show_diagrams.php?geoid=110100&model=ico&var=93&run=12&lid=OP&bw=1
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 08 Ноябрь 2021, 21:41:16
Spasatel

У GFS С 18 по 22 тепло. Это точно по ДПП.
Название: Re: Прогресс в работе моделей.
Отправлено: Lolka5039 от 08 Ноябрь 2021, 22:37:09
А в Москве с 15-го уверенная метеозима по среднеансабльному прогнозу.
Тем не менее, в Берлине и Париже умеренные холода как для них, но так же, метеорологическая осень. Метео зима начинается лишь восточнее Смоленска.
По этому мне и Косте беспокоиться не о чем. В Минске метео осень, в Москве увереннейшая метеозима.
Вот именно эта "психологическая отметка" начала зимы куда важнее каких-то там красочек типа "холодно отн. нормы или тепло". Даже в голосовании здесь голосуют за Тср а не Тан месяца, вот я голосую за +1.1 а Кенинг какой-нибудь за -2.5 скажем. Тан это второстепенное и мало кому вообще интересное. Вот сейчас действительно в Зарубежной европе отрицательная аномалия с 3 декады, обвал холода. И выход теплого сектора на ЕТР. Это все очень относительно, что мне с того что +10 днем в Париже это дубак, а в Москве 0 днем это жара? Ощущениям легче станет?
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 08 Ноябрь 2021, 23:01:21
Spasatel

Вот уже и Рединг метнулся вверх, вслед за GFS. Что, уже зима отменяется? Я же говорил, что с 18-го новая волна тепла будет. Так у некоторых нервы чего-то сдавать начали.  Чего ругаться? Будем по факту итоги подводить. Еще 10 дней до этого.
Название: Re: Прогресс в работе моделей.
Отправлено: Yury Fralou от 08 Ноябрь 2021, 23:13:10
О чем вы???!
До 18.ноября 10 дней.
Вероятность тепла и вероятность холода на те дни равна 60 к 40.
Работайте с 144-часовыми прогнозами. И даже  они косячат, но, все-таки.
Название: Re: Прогресс в работе моделей.
Отправлено: Spasatel от 09 Ноябрь 2021, 01:07:26
Kostian
Вот уже и Рединг метнулся вверх, вслед за GFS.

А ICON вниз. К сожалению, это волна тепла не подтверждается ансамблем. Но любопытно, что одновременно и Рэдинг и GFS выдали примерно одинаковое. Да, циклон 14-15-го у Рэдинга тоже исчез. Вернее не исчез, а идет совсем по югам
Название: Re: Прогресс в работе моделей.
Отправлено: Spasatel от 09 Ноябрь 2021, 12:53:27
Ну что ж, ансамбли GFS и Рэдинга подтвердили волну тепла с 17-го. Похоже, мой прогноз имеет хорошие шансы оправдаться
Просто посмотрим по факту, что там будет после 15. Например про "короткое похолодание, а после тепло".
Например, короткое похолодание, а потом короткое потепление :)

Правда, насчет короткого потепления пока не понятно. Может быть, оно будет и не коротким.)
Название: Re: Прогресс в работе моделей.
Отправлено: Kostian от 12 Ноябрь 2021, 10:37:23
С 7 ноября не обновляется прогноз CFS:  http://meteoweb.ru/alter/cfs.php    Одна и та же картинка висит уже несколько дней.