МЕТЕОФОРУМ: форум о погоде и климате

Начинаем голосование за лучший проект правил. Оно будет проходить с 27 ноября по 20 декабря. С 21 декабря новые правила конкурса вступают в силу и будет открыто голосование за январь 2023 года.

В голосовании участвуют 5 вариантов правил:
1. Проект SergeyYn (действующий в текущем году, без изменений)
2. Проект kostian-Ilgiz (скорректированный вариант текущих правил)
3. Проект Coltan  (со степенной функцией)
4. Проект Vasilii (по 10-балльной системе, с минусами и начислением очков пропустившим голосование)
5. Проект Alter(по 10-балльной системе с отрицательной степенью экспоненты от ошибки в долях СО месяца)

Проект правил 1. SergeyYn.

ПРАВИЛО НОМЕР 1

Вычитание баллов от 9 (точный прогноз) за ошибку на 0.1 градус

1 0.3
2 0.3
3 0.3
4 0.4
5 0.5
6 0.5
7 0.5
8 0.5
9 0.5
10 0.4
11 0.3
12 0.3

где первое число - номер месяца. Летом ошибился на 1,8 градуса - и получишь ровно 0 баллов. Зимой же баллы набираются вплоть до ошибки в 3 градуса. Почему так - зимой больше возможные колебания температур (т.е. труднее дать точный прогноз).

Особая заметка - по правилам, выше место (при РАВЕНСТВЕ ошибки) занимает тот кто раньше прогноз дал. Его прогноз как бы - более долгосрочный, а значит и более ценный. И такой участник меньше знал данных от моделей. За призовые места 1-2-3 начисляются дополнительные баллы бонусы. У 1-го места их больше, у 2-го меньше и т.д.. Немного баллов-бонусов получают также, 4-е 5-е места, за попадание в пятерку лидеров. Все в равных условиях.

ПРАВИЛО НОМЕР 2

Первые три призовые места - 1 (золотой призер), 2 (серебрянный), 3 (бронзовый), и 4-е 5-е получают дополнительные баллы

5-е и 4-е места - всегда получают +0,5 балла, за "попадание в пятёрку лидеров", но если прогноз с точным попаданием (ошибки вообще нет) тогда бонус +1,0 балл.. (Хотя это уже практически нереально, ни разу не видел, чтобы 5 участников в точку попали, вообще без малейшей ошибки на месяц в 0,1 градуса)

3-е место - бронзовый призёр: получает +1,0 балл - за факт 3-го места,
но если прогноз с точным попаданием (ошибки вообще нет), или месяц выдался ОХ или ОТ (очень холодный или очень тёплый), а в период май-июнь-июль-август-сентябрь - с аномалией от +3.0 от нормы или -3.0 от нормы включительно и выше, тогда бонус +3,0 балла..

2-е место - серебряный призёр: получает +2,0 балла - за факт 2-го места,
но если прогноз с точным попаданием (ошибки вообще нет), или месяц выдался ОХ или ОТ (очень холодный или очень тёплый), а в период май-июнь-июль-август-сентябрь - с аномалией от +3.0 от нормы или -3.0 от нормы включительно и выше, тогда бонус +3,0 балла..

1-е место - золотой призёр, победитель всего Метеоклуба по месяцу : получает +3,0 балла - за факт 1-го места,
но если прогноз с точным попаданием (ошибки вообще нет), или месяц выдался ОХ или ОТ (очень холодный или очень тёплый), а в период май-июнь-июль-август-сентябрь - с аномалией от +3.0 от нормы или -3.0 от нормы включительно и выше, тогда бонус +4,0 балла..

последнее по простому аргументировалось - угадать ОТ или ОХ месяц труднее, и кто на этом рискует - может потерять больше баллов, зато даёт более ценный прогноз в случае успеха. "Норму" же предсказать немудрено. Летом в маях и сентябрях, т.е. в тёплое время года, ОТ и ОХ (отклонение +4.0 -4.0 и выше) - практически никогда не бывают, потому бонус для тёплых месяцев - сокращается начиная с аномалий +3.0 и -3.0. Я бы эти месяцы назвал ЧТ и ЧХ - "чрезвычайно теплый" и "чрезвычайно холодный". По силе аномалии, они не уступают аномальным ОТ и ОХ (с +4.0 и -4.0 от нормы) в холодное время .

Месяцы считаются так (неоднократно говорили что ОТ и ОХ - это все таки от +4.0. и -4.0 от нормы, а не 4.1 и -4.1),

[+4.0 ... выше] - ОТ.
[+1.1 ... +3.9] - Т.
[-1.0 ... +1.0] - норма,
[-3.9 ... -1.1] - Х.
[ниже ... -4.0] - ОХ.

А время голосования - до 10.00 утра, 1-го числа каждого месяца, кроме декабря. В декабре до 10.00 утра 2-го числа.

Проект правил 2. kostian-Ilgiz.

Взять за основу существующую систему со следующими изменениями:

1) Вычитать баллы за ошибку в 0.1 градуса от 9 по следующий схеме (более точно учитывающей распределение среднеквадратических отклонений) по месяцам:

1     0.25
2     0.20
3     0.25
4     0.40
5     0.36
6     0.36
7     0.36
8     0.50
9     0.45
10   0.40
11   0.25
12   0.20

Получается. что самый предсказуемый месяц - август, для получения минимального балла допускается ошибка не более 1.8 градуса; самые непредсказуемые - декабрь и февраль, для получения минимального балла допускается ошибка не более 4.5 градусов.   При такой схеме ценность каждого балла будет одинаковой для всех месяцев.  В то время как по существующей схеме получается, что участники, в среднем, набирают больше баллов в августе, чем в феврале и декабре.

Тогда пределы ошибки в градусах, дающей баллы:

1    3.6
2    4.5
3    3.6
4    2.2
5    2.5
6    2.5
7    2.5
8    1.8
9    2.0
10  2.2
11  3.6
12  4.5

Если не хочется считать с точностью до сотых, можно округлить коэффициенты по предложению Ilgiz. Тогда это будет так:
0.3   0.2   0.3   0.4   0.3   0.4   0.3   0.5   0.4   0.4   0.3   0.2

2) Снизить бонусные баллы за ТОП5, чтобы они не оказывали такого большого влияния на итоговую таблицу, как сейчас:

     С точным попаданием или ОТ, ОХ  /  без точного попадания или ОТ, ОХ
1   2.0   3.0
2   1.5   2.5
3   1.0   2.0
4   0.5   1.5
5   0.5   1.5

Итого, теоретический максимум баллов за месяц - 12, т.е. уменьшится за счет 1 бонусного балла, но, с другой стороны - возрастет сумма и вес баллов за результат, т.к. шкала увеличится в зимние месяцы с 3 до 3.6 градуса, в феврале и декабре - до 4.5 градуса.  Таким образом, участники, которые ранее случайно угадывали результат, получали 13 баллов, а потом в течение года имели посредственные результаты, по усовершенствованной системе начисления баллов уже не будут иметь такого большого преимущества перед теми, кто показывает средние, но стабильные результаты в течение года. Объективность и справедливость оценки прогнозов участников-середнячков повысится. 

Образец расчета турнирной таблицы прилагается.

Проект правил 3. Coltan.

Голосовать вот по этой формуле:

n = 10 - (a^1.33 * 3)

где а - погрешность прогноза в количестве сигм

Месячная вариативность заложена в сигму, так что все эти дополнительные опции (месячные поправки, призовые места) становятся натурально не нужны.

Сроки голосования - до 12.00 мск 1 числа соответствующего месяца

В случае форс-мажора (сбой в работе форума во время голосования, неотложные проблемы у участника) организатор голосования обязан после восстановления доступа к форуму лично известить всех участников голосования о восстановлении доступа к форуму (или один из участников голосования извещает организатора), после чего участникам даются дополнительные 8 часов (наиболее частая продолжительность рабочей смены) для подачи "позднего" прогноза. Если поздний прогноз подается позднее 23.59 мск 2 числа соответствующего месяца, то максимальная сумма очков за прогноз составляет (10 - 0,5 * p), где p - просрочка прогноза после 2 числа соответствующего месяца, в количестве полных календарных дней.

Проект правил 4. Vasilii.

предлагаю такую формулу:

(1-a/σ₁₂*σ)*10

σ₁₂ - средняя сигма всех месяцев (при желании можно взять больше, кого не устраивает август 2022-го (на вкладках "Москва" и "Питер" вбить другую циферку в синенькое окошечко);
σ - сигма месяца;
a - погрешность.

Получается вполне хорошее распределение, такие месяцы как август 2022-го не частое явление и вполне заслуженные нули практически у всех. По этой системе выходит так, прикрепляю файлы (Москву и Питер), итоги считать не надо (всё считается само), только вводить данные, также учтено правило прибавления очков аутсайдера месяца к пропустившим голосовании.

Баллы за призовые места - неспортивная ересь. Здесь непостоянный состав участников, что делает эту ересь ещё более абсурдной. Пока выбираю между 3 и 4 вариантами, в конкурсах с системами 1 и 2 участвовать не буду и другим не советую - пусть авторы этих систем получат свои бонусы автоматом

Проект правил 5. Alter.

Итак предлагаю такую систему:

За главный принцип расчета берется прямая степенная зависимость баллов от модуля отклонения прогнозного значение от фактического, отнесенного к стандартному отклонению месяца.
Формула R = 10*e^(-1.5*(a/s))
Где R - результат.
e - экспонента, примено 2,71828.
a - модуль ошибки прогноза(прогнозная температура месяца - фактическая).
s - стандартное отклонение месяца.
Таким образом, базовые баллы распределяются строго в диапазоне от ~0 при большой ошибке до 10 при 0-вой ошибке.
Нет нижнего лимита баллов - даже очень плохо проголосовавшие участники получат балл, но очень мелкий, около 0.1 или даже ниже.
Нет проблемы отрицательных значений.
К данной системе можно и нужно приложить бонус за более раннее голосование. Этот бонус может существенно повлиять на высокие места, для плохого прогноза он почти не будет играть роли, что может сделать "чемпионскую гонку" более непредсказуемой, а также стимулировать участников давать более точный прогноз. К базовому баллу прибавляется 0,1% за каждый час или по 2,4% за каждые сутки до конца голосования. При этом саму продолжительность голосования стоит ограничить 10 сутками.

формула для бонусов за голосования:
Формат даты: 30.07.22 3:30 PM
основная формула*(1+(дата конца голосования-дата прогноза)*0.024)
Образец расчета бонусов за июль и август в прикрепленном файле(спасибо Vasilii).

Да, кто не в курсе, в таблицах по месяцам, надо смотреть на колонку правее баллов, в колонке "баллы" там баллы по текущей системе.

Цитата: Alter от 27 ноября 2022, 21:08:25
Баллы за призовые места - неспортивная ересь.

Отрицательные баллы - тоже бред...

Цитата: Alter от 27 ноября 2022, 21:08:25
И да, по системе 3 учёт времени даётся только для опоздавших, если кто-то из авторов 2 последних систем готов учесть мои предложение, не колеблясь буду голосовать за его систему.

Есть вариант и с учетом досрочных прогнозов

http://www.pogodaiklimat.ru/mf/index.php?topic=1442.msg94621#msg94621

Coltan, да, видел.
Чисто баллы не нравятся. Так ведь кто-то, прголосовавший абсолютно наобум в самом начале, всегда будет получать баллы, даже за бред. Баллы нужно высчитывать как доп. проценты к уже начисленнному результату. Так бредовые прогнозы по-прежнему будут улетать в 0. Но если не нравятся возможные сотые по моей системе, можно и округлять до десятых балла, да в экселе все можно сделать и очень быстро. Впрочем, при таком подсчёте минусы недопустимы.

Цитата: Coltan от 27 ноября 2022, 21:18:09
Отрицательные баллы - тоже бред...

Это просто визуализация, в 15-бальной системе никаких отрицательных баллов бы не было, а результаты мест абсолютно такими же были. Зато идёт учёт всех игроков, особенно тех которые слишком загнули. А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать"

Цитата: Alter от 27 ноября 2022, 21:22:54
Баллы нужно высчитывать как доп. проценты к уже начисленнному результату

И по какой формуле? Или просто речь о средней ошибке в количестве сигм за год?

http://www.pogodaiklimat.ru/mf/index.php?topic=1442.msg94583#msg94583

В общем, видимо, я свою систему опубликую, правда пересчитывать тяжело, надо фиксировать время прогноза каждого участника.
За основу я бы взял систему Vasilii или Coltan,  только нафиг бы убрал эту ненужную первую цифру, из которой вычитается ошибка в долях, кратных сигме. А бонус за досрочное голосование я бы проделал в качестве процента скидки на величину ошибки. Все максимально просто и справедливо.
Выше тот, у кого меньше накопленная ошибка за вычетом бонусов за раннюю подачу прогноза.

Цитата: Vasilii от 27 ноября 2022, 21:25:05
А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать"

Бред. Получится что в зимние месяцы с высокой неопределенностью прогнозов (активные циклоны в хвостах, противоборство Атлантики с Сибиряком) может стать выгодно не голосовать вообще.

Цитата: Alter от 27 ноября 2022, 21:31:26
В общем, видимо, я свою систему опубликую, правда пересчитывать тяжело, надо фиксировать время прогноза каждого участника.
За основу я бы взял систему Vasilii или Coltan,  только нафиг бы убрал эту ненужную первую цифру, из которой вычитается ошибка в долях, кратных сигме. А бонус за досрочное голосование я бы проделал в качестве процента скидки на величину ошибки. Все максимально просто и справедливо.
Выше тот, у кого меньше накопленная ошибка за вычетом бонусов за раннюю подачу прогноза.

Вы написали бы, про что вы, я в параллельной теме вас спросил, про бонусы в зависимости от сроков голосования? А тут вы про сотые ещё какие:

Цитата: Alter от 27 ноября 2022, 21:22:54
Но если не нравятся возможные сотые по моей системе, можно и округлять до десятых балла, да в экселе все можно сделать и очень быстро. Впрочем, при таком подсчёте минусы недопустимы.

В таблицах моих вообще бесконечные дроби, просто автоматом всё до одного знака округляется

Цитата: Coltan от 27 ноября 2022, 21:36:04

Цитата: Vasilii от 27 ноября 2022, 21:25:05
А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать"

Бред. Получится что в зимние месяцы с высокой неопределенностью прогнозов (активные циклоны в хвостах, противоборство Атлантики с Сибиряком) может стать выгодно не голосовать вообще.

Так зимой же и штраф меньше. На этом и построена система.