Голосование

Какой вариант правил на 2023 год вы выбираете?

Проект SergeyYn (действующий в текущем году, без изменений)
5 (35.7%)
Проект kostian-Ilgiz (скорректированный вариант текущих правил)
4 (28.6%)
Проект Coltan  (со степенной функцией)
2 (14.3%)
Проект Vasilii (с минусами и начислением очков пропустившим голосование)
1 (7.1%)
Проект Alter  (с функцией экспоненты)
2 (14.3%)

Проголосовало пользователей: 14

Голосование закончилось: 20 Декабрь 2022, 20:50:20

Автор Тема: Голосуем за вариант правил голосований по системе Метеоклуба на 2023 год!  (Прочитано 8077 раз)

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
Начинаем голосование за лучший проект правил. Оно будет проходить с 27 ноября по 20 декабря. С 21 декабря новые правила конкурса вступают в силу и будет открыто голосование за январь 2023 года.

В голосовании участвуют 5 вариантов правил:
1. Проект SergeyYn (действующий в текущем году, без изменений)
2. Проект kostian-Ilgiz (скорректированный вариант текущих правил)
3. Проект Coltan  (со степенной функцией)
4. Проект Vasilii (по 10-балльной системе, с минусами и начислением очков пропустившим голосование)
5. Проект Alter(по 10-балльной системе с отрицательной степенью экспоненты от ошибки в долях СО месяца)
« Последнее редактирование: 28 Ноябрь 2022, 01:44:40 от Alter »
Shura - горе-прогнозист, позор Метеофорума!

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
Проект правил 1. SergeyYn.

ПРАВИЛО НОМЕР 1

Вычитание баллов от 9 (точный прогноз) за ошибку на 0.1 градус

1 0.3
2 0.3
3 0.3
4 0.4
5 0.5
6 0.5
7 0.5
8 0.5
9 0.5
10 0.4
11 0.3
12 0.3

где первое число - номер месяца. Летом ошибился на 1,8 градуса - и получишь ровно 0 баллов. Зимой же баллы набираются вплоть до ошибки в 3 градуса. Почему так - зимой больше возможные колебания температур (т.е. труднее дать точный прогноз).

Особая заметка - по правилам, выше место (при РАВЕНСТВЕ ошибки) занимает тот кто раньше прогноз дал. Его прогноз как бы - более долгосрочный, а значит и более ценный. И такой участник меньше знал данных от моделей. За призовые места 1-2-3 начисляются дополнительные баллы бонусы. У 1-го места их больше, у 2-го меньше и т.д.. Немного баллов-бонусов получают также, 4-е 5-е места, за попадание в пятерку лидеров. Все в равных условиях.

ПРАВИЛО НОМЕР 2

Первые три призовые места - 1 (золотой призер), 2 (серебрянный), 3 (бронзовый), и 4-е 5-е получают дополнительные баллы

5-е и 4-е места - всегда получают +0,5 балла, за "попадание в пятёрку лидеров", но если прогноз с точным попаданием (ошибки вообще нет) тогда бонус +1,0 балл.. (Хотя это уже практически нереально, ни разу не видел, чтобы 5 участников в точку попали, вообще без малейшей ошибки на месяц в 0,1 градуса)

3-е место - бронзовый призёр: получает +1,0 балл - за факт 3-го места,
но если прогноз с точным попаданием (ошибки вообще нет), или месяц выдался ОХ или ОТ (очень холодный или очень тёплый), а в период май-июнь-июль-август-сентябрь - с аномалией от +3.0 от нормы или -3.0 от нормы включительно и выше, тогда бонус +3,0 балла..

2-е место - серебряный призёр: получает +2,0 балла - за факт 2-го места,
но если прогноз с точным попаданием (ошибки вообще нет), или месяц выдался ОХ или ОТ (очень холодный или очень тёплый), а в период май-июнь-июль-август-сентябрь - с аномалией от +3.0 от нормы или -3.0 от нормы включительно и выше, тогда бонус +3,0 балла..

1-е место - золотой призёр, победитель всего Метеоклуба по месяцу : получает +3,0 балла - за факт 1-го места,
но если прогноз с точным попаданием (ошибки вообще нет), или месяц выдался ОХ или ОТ (очень холодный или очень тёплый), а в период май-июнь-июль-август-сентябрь - с аномалией от +3.0 от нормы или -3.0 от нормы включительно и выше, тогда бонус +4,0 балла..

последнее по простому аргументировалось - угадать ОТ или ОХ месяц труднее, и кто на этом рискует - может потерять больше баллов, зато даёт более ценный прогноз в случае успеха. "Норму" же предсказать немудрено. Летом в маях и сентябрях, т.е. в тёплое время года, ОТ и ОХ (отклонение +4.0 -4.0 и выше) - практически никогда не бывают, потому бонус для тёплых месяцев - сокращается начиная с аномалий +3.0 и -3.0. Я бы эти месяцы назвал ЧТ и ЧХ - "чрезвычайно теплый" и "чрезвычайно холодный". По силе аномалии, они не уступают аномальным ОТ и ОХ (с +4.0 и -4.0 от нормы) в холодное время .

Месяцы считаются так (неоднократно говорили что ОТ и ОХ - это все таки от +4.0. и -4.0 от нормы, а не 4.1 и -4.1),

[+4.0 ... выше] - ОТ.
[+1.1 ... +3.9] - Т.
[-1.0 ... +1.0] - норма,
[-3.9 ... -1.1] - Х.
[ниже ... -4.0] - ОХ.

А время голосования - до 10.00 утра, 1-го числа каждого месяца, кроме декабря. В декабре до 10.00 утра 2-го числа.
Shura - горе-прогнозист, позор Метеофорума!

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
Проект правил 2. kostian-Ilgiz.

Взять за основу существующую систему со следующими изменениями:

1) Вычитать баллы за ошибку в 0.1 градуса от 9 по следующий схеме (более точно учитывающей распределение среднеквадратических отклонений) по месяцам:

1     0.25
2     0.20
3     0.25
4     0.40
5     0.36
6     0.36
7     0.36
8     0.50
9     0.45
10   0.40
11   0.25
12   0.20

Получается. что самый предсказуемый месяц - август, для получения минимального балла допускается ошибка не более 1.8 градуса; самые непредсказуемые - декабрь и февраль, для получения минимального балла допускается ошибка не более 4.5 градусов.   При такой схеме ценность каждого балла будет одинаковой для всех месяцев.  В то время как по существующей схеме получается, что участники, в среднем, набирают больше баллов в августе, чем в феврале и декабре.

Тогда пределы ошибки в градусах, дающей баллы:

1    3.6
2    4.5
3    3.6
4    2.2
5    2.5
6    2.5
7    2.5
8    1.8
9    2.0
10  2.2
11  3.6
12  4.5

Если не хочется считать с точностью до сотых, можно округлить коэффициенты по предложению Ilgiz. Тогда это будет так:
0.3   0.2   0.3   0.4   0.3   0.4   0.3   0.5   0.4   0.4   0.3   0.2

2) Снизить бонусные баллы за ТОП5, чтобы они не оказывали такого большого влияния на итоговую таблицу, как сейчас:

     С точным попаданием или ОТ, ОХ  /  без точного попадания или ОТ, ОХ
1   2.0   3.0
2   1.5   2.5
3   1.0   2.0
4   0.5   1.5
5   0.5   1.5

Итого, теоретический максимум баллов за месяц - 12, т.е. уменьшится за счет 1 бонусного балла, но, с другой стороны - возрастет сумма и вес баллов за результат, т.к. шкала увеличится в зимние месяцы с 3 до 3.6 градуса, в феврале и декабре - до 4.5 градуса.  Таким образом, участники, которые ранее случайно угадывали результат, получали 13 баллов, а потом в течение года имели посредственные результаты, по усовершенствованной системе начисления баллов уже не будут иметь такого большого преимущества перед теми, кто показывает средние, но стабильные результаты в течение года. Объективность и справедливость оценки прогнозов участников-середнячков повысится.  :)

Образец расчета турнирной таблицы прилагается.
Shura - горе-прогнозист, позор Метеофорума!

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
Проект правил 3. Coltan.

Голосовать вот по этой формуле:

n = 10 - (a1.33 * 3)

где а - погрешность прогноза в количестве сигм

Месячная вариативность заложена в сигму, так что все эти дополнительные опции (месячные поправки, призовые места) становятся натурально не нужны.

Сроки голосования - до 12.00 мск 1 числа соответствующего месяца

В случае форс-мажора (сбой в работе форума во время голосования, неотложные проблемы у участника) организатор голосования обязан после восстановления доступа к форуму лично известить всех участников голосования о восстановлении доступа к форуму (или один из участников голосования извещает организатора), после чего участникам даются дополнительные 8 часов (наиболее частая продолжительность рабочей смены) для подачи "позднего" прогноза. Если поздний прогноз подается позднее 23.59 мск 2 числа соответствующего месяца, то максимальная сумма очков за прогноз составляет (10 - 0,5 * p), где p - просрочка прогноза после 2 числа соответствующего месяца, в количестве полных календарных дней.
« Последнее редактирование: 27 Ноябрь 2022, 21:03:23 от Kostian »
Shura - горе-прогнозист, позор Метеофорума!

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
Проект правил 4. Vasilii.

предлагаю такую формулу:

(1-a/σ₁₂*σ)*10

σ₁₂ - средняя сигма всех месяцев (при желании можно взять больше, кого не устраивает август 2022-го (на вкладках "Москва" и "Питер" вбить другую циферку в синенькое окошечко);
σ - сигма месяца;
a - погрешность.

Получается вполне хорошее распределение, такие месяцы как август 2022-го не частое явление и вполне заслуженные нули практически у всех. По этой системе выходит так, прикрепляю файлы (Москву и Питер), итоги считать не надо (всё считается само), только вводить данные, также учтено правило прибавления очков аутсайдера месяца к пропустившим голосовании.
Shura - горе-прогнозист, позор Метеофорума!

Онлайн Alter

  • Ветеран
  • *****
  • Сообщений: 8454
  • МО, Пушкино
    • Просмотр профиля
Баллы за призовые места - неспортивная ересь. Здесь непостоянный состав участников, что делает эту ересь ещё более абсурдной. Пока выбираю между 3 и 4 вариантами, в конкурсах с системами 1 и 2 участвовать не буду и другим не советую - пусть авторы этих систем получат свои бонусы автоматом :D

Проект правил 5. Alter.

Итак предлагаю такую систему:

За главный принцип расчета берется прямая степенная зависимость баллов от модуля отклонения прогнозного значение от фактического, отнесенного к стандартному отклонению месяца.
Формула R = 10*e^(-1.5*(a/s))
Где R - результат.
e - экспонента, примено 2,71828.
a - модуль ошибки прогноза(прогнозная температура месяца - фактическая).
s - стандартное отклонение месяца.
Таким образом, базовые баллы распределяются строго в диапазоне от ~0 при большой ошибке до 10 при 0-вой ошибке.
Нет нижнего лимита баллов - даже очень плохо проголосовавшие участники получат балл, но очень мелкий, около 0.1 или даже ниже.
Нет проблемы отрицательных значений.
К данной системе можно и нужно приложить бонус за более раннее голосование. Этот бонус может существенно повлиять на высокие места, для плохого прогноза он почти не будет играть роли, что может сделать "чемпионскую гонку" более непредсказуемой, а также стимулировать участников давать более точный прогноз. К базовому баллу прибавляется 0,1% за каждый час или по 2,4% за каждые сутки до конца голосования. При этом саму продолжительность голосования стоит ограничить 10 сутками.

формула для бонусов за голосования:
Формат даты: 30.07.22 3:30 PM
основная формула*(1+(дата конца голосования-дата прогноза)*0.024)
Образец расчета бонусов за июль и август в прикрепленном файле(спасибо Vasilii).
« Последнее редактирование: 28 Ноябрь 2022, 19:41:13 от Alter »

Онлайн Vasilii

  • Ветеран
  • *****
  • Сообщений: 3416
    • Просмотр профиля
Да, кто не в курсе, в таблицах по месяцам, надо смотреть на колонку правее баллов, в колонке "баллы" там баллы по текущей системе.

Оффлайн Coltan

  • Модератор
  • Ветеран
  • *****
  • Сообщений: 2800
  • Самарская область
    • Просмотр профиля
Баллы за призовые места - неспортивная ересь.

Отрицательные баллы - тоже бред...

И да, по системе 3 учёт времени даётся только для опоздавших, если кто-то из авторов 2 последних систем готов учесть мои предложение, не колеблясь буду голосовать за его систему.

Есть вариант и с учетом досрочных прогнозов

http://www.pogodaiklimat.ru/mf/index.php?topic=1442.msg94621#msg94621
http://www.pogodaiklimat.ru/mf/index.php?topic=1667.msg136811#msg136811 - словарь нововведенных метеорологических терминов

Онлайн Alter

  • Ветеран
  • *****
  • Сообщений: 8454
  • МО, Пушкино
    • Просмотр профиля
Coltan, да, видел.
Чисто баллы не нравятся. Так ведь кто-то, прголосовавший абсолютно наобум в самом начале, всегда будет получать баллы, даже за бред. Баллы нужно высчитывать как доп. проценты к уже начисленнному результату. Так бредовые прогнозы по-прежнему будут улетать в 0. Но если не нравятся возможные сотые по моей системе, можно и округлять до десятых балла, да в экселе все можно сделать и очень быстро. Впрочем, при таком подсчёте минусы недопустимы.

Онлайн Vasilii

  • Ветеран
  • *****
  • Сообщений: 3416
    • Просмотр профиля
Отрицательные баллы - тоже бред...
Это просто визуализация, в 15-бальной системе никаких отрицательных баллов бы не было, а результаты мест абсолютно такими же были. Зато идёт учёт всех игроков, особенно тех которые слишком загнули. А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать" :)

Оффлайн Coltan

  • Модератор
  • Ветеран
  • *****
  • Сообщений: 2800
  • Самарская область
    • Просмотр профиля
Баллы нужно высчитывать как доп. проценты к уже начисленнному результату

И по какой формуле? Или просто речь о средней ошибке в количестве сигм за год?

http://www.pogodaiklimat.ru/mf/index.php?topic=1442.msg94583#msg94583


http://www.pogodaiklimat.ru/mf/index.php?topic=1667.msg136811#msg136811 - словарь нововведенных метеорологических терминов

Онлайн Alter

  • Ветеран
  • *****
  • Сообщений: 8454
  • МО, Пушкино
    • Просмотр профиля
В общем, видимо, я свою систему опубликую, правда пересчитывать тяжело, надо фиксировать время прогноза каждого участника.
За основу я бы взял систему Vasilii или Coltan,  только нафиг бы убрал эту ненужную первую цифру, из которой вычитается ошибка в долях, кратных сигме. А бонус за досрочное голосование я бы проделал в качестве процента скидки на величину ошибки. Все максимально просто и справедливо.
Выше тот, у кого меньше накопленная ошибка за вычетом бонусов за раннюю подачу прогноза.

Оффлайн Coltan

  • Модератор
  • Ветеран
  • *****
  • Сообщений: 2800
  • Самарская область
    • Просмотр профиля
А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать" :)

Бред. Получится что в зимние месяцы с высокой неопределенностью прогнозов (активные циклоны в хвостах, противоборство Атлантики с Сибиряком) может стать выгодно не голосовать вообще.
http://www.pogodaiklimat.ru/mf/index.php?topic=1667.msg136811#msg136811 - словарь нововведенных метеорологических терминов

Онлайн Vasilii

  • Ветеран
  • *****
  • Сообщений: 3416
    • Просмотр профиля
В общем, видимо, я свою систему опубликую, правда пересчитывать тяжело, надо фиксировать время прогноза каждого участника.
За основу я бы взял систему Vasilii или Coltan,  только нафиг бы убрал эту ненужную первую цифру, из которой вычитается ошибка в долях, кратных сигме. А бонус за досрочное голосование я бы проделал в качестве процента скидки на величину ошибки. Все максимально просто и справедливо.
Выше тот, у кого меньше накопленная ошибка за вычетом бонусов за раннюю подачу прогноза.
Вы написали бы, про что вы, я в параллельной теме вас спросил, про бонусы в зависимости от сроков голосования? А тут вы про сотые ещё какие:
Но если не нравятся возможные сотые по моей системе, можно и округлять до десятых балла, да в экселе все можно сделать и очень быстро. Впрочем, при таком подсчёте минусы недопустимы.
В таблицах моих вообще бесконечные дроби, просто автоматом всё до одного знака округляется

Онлайн Vasilii

  • Ветеран
  • *****
  • Сообщений: 3416
    • Просмотр профиля
А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать" :)

Бред. Получится что в зимние месяцы с высокой неопределенностью прогнозов (активные циклоны в хвостах, противоборство Атлантики с Сибиряком) может стать выгодно не голосовать вообще.
Так зимой же и штраф меньше. На этом и построена система.

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать" :)
Бред. Получится что в зимние месяцы с высокой неопределенностью прогнозов (активные циклоны в хвостах, противоборство Атлантики с Сибиряком) может стать выгодно не голосовать вообще.

Так и тем, кто не голосовал, могут и отрицательные баллы начисляться.  Всем раздаются очки худшего результата.  Если, к примеру, Shura отмочил и пролетел на десяток градусов, всем будут щедро отгружено минусов.  Кстати, если хочешь выбить пассивных конкурентов, можно тогда подкупать Shura, чтобы он выдавал прогноз побредовее и побольше минусов отгружалось тем, кто не принял участие. :)
« Последнее редактирование: 27 Ноябрь 2022, 22:30:05 от Kostian »
Shura - горе-прогнозист, позор Метеофорума!

Онлайн Vasilii

  • Ветеран
  • *****
  • Сообщений: 3416
    • Просмотр профиля
А отрицательная визуальность даже лучше, как бы намекает на штраф: "не надо так голосовать" :)
Бред. Получится что в зимние месяцы с высокой неопределенностью прогнозов (активные циклоны в хвостах, противоборство Атлантики с Сибиряком) может стать выгодно не голосовать вообще.

Так и тем, кто не голосовал, могут и отрицательные баллы начисляться.  Всем раздаются очки худшего результата.  Если, к примеру, Shura отмочил и пролетел на десяток градусов, всем будут щедро отгружено минусов.  Кстати, если хочешь выбить пассивных конкурентов, можно тогда подкупать Shura, чтобы он выдавал прогноз побредовее и побольше минусов отгружалось тем, кто не принял участие. :)
Может и астроид упасть на Землю когда-то. Во-первых, минус - это только визуальность, уже 100 раз объяснял, а во-вторых, таблицу же сами смотрели, даже по 10-бальной системе у последних мест одни плюсы. В одном месяце получил минус, в другом плюс, плюсов, как видно больше...
В общем, подустал я что-то спорить, из пустого в порожнее перетирать :), да и смысла особого не вижу. Всё равно голоса пойдут за админа и модератора, даже не скачивая таблицы (это кстати я скачал по одному разу все, больше никто), админу и модератору доверия больше, с натурой человека не поспоришь. Она такова
В моей таблице практически идеально по 10-балльной шкале оценки выстроены. Во всех месяцах от 10 до 0 примерно, ну кроме апреля и июля (что вполне оправдано, где все дали довольно узкий диапазон прогнозов) и провального августа, а ещё за +15.2 в сентябре заслужено -3 балла Шуре, вместо баранки ;D

Онлайн Alter

  • Ветеран
  • *****
  • Сообщений: 8454
  • МО, Пушкино
    • Просмотр профиля
Свой вариант я предложил в соседней теме: без минусов, с той же тройкой, расслоение лидеров и аутсайдеров достаточно высокое. По августу низкие баллы у всех, но у кого-то они практически неотличимы от 0. Прошу добавить в голосование.

Оффлайн Kostian

  • Администратор
  • Ветеран
  • *****
  • Сообщений: 17017
  • Планета Земля
    • Просмотр профиля
    • Погода и климат
Свой вариант я предложил в соседней теме: без минусов, с той же тройкой, расслоение лидеров и аутсайдеров достаточно высокое. По августу низкие баллы у всех, но у кого-то они практически неотличимы от 0. Прошу добавить в голосование.

Добавил.
Shura - горе-прогнозист, позор Метеофорума!

Онлайн Alter

  • Ветеран
  • *****
  • Сообщений: 8454
  • МО, Пушкино
    • Просмотр профиля
А дописывать в заглавие, видимо, уже мне придется.
Ну ладно, я лишней скромностью обделен ;)