ROGII неделю как закончился, а разборы продолжают выходить.
Сегодня интересный разбор от начинающего кагглера @dmagog
Я, как и ещё 6000+ команд, искал нефть в скважинах ROGII. За девять дней до конца я опубликовал скучную вещь, которая, как потом оказалось, кому-то помогла не вылелеть из медальной зоны: замер шума публичного лидерборда. Пять решений, четырнадцать перезаливок без какой-либо правки в коде и тезис: не верить рычагу, который не пробил твой собственный шум.
Кто им воспользовался:
– Can, 10-е место. Сделал этот порог для себя жёстким и написал, что во многом поэтому пережил шейкап.
– Will, 131-е. Поднялся с 1887-го и оценивал по этому порогу каждого оставшегося кандидата.
– Vignesh, 198-е. Поднялся на 1649 мест, сослался на ту же работу в своём райтапе.
Кто им не воспользовался? Я.
В последнюю неделю я двигал константы по одной. Каждый шаг давал крошечное улучшение и каждый был честно измерен: движок детерминированный, случайности в нём не осталось. Ощущение полного контроля.
После открытия приватной части я уехал вниз на 2,5 тысячи позиций.
Мы вроде постоянно говорим, что нужно выбрать свою метрику и не обращать на публичный рейтинг внимание, но на практике это так не работает. Потому что, когда ты 2-3 месяца пробираешься сквозь задачу на ощупь, тебе хочется хоть какого-то подтверждения правильности своего выбора. И доска даёт этот отклик быстро.
Совет, который надо в очередной раз посоветовать себе самому: набраться выдержки и оптимизировать те показатели, которые считаешь важными в этой задаче. Даже если из-за них на привате тебя выбросит за борт медального зачёта. Потому что при оптимизации под лидерборд шейкап тебя вышвырнет в любом случае.
Разбор целиком: https://www.kaggle.com/code/georgymamarin/measure-your-noise-floor-graded-by-the-shake-up
Если вам тоже, есть чем поделиться - пишите чат , самое интересное опубликуем в канале.
