Придумал, как можно доразмечать большой датасет с помощью маленького размеченного, но сам так еще не делал (придумал по дороге с завтрака)
Обучаем на маленьком размеченном датасете модель А,
размечаем моделью А большой неразмеченный датасет.
Затем учим на разметке большого датасета модель B и скорим ей маленький датасет.
Смотрим, в каких местах сильно ошиблись. Для этих точек считаем "объектную. важность" - те смотрим, какие из точек большого датасета обучили модель B плохому. Их переразмечаем руками, повторяем.

Объектную важность умеет считать, например, CatBoost https://catboost.ai/docs/en/concepts/ostr