Вообще, вы можете использовать тест сплит в качестве евалсета, если у вас есть возможность собрать ещё данных и потом на них протестировать score вашей модели
это да, но идея была воспользоваться оптимизированным "разбивщиком", применяемым в randomized_search,
т.е. я хотел на обучение скормить весь имеющийся датасет, который бы внутри rs перед фитом бы разбился на нужные подмножества