Туториалов не видел, но в продвинутых движках для сервинга ML-моделей бандиты есть (для ситуаций, когда тебе какой-то гиперпараметр нужно перебрать на реальных пользователях)
Тут есть реализация, только данные нужно приводить в непонятный формат... Однако мне не понятно по какой метрике можно оценить результат работы алгоритма ....
Очень интересная идея, ведь так можно автоматизировать описание среды. Даже исходники есть. Странно что с даты публикации, в 2018 такой подход, похоже, не применяется 🤔