Size: a a a

RL reading group

2020 February 13

VK

Vlad Kurenkov in RL reading group
cydoroga
Переслано от Sergey Ivanov
На всякий случай, итоговая версия презентации.
Класс, спасибо.

А было помимо instrinsic motivation что-то? И обсуждали ли результаты этой статьи https://arxiv.org/abs/1908.02388 ?
источник

SI

Sergey Ivanov in RL reading group
Vlad Kurenkov
Класс, спасибо.

А было помимо instrinsic motivation что-то? И обсуждали ли результаты этой статьи https://arxiv.org/abs/1908.02388 ?
Не-а, всё рассказанное формально относится к внутренней мотивации. Про счётчики - мы от них оттолкнулись в конечных MDP, ещё я, возможно, упоминал вскользь, что можно в принципе в качестве обобщения генеративную модель на повстречавшихся состояниях строить, но на результаты этой статьи не смотрели.
источник
2020 February 14

АК

Андрей Квасов... in RL reading group
Sergey Ivanov
Не-а, всё рассказанное формально относится к внутренней мотивации. Про счётчики - мы от них оттолкнулись в конечных MDP, ещё я, возможно, упоминал вскользь, что можно в принципе в качестве обобщения генеративную модель на повстречавшихся состояниях строить, но на результаты этой статьи не смотрели.
А про упоминавшуюся вскольз статью, можете прислать ссылку?
источник

SI

Sergey Ivanov in RL reading group
Про прямое обобщение счётчиков обычно ссылаются на вот эту статью
https://arxiv.org/pdf/1606.01868.pdf
хотя она скорее про оценку плотности, нежели прям про генеративную модель (нам, конечно, в первую очередь интересна плотность). Если я правильно понимаю, то вот статью, на которые выше ссылку кинули
https://arxiv.org/abs/1908.02388
о том, как этот подход ещё побольше на Атари позапускали и сравнили с алгоритмами из рассказа.
источник

SG

Sergey Golovanov in RL reading group
Когда и где планируете видео опубликовать?
источник

DM

Darya Moroz in RL reading group
Sergey Golovanov
Когда и где планируете видео опубликовать?
Здесь, как выложим, сслыку пришлем
https://www.youtube.com/channel/UCJ-6K2HGA0hpQytlSM7FBVQ
источник

SG

Sergey Golovanov in RL reading group
Спасибо
источник
2020 February 16

GZ

Grigory Z in RL reading group
Переслано от Grigory Z
Пример, когда обучение подкрепилось не совсем так, как ты ожидал)
источник

SA

See All in RL reading group
источник
2020 February 17

NK

ID:313536899 in RL reading group
@Shmuma рад тебя здесь видеть 🤟🏼
источник

NK

ID:313536899 in RL reading group
книга у тебя отличная получилась https://www.goodreads.com/book/show/37773354-deep-reinforcement-learning-hands-on
источник

S

Shmuma in RL reading group
ID:313536899
@Shmuma рад тебя здесь видеть 🤟🏼
Спасибо! Второе издание уже есть, кстати :)
источник

NK

ID:313536899 in RL reading group
Shmuma
Спасибо! Второе издание уже есть, кстати :)
Я его и имею в виду)
источник

NK

ID:313536899 in RL reading group
Впервые за долгое время встретил книгу, которую захотелось купить, а не скачать с либрусека.
источник

S

Shmuma in RL reading group
Я первое издание собственноручно залил на twirpx, так правообладатели закрыли, собаки :)
источник

NK

ID:313536899 in RL reading group
👍
источник

NK

ID:313536899 in RL reading group
Вообще я бы продавал не книгу, а свои консультации. То есть прямо в книжке в каждой главе внаглую пишешь: консультация по этой теме стоит $100/h, а вот по той — $50/h, потому что экспертности поменьше, и я не на bleeding edge of current research.
источник
2020 February 18

NA

Nikita Antonov in RL reading group
@Shmuma А на русском обещают выпустить какое из изданий?
источник

NK

ID:313536899 in RL reading group
Just in case you missed https://spinningup.openai.com/
Somewhat stuck in 2018, but contains not immediately obvious insights on the research and algos
источник

S

Shmuma in RL reading group
Nikita Antonov
@Shmuma А на русском обещают выпустить какое из изданий?
Первое. Но издательство (питер) уже полгода мусолят с переводом. Присылают на вычитку какую-то хрень, я ее заворачиваю, они снова присылают. В таком режиме с ноября перевели 2/3 книги, к лету закончат, видимо
источник