Ребят, делаю лабу по actor critic и возник вопрос. Чем advantage отличается от того, что в скобках у value loss? Как я понял, advantage мы считаем как кумулятивный ревард минус V(s), предсказанное нейронкой. А value loss как r + V(s+1) - V(s), где V() - предсказанная нейронкой V функция. Я ничего не путаю?