MD
И в "опыт взаимодействия" копают. Тоже пока не оч. Если надо, могу дать ссылки на препинты по всем трём темам)
Size: a a a
2021 March 02
N
Ну это потому что недостаточно времени на обучение. Человек подобным вещам учится несколько лет, а от компьютера хотят моментального эффекта
N
Тут либо моделировать реальность максимально правдоподобно исключительно для обучения, либо ждать долго
MD
Ох, давай не будем. GPT-3 учился миллионы человеко лет. Там всё дофига неэффективно
N
Ох, давай не будем. GPT-3 учился миллионы человеко лет. Там всё дофига неэффективно
Нет, не учился
N
Сорри
N
Основная проблема, которую очень сложно решить - это перенос реалистичной модели реальности в компьютер, чтобы сеть могла её воспринимать, как ты окружающий мир. А у нас пока что фоточки и видео, иногда досыпают немного физических параметров
N
Только когда мы научимся решать это, можно будет говорить о том, сколько времени надо будет потратить модели на обучение, и будет ли это быстрее человека на тех архитектурах
MD
Нет, не учился
139 compute power дней, 300 эпох по 126 миллиардов токенов в каждой. За сколько, говоришь, человек впитает такой объем информации?
N
139 compute power дней, 300 эпох по 126 миллиардов токенов в каждой. За сколько, говоришь, человек впитает такой объем информации?
Если информация течёт ниточкой и нерепрезентативна, то это неважно. Garbage in - garbage out
N
Тут не в объёме вопрос, а в качестве
MD
Пока ничего лучше этого неважного подхода не придумали
MD
Приходи к нам, будешь зарабатывать 300кк в наносекунду, продемонстрируешь как тут все неправы
N
Пока ничего лучше этого неважного подхода не придумали
Не осилили, а не придумали. В целом понятно, что надо делать, но это очень дорого и сложно
N
Поэтому и медленно
MD
Приходи приходи, гугл и alibaba дадут примерно бесконечные ресурсы тому, кому всё понятно и надо делать :)
N
Приходи приходи, гугл и alibaba дадут примерно бесконечные ресурсы тому, кому всё понятно и надо делать :)
Не дадут, когда узнают, что выхлоп возможен, самое раннее, лет через 20
N
И это я ещё оптимист
MD
Хорошо быть человеком, которому всё понятно с горизонтом в 20 лет :)
R
Вот кстати интересно было давно. Можно ли обучать не на картинках, а на кусочках видео?
Можно, и вроде как были уже какие-то результаты классификации.
Аля "человек бежит", "собака лает" и т.п
Аля "человек бежит", "собака лает" и т.п