нейронки на основе кремния считают со скоростью кремния.
это ложный аргумент.
во много раз медленнее, поскольку ширпотреб процы выполняют команду за много тактов, чтобы эмулировать нейрон требуется много логических элементов, которые требуют много вычислительных ресурсов.
если мы говорим не о CUDA (там тоже есть бутылочное горлышко в виде загрузки/выгрузки данных и ограниченной памяти) или о нейропроцессорах, где жёсткая архитектура.
1.5 млрд. признаков впечатлили, но
единственное умение GPT-2, обученного на восьми миллионах текстовых веб-страниц, — предсказывать последующее слово.
для agi маловато умений.