Size: a a a

Архитектура ИТ-решений

2020 November 07

IA

Igor A in Архитектура ИТ-решений
угу, база же должна утилизировать железо ДЦ максимально выгодно. сеть-проц-диск-память-ssd-hdd. баланс меняется каждые 5-10лет между их скоростями.
ну и данных больше.
каждому юзеру дали по суперкомпьютеру в кармане джинсов.
источник

N

Nikolay in Архитектура ИТ-решений
Вот мы заговорили про mapreduce. Ведь идея его не с нуля была изобретена в Гугле.
источник

p

pragus in Архитектура ИТ-решений
Igor A
угу, база же должна утилизировать железо ДЦ максимально выгодно. сеть-проц-диск-память-ssd-hdd. баланс меняется каждые 5-10лет между их скоростями.
ну и данных больше.
каждому юзеру дали по суперкомпьютеру в кармане джинсов.
Там вполне понятно куда всё двигается. Memory wall всё ближе и ближе.
источник

N

Nikolay in Архитектура ИТ-решений
pragus
Там вполне понятно куда всё двигается. Memory wall всё ближе и ближе.
А куда ?
источник

IA

Igor A in Архитектура ИТ-решений
Nikolay
Вот мы заговорили про mapreduce. Ведь идея его не с нуля была изобретена в Гугле.
ну…
->иметь теорию и иметь production-ready доступные по цене решения - между этими фактами может и 10 лет пройти
paper из computer science= про рисерч нового
engineering = про стоя на плечах научного знания, вписать это все в тесные рамки реальности

только супер способные инженеры с ресурсами могу перевести paper в работающую отскейленную систему.
часто такая система = ядро бизнеса на миллионы или миллиарды $
источник

N

Nikolay in Архитектура ИТ-решений
Igor A
ну…
->иметь теорию и иметь production-ready доступные по цене решения - между этими фактами может и 10 лет пройти
paper из computer science= про рисерч нового
engineering = про стоя на плечах научного знания, вписать это все в тесные рамки реальности

только супер способные инженеры с ресурсами могу перевести paper в работающую отскейленную систему.
часто такая система = ядро бизнеса на миллионы или миллиарды $
Так мы видим ,что Яндекс и мюйл ру смогли.
источник

IA

Igor A in Архитектура ИТ-решений
Яшу никто не ругает) просто говорю что колоночный newSQL = бомба. раньше ее не было. paper-ы где-то были может но рабочего было мало.
источник

N

Nikolay in Архитектура ИТ-решений
Igor A
Яшу никто не ругает) просто говорю что колоночный newSQL = бомба. раньше ее не было. paper-ы где-то были может но рабочего было мало.
Но ведь был kdb с 1993 года !
источник

N

Nikolay in Архитектура ИТ-решений
Почему не было ,если он был с 93 года.
источник

N

Nikolay in Архитектура ИТ-решений
In 1998, Kx Systems released kdb, a database built on the language K written by Arthur Whitney. In 2003, kdb+ was released as a 64-bit version of kdb. In 2004, the kdb+ tick market database framework was released along with kdb+ taq, a loader for the New York Stock Exchange (NYSE) taq data. kdb+ was created by Arthur Whitney, building on his prior work with array languages
источник

p

pragus in Архитектура ИТ-решений
Nikolay
А куда ?
Интерфейсы становятся толще, latency их меньше, а память почти стоит на месте. При этом i/o через эти интерфейсы расходуют memory bandwidth.
источник

IA

Igor A in Архитектура ИТ-решений
Nikolay
In 1998, Kx Systems released kdb, a database built on the language K written by Arthur Whitney. In 2003, kdb+ was released as a 64-bit version of kdb. In 2004, the kdb+ tick market database framework was released along with kdb+ taq, a loader for the New York Stock Exchange (NYSE) taq data. kdb+ was created by Arthur Whitney, building on his prior work with array languages
Ну не верю я этому гуглению. Надо разбираться почему это kdb не было заадопчено в массы. Зло в деталях.
Может эта штука на 1 компе работала в 32бит режиме или еще что.
источник

N

Nikolay in Архитектура ИТ-решений
Column stores or transposed files have been implemented from the early days of DBMS development. TAXIR was the first application of a column-oriented database storage system with focus on information-retrieval in biology[14] in 1969.
источник

N

Nikolay in Архитектура ИТ-решений
69 год
источник

IA

Igor A in Архитектура ИТ-решений
Не верю (ТМ)
Как там индексы были устроены? Если вы уже полезли гуглить
источник

N

Nikolay in Архитектура ИТ-решений
Ну можно сказать , что Вики врёт.
источник

IA

Igor A in Архитектура ИТ-решений
Да нет же. Просто я не уверен что вы шарите хотя бы в clickhouse
источник

IA

Igor A in Архитектура ИТ-решений
И гуглите на ходу)
источник

N

Nikolay in Архитектура ИТ-решений
Доктор вот тоже говорил , что все врут.
источник

IA

Igor A in Архитектура ИТ-решений
Зло в деталях. Надо вникать.
источник