Size: a a a

Microsoft Azure Developers (Russian User Group)

2019 November 13

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
все строки в ADX токенизированы
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
в описанном случае строка была вида:
... Downloaded_File=<filepath>, File_size=<size> ...
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
тут надо понимать, что в LA может быть немного по-другому
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
в LA абсолютно так же
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
сколько свойств парсилось?
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
3 :)
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
:) ясно
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
у меня под рукой только двухядерный кластер из двух машин
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
1.7млрд строк
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
55s cpu_time
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
лениво поднимать и кешить, но оно линейно масштабируется
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
не надо сравнивать sum с parse
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
совершенно разные функции
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
по стоимости ресурсов и скорости
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
Ща
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
фунции = оператор, если быть более точным
источник

GL

Gleb Lesnikov in Microsoft Azure Developers (Russian User Group)
жду кеша
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
пример парсинга 5 свойств за 1 день
источник

MS

Max Serg in Microsoft Azure Developers (Russian User Group)
источник