Телеграмм чат группы hadoopusers страница 3596

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2446 membersпожаловаться на группу

2021 May 01

NB

Nikita Bakanchev in Data Engineers

Ну что нибудь такое
Select distinct first_value(ch.channel_id) over (order by case when is_valid=‘TRUE’ THEN 1 ELSE 0 END DESC, priority DESC
rows between unbounded preceding and unbounded following)
From client cl
Join channel ch
On cl.channel_id = cl.channel_id

источник

11:33пожаловаться #1

S

Shadle in Data Engineers

жесть

источник

11:33пожаловаться #2

NB

Nikita Bakanchev in Data Engineers

ну думаю можно и просто через limit и order by )

источник

11:34пожаловаться #3

S

Shadle in Data Engineers

rows between unbounded preceding and unbounded following
о чем это толкует?)

источник

11:36пожаловаться #4

NB

Nikita Bakanchev in Data Engineers

Ну вообще это не обязательно в этом примере по идее, но To obtain aggregation over the whole partition, omit ORDER BY or use ROWS BETWEEN UNBOUNDED PRECEDING AND UNBOUNDED FOLLOWING.
https://www.postgresql.org/docs/13/functions-window.html

PostgreSQL Documentation

9.22. Window Functions

9.22. Window Functions Window functions provide the ability to perform calculations across sets of rows that are related to the current …

источник

11:38пожаловаться #5

S

Shadle in Data Engineers

Круто! помогло спасибо
где можно почитать про это для чайника?

источник

11:57пожаловаться #6

R

Ruslan in Data Engineers

SELECT c.channel_id
FROM clients c
JOIN channels USING(channel_id)
WHERE is_valid = TRUE
ORDER BY Priority DESC
LIMIT 1

источник

14:16пожаловаться #7

2021 May 02

DK

Denis Kozheurov in Data Engineers

Оконка для такого запроса это слишком)

источник

15:17пожаловаться #8

AS

Andrey Smirnov in Data Engineers

Может из статистики, метаданных? Попробуй сложнее запрос сделать.

источник

15:57пожаловаться #9

N

Nikita Blagodarnyy in Data Engineers

Да нет, данные-то реальные

источник

18:37пожаловаться #10

S

Stanislav in Data Engineers

Запрос то сложный? Если обычный, наверняка хайв сервер работает, он же сам умеет простые запросы читать с хдфс без движка

источник

18:49пожаловаться #11

S

Stanislav in Data Engineers

Как ещё добиться 1 секунды на отдачу, не через тез с мром же

источник

18:50пожаловаться #12

AS

Andrey Smirnov in Data Engineers

https://docs.cloudera.com/HDPDocuments/HDP3/HDP-3.0.1/performance-tuning/content/hive_query_result_cache_ms_cache.html

Query result cache and metastore cache

You need to understand the query result cache to enable or disable it for debugging and to configure the memory allocated for the results. You also need to understand how the metadata cache affects data consistency.

источник

21:04пожаловаться #13

2021 May 03

ДН

Дмитрий Негреев... in Data Engineers

Подскажите плиз, где почитать про отличия prestodb и trino? Нашёл что последний пилят его разработчики из Facebook, а кто тогда контрибьютит в prestodb и что вообще нужно юзать?

источник

14:38пожаловаться #14

T

T in Data Engineers

На оборот. Последний пилят чуваки который ушли из фб и сделали starburst

источник

14:40пожаловаться #15

T

T in Data Engineers

https://www.starburst.io/learn/open-source-presto/prestosql-and-prestodb/

The Differences Between Presto and Trino | Starburst

Trino (formerly PrestoSQL) brings value to the masses for fast access to data anywhere. Presto is best for massive internet-sclae companies to reduce resource consumption.

источник

14:40пожаловаться #16

ПБ

Повелитель Бури... in Data Engineers

https://trino.io/blog/2020/12/27/announcing-trino.html

We’re rebranding PrestoSQL as Trino

The software and the community you have come to love and depend on aren’t going anywhere, we are simply renaming.

источник

14:42пожаловаться #17

ДН

Дмитрий Негреев... in Data Engineers

While PrestoDB was built to make queries more efficient for hyper-scale internet companies, like Facebook and Uber, PrestoSQL was built for a much broader variety of customers and use cases.

Это означает что trino делается с фокусом на задачи простых смертных, а в prestodb развитие нацелено на работу с огромными объемами?

источник

14:53пожаловаться #18

T

T in Data Engineers

Вам для каких целей это нужно кстати ? Какие ваши объемы? Где будете запускать?

источник

14:55пожаловаться #19

GP

Grigory Pomadchin in Data Engineers

Трудно сказать, ясно что не поделили чёт

источник

14:56пожаловаться #20