В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Qlik BI chat

1696 membersпожаловаться на группу
2021 July 05

МГ

Михаил Галушкин... in Qlik BI chat
А у кого есть опыт такой большой загрузки вообще? 2 млрд строк в итоге нужно подгрузить. Телеком.
источник
20:52пожаловаться#1

IK

Igor Kozlov in Qlik BI chat
Если бы ломал файервол или антивирус тогда ломал бы и маленькие таблицы, но с маленькими все ок
источник
20:53пожаловаться#2

AK

Anton Klyuge, Servie... in Qlik BI chat
А если частями грузить?
источник
20:55пожаловаться#3

VN

V N in Qlik BI chat
Не факт: https://asktom.oracle.com/pls/apex/f?p=100:11:::NO::P11_QUESTION_ID:9539262200346176966
Oracle
How to prevent some firewall from terminating SQL*Plus sessions with long-running statements? - Ask TOM
How to prevent some firewall from terminating SQL*Plus sessions with long-running statements? Hi Tom,In know that I should talk to the firewall admins to get things fixed but this is - unfortunately - out of scope.So here we go: We have a database running on some Linux server and some client application running on some W2k16 server. The machines are on separate subnets and between th
источник
20:55пожаловаться#4

МГ

Михаил Галушкин... in Qlik BI chat
Не вариант, слишком много частей
источник
20:56пожаловаться#5

VN

V N in Qlik BI chat
Вообще обычно тогда экстракция частями (иногда в несколько потоков) потом загрузка из qvd в модель
источник
20:56пожаловаться#6

AK

Anton Klyuge, Servie... in Qlik BI chat
Ну если там есть по годам разбивка в данных, в цикл загнать и пусть выгружается)
источник
20:56пожаловаться#7

МГ

Михаил Галушкин... in Qlik BI chat
Можно подумать в каком-то виде, поизвращаться помесячно. Там год.
источник
20:58пожаловаться#8

VN

V N in Qlik BI chat
А вообще 2 ярда это потолок теоретический ( насколько я понимаю)…
источник
20:58пожаловаться#9

МГ

Михаил Галушкин... in Qlik BI chat
Нас вендор рекомендовал как раз грузить целиком на первом слое, без предобработки на стороне СУБД
источник
21:00пожаловаться#10

VN

V N in Qlik BI chat
Вендор это кликтех или кто-то из внедренцев? Скорее всего имели ввиду что запрос должен быть максимально простым без функций доп обработки данных, это не про отборы.
источник
21:02пожаловаться#11

IK

Igor Kozlov in Qlik BI chat
NUM_ROWS  260927578 сейчас грузим маленькую табличку вот с таким кол-вом строк
NUM_ROWS  1387032936 далее нужно вот такую грузить 133Гб+
Вот при прогрузке целиком падаем на idle_time
источник
21:02пожаловаться#12

AK

Anton Klyuge, Servie... in Qlik BI chat
Ну я бы не согласился с такими рекомендациями)
источник
21:02пожаловаться#13

МГ

Михаил Галушкин... in Qlik BI chat
Продажники
источник
21:02пожаловаться#14

VN

V N in Qlik BI chat
Клика или другие?
источник
21:03пожаловаться#15

МГ

Михаил Галушкин... in Qlik BI chat
Продажники Клика, официалы
источник
21:03пожаловаться#16

VN

V N in Qlik BI chat
Ок
источник
21:03пожаловаться#17

VN

V N in Qlik BI chat
Сергей , подскажите пожалуйста, что могли иметь ввиду ваши коллеги?
источник
21:04пожаловаться#18

МГ

Михаил Галушкин... in Qlik BI chat
Нам приводили в пример опыт Газпромнефти и объемы по x5. В итоге сошлись на трёхслойной загрузке, на первом слое экстракция в чистом виде исходных данных
источник
21:05пожаловаться#19

VN

V N in Qlik BI chat
Ну хз… Я бы на таких объемах все таки хотяб помесячно работал иначе оно и на диск сохраняться будет хз как…
источник
21:06пожаловаться#20