Size: a a a

2019 June 19

GP

Grigory Pomadchin in Data Engineers
Aliaksandr Kokhna
спасибо, чет я не поудумал что гуглить нужно
да, есть штука, называется поиск по ключевым словам
источник

GP

Grigory Pomadchin in Data Engineers
ну платно не подходит уже ТС
источник

AZ

Anton Zadorozhniy in Data Engineers
Grigory Pomadchin
не особо дают
сам свечку не держал, но коллеги из карлова говорили что условно бесплатно получили что им было нужно
источник

GP

Grigory Pomadchin in Data Engineers
Anton Zadorozhniy
сам свечку не держал, но коллеги из карлова говорили что условно бесплатно получили что им было нужно
это интересно
источник

GP

Grigory Pomadchin in Data Engineers
а в каком формате? как csv файлы (последняя ссылка) или как опенвезер (апи)
источник

GP

Grigory Pomadchin in Data Engineers
или как тифы с погодой
источник

GP

Grigory Pomadchin in Data Engineers
есть еще какие-то данные в открытом доступе у NOAA; но я не смотрел насоклько там все удобно и актуально https://www.wpc.ncep.noaa.gov/dwm/dwm.shtml
источник

ВФ

Виталий Филючков in Data Engineers
источник

AZ

Anton Zadorozhniy in Data Engineers
Grigory Pomadchin
а в каком формате? как csv файлы (последняя ссылка) или как опенвезер (апи)
это я могу уточнить, как из отпуска вернусь)
источник

AZ

Anton Zadorozhniy in Data Engineers
вообще в ODS с такими вопросами надо, там точно все знают что и как
источник

GP

Grigory Pomadchin in Data Engineers
можно еще https://t.me/gislab (но я не знаю на сколько это будет не оффтоп там)
источник

GP

Grigory Pomadchin in Data Engineers
Anton Zadorozhniy
вообще в ODS с такими вопросами надо, там точно все знают что и как
@sQud_AK https://ods.ai/ канал #datasets
источник

EV

Eduard Vlasov in Data Engineers
Aliaksandr Kokhna
добрый день, подскажите где взять базу погоды по городам ?
Вдруг еще эта штука пригодится
https://toolbox.google.com/datasetsearch
источник

B

Beaal in Data Engineers
Aliaksandr Kokhna
хочется необычно
мир - https://www.wunderground.com , выбираешь город, выбираешь вкладку history
или история погоды в России в готовых эксельках https://rp5.ru/
источник

AK

Aliaksandr Kokhna in Data Engineers
Большое спасибо, вы лучше чем гугл
источник
2019 June 20

神風 in Data Engineers
Всем привет. Пишу из спарка батчами в hbase.не подскажете где подкрутить, чтобы регион серверы не вылетали по oom?
источник

S

Stanislav in Data Engineers
больше регионов мб сделать
источник

神風 in Data Engineers
Stanislav
больше регионов мб сделать
Нельзя. Есть ощущение, что падает регион от того, что сразу несколько экзекутеров пишут в один регион сервер. Установил heap на регион сервере в 10гб, пока не падает. Не многовато ли?
источник

M

Mironiken in Data Engineers
Не, вполне реальный хип
источник

S

Stanislav in Data Engineers
это небольшой даже хип
источник