D
Это third-party модуль?
Size: a a a
2020 January 21
PG
нет, это стандартный модуль
PG
если Task слишком простой, то бери Flow, это тоже либа от кор тимы, как раз под твой случай
PG
он скрывает все эти генстейджи за Enum-like API
RP
тестовое фанбокса штоле
D
тестовое фанбокса штоле
Да
D
Спасибо за помощь
RP
Task.async_stream/3 более, чем достаточноD
Понял. Ещё раз спасибо за помощь
AB
если Task слишком простой, то бери Flow, это тоже либа от кор тимы, как раз под твой случай
+ за flow. там оперативнее получается попробовать, чем на gen_stage
A
ŹR
Можно вынести преобразование в nif, и запускать ETL на кластере в k8
ŹR
Только 🤦♀️
ŹR
Много ссылок, которые парсятся без io только потеряют от распараллеливания
D
Загрузка данных по ссылкам - не io?
ŹR
Загрузка данных по ссылкам - не io?
IO
ŹR
Я бы взял flow
ŹR
Хотя, меня не взяли в фанбокс, так что я боюсь советовать Ж)
Если бы не сказали что туда тестовое - я бы сча разрулил как правильно
Если бы не сказали что туда тестовое - я бы сча разрулил как правильно
D
Я думаю, жирно для такого будет. Вроде Task отлично подходит.