I
боюсь, чего-то более совершенного и универсального предложить не могу
Size: a a a
2021 June 21
2021 June 22
D•
Тут коллеги интересуются
D•
Переслано от Артем
Ребят, всем привет! Помогите советом)
У меня есть большой датасет на 100 гб фотографий, как мне обучить модель, если у меня даже не хватает памяти закинуть их на гугл диск?)
У меня есть большой датасет на 100 гб фотографий, как мне обучить модель, если у меня даже не хватает памяти закинуть их на гугл диск?)
D•
Какие советы можно дать?
VC
2 евро стоит 100 гигов
DK
Купить подписку?)
I
А что значит "не хватает памяти"? Некуда их записать, что гуглодиск из к себе забрал или не хватает RAM и клиент гуглодиска падает?
KP
Обязательно использовать гугл ему?
D•
Сложно сказать. Советы дал по расширению подписки пока что
2021 June 23
A
Доброй ночи! Не могли бы подсказать литературу по временным рядам? конкретно по предсказанию спроса
2021 June 24
D•
Isbn: 978-5-907365-04-9
И вторая 978-5-397-01541-7
И вторая 978-5-397-01541-7
D•
Одни из лучших
A
Спасибо!
A
Запросил
YD
всім привіт, після джоіну двох csv файлі, намагаюсь відсортувати отриманий датафрейм (37 тисяч записів) за конкретним полем created, коли юзаю пандас то все відбувається дуже швидко, коли хочу заюзати spark, крутиться хвилин 20, може я щось роблю не так ?
spark
pandas =
якщо хтось знає допоможіть пліз, гарного дня)
spark
df_sorted = df.orderBy("created", ascending=True).collect()pandas =
df_sorted = df.sort_values(by=["created"])
якщо хтось знає допоможіть пліз, гарного дня)
YD
хоча на меншому файлі відпрацювало нормально, мабуть тачка не тягне
DV
То есть послав нахрен английский (международный блэт), русский язык, ты решил написать на украинском?
VC
Labdien, paldies par jautājumu, diemžēl, nevaru palīdzēt, jo nekad nestrādāju ar Sparku, bet varētu būt, ka Jūs varat šo ieguglēt.
YD
Так, можна було налаштувати, так я і зробив власне, https://stackoverflow.com/questions/45704156/what-is-the-difference-between-spark-sql-shuffle-partitions-and-spark-default-pa використавши це
