Size: a a a

Python для анализа данных

2019 July 14

AK

Anthony Karpov in Python для анализа данных
Владислав М
ну вот в закладках нетология на 1,5 года полный курс. 200к стоит, пока думаю. И смотрю на ютубе от Computer Science Center вспоминая математику.
Гуглите open data science. И опыт постоянный. Лучше получать даже по 20 тыс. в месяц, чем отдавать 200 за полтора года
источник

РЧ

Руслан Черненко... in Python для анализа данных
Вчера обнаружил, что если открывать 0,5 гб csv в jupyter через pd.read_csv, то ругается на нехватку памяти, а в интерпретаторе спокойно открывает.
источник

РЧ

Руслан Черненко... in Python для анализа данных
С чем это может быть связано? Кто-то в курсе?
источник

VS

Vadim Shatalov in Python для анализа данных
Руслан Черненко
С чем это может быть связано? Кто-то в курсе?
Не могло быт ситуационно - при одном запуске в памяти было много чего другого, во втором поменьше?
источник

РЧ

Руслан Черненко... in Python для анализа данных
Пробовал на разных машинах
источник

VS

Vadim Shatalov in Python для анализа данных
Руслан Черненко
Пробовал на разных машинах
Лучше на одной и той же, и проверь в обоих случаях что пандас запускается из одного и того же окружения
источник

A

Anastasia in Python для анализа данных
Руслан Черненко
Вчера обнаружил, что если открывать 0,5 гб csv в jupyter через pd.read_csv, то ругается на нехватку памяти, а в интерпретаторе спокойно открывает.
Я через chunks делала, помогло)
источник

A

Anastasia in Python для анализа данных
Но у меня даже в интерпретаторе не открывал тогда
источник

РЧ

Руслан Черненко... in Python для анализа данных
Ну вот пока это просто наблюдение. Одна машина на 8, другая на 4 оперативки и результат один и тот же с одним и тем же кодом.
источник

M

M 🌗🌘🌑🌒🌓... in Python для анализа данных
а в момент исполнения кода сколько у них памяти свободной и какой размер чанка?
источник

M

M 🌗🌘🌑🌒🌓... in Python для анализа данных
потому что не каждый чанк влезет.
источник

e

eolay in Python для анализа данных
источник

e

eolay in Python для анализа данных
книжка по веб-скрапингу на питоне - кто-то выше интересовался темой
источник

M

MaxYe in Python для анализа данных
Anthony Karpov
Гуглите open data science. И опыт постоянный. Лучше получать даже по 20 тыс. в месяц, чем отдавать 200 за полтора года
А можете чуть больше рассказать что там? Участвуете?
источник

РЧ

Руслан Черненко... in Python для анализа данных
eolay
книжка по веб-скрапингу на питоне - кто-то выше интересовался темой
Спасибо! Не просил, но в тему 👍
источник
2019 July 15

sn

serg n. in Python для анализа данных
а часто ли для данных применяют z-стандартизацию?
источник

sn

serg n. in Python для анализа данных
для визуализации я имею в виду. Или это преобразование транзитное, и оно необходимо для последующих этапов?
источник

P

Peter in Python для анализа данных
serg n.
а часто ли для данных применяют z-стандартизацию?
помоему при построении qqplot или рассчета шапиро-уилка, но это промежуточный этап и он вшит во встроенные методы
источник

P

Peter in Python для анализа данных
в питоне/р
источник

sn

serg n. in Python для анализа данных
понял. спасибо. т.е. особо заморачиваться с его визуализацией нет смысла, толку никакого от того что ты там увидишь распределение по сигмам
источник