МС
какой то маразм
Size: a a a
2019 August 16
МС
Паблик прокси ?
нет,
https://proxys.io/ru - как раз ipv6
https://proxys.io/ru - как раз ipv6
МС
у них до этого брал, было все норм...
s
https://docs.python.org/3.6/library/shelve.html - говорят, что это лучше.
АП
https://docs.python.org/3.6/library/shelve.html - говорят, что это лучше.
Врут бессовестно.
s
Врут бессовестно.
аргументы?
АП
Шелв это пикл.
Пикл это не для кеширования или хранения в файле
Пикл для доверенной среды взаимодействия, в основном для IPC.
Пикл это исключительно питон онли протокол.
Пикл это байт код стековая машина, по факту RCE из коробки.
Дбм этих недостатков не имеет.
Скулайт тоже.
Пикл это не для кеширования или хранения в файле
Пикл для доверенной среды взаимодействия, в основном для IPC.
Пикл это исключительно питон онли протокол.
Пикл это байт код стековая машина, по факту RCE из коробки.
Дбм этих недостатков не имеет.
Скулайт тоже.
s
Шелв это пикл.
Пикл это не для кеширования или хранения в файле
Пикл для доверенной среды взаимодействия, в основном для IPC.
Пикл это исключительно питон онли протокол.
Пикл это байт код стековая машина, по факту RCE из коробки.
Дбм этих недостатков не имеет.
Скулайт тоже.
Пикл это не для кеширования или хранения в файле
Пикл для доверенной среды взаимодействия, в основном для IPC.
Пикл это исключительно питон онли протокол.
Пикл это байт код стековая машина, по факту RCE из коробки.
Дбм этих недостатков не имеет.
Скулайт тоже.
слушай, у меня дикт, ключ значение - строки.
1 м ключей, я думаю, хватит ли озу для шелва или dbm
1 м ключей, я думаю, хватит ли озу для шелва или dbm
АП
Я вроде написал что шелв не твой выбор.
Дбм всё в памяти не хранит, ровно как и скулайт.
Дбм всё в памяти не хранит, ровно как и скулайт.
i
Ставлю я анаконду. Делаю я анакондой венв, активирую его, потом ставлю скрапю.
Хочу я такой сделать павука, а оно мне такое какое на скрине. Уже правда есть мысль попробовать через pip накатить скрапю в обычный питон. Какие подводные?
conda install -c conda-forge scrapy
Хочу я такой сделать павука, а оно мне такое какое на скрине. Уже правда есть мысль попробовать через pip накатить скрапю в обычный питон. Какие подводные?
У меня такое было, у них в forge скрапи поломаный, надо было просто ставить через pip install scrapy
s
Я вроде написал что шелв не твой выбор.
Дбм всё в памяти не хранит, ровно как и скулайт.
Дбм всё в памяти не хранит, ровно как и скулайт.
просто другой чувак аргументирует, что шелв мой выбор)) но я уже впилил в проект дбм. ну раз он все в памяти не хранит, тогда все будет работать, как часы.
i
timeout, но в винде немного не то - пишут ждет до-последнего, есть альтернатива: https://github.com/cernoch/tuxliketimeout
C
Привет! можете подсказать начинающему в чем кардинальное отличие Scrapy от BS ?
iz
Привет! можете подсказать начинающему в чем кардинальное отличие Scrapy от BS ?
Электросамокат и самокат
C
т.е. BS для мелких задач, а scrapy для чего-то глобального