Size: a a a

2019 July 02

i

ildar in Scrapy
Главное чтоб сайт рендерил
источник

I

Ivan in Scrapy
ildar
Главное чтоб сайт рендерил
виснет парсер
источник

I

Ivan in Scrapy
ildar
Ты про srgb и dbus? Он всегда про это плачет
про d-bus
источник

I

Ivan in Scrapy
ildar
Ты про srgb и dbus? Он всегда про это плачет
splash уже по адресу не открывается пишу localhost:8050, днем открывался. это походу началось после того как свет вырубился
источник
2019 July 03

s

serhii in Scrapy
вот полюбому кто-то с тукапчей решал гугл_капчу_2, поделитесь функцией, которой ключ можно скормить и капча пройдет?
источник

s

serhii in Scrapy
headers = {
   'Content-Type': 'application/json;charset=UTF-8',
}

data = '{"currency":"USD"}'

import requests

response = requests.post('URL',
                        headers=headers, data=data)
print(response.text)
print(response.ok)
# Все работает, но переписатьна скрапи не могу
# builtins.ValueError: not enough values to unpack (expected 2, got 1)

return scrapy.FormRequest(
   url='URL',
   method="POST",
   headers=headers,
   formdata=data,
   callback=self.after_check
)

не могу переписать обычный реквестс запрос пост, на скрапи. ну что такое (( где я ошибаюсь?
источник

АН

Алексей Нагорский in Scrapy
А зачем formrequest?
источник

s

serhii in Scrapy
а что нужно?
источник

s

serhii in Scrapy
просто реквест с методом пост?
источник

s

serhii in Scrapy
но, как тогда дату передать?
источник

I

Ivan in Scrapy
кто где прокси берет?
источник

Y

Yurii in Scrapy
Ivan
кто где прокси берет?
Платные?
источник

s

serhii in Scrapy
Ivan
кто где прокси берет?
краулеру покупаю
источник

АН

Алексей Нагорский in Scrapy
serhii
но, как тогда дату передать?
Есть же body
источник

I

Ivan in Scrapy
Yurii
Платные?
главное рабочие, чтоб
источник

s

serhii in Scrapy
боди?
источник

АН

Алексей Нагорский in Scrapy
class scrapy.http.Request(url[, callback, method='GET', headers, body, cookies, meta, encoding='utf-8', priority=0, dont_filter=False, errback, flags])
источник

АН

Алексей Нагорский in Scrapy
body (str or unicode) – the request body. If a unicode is passed, then it’s encoded to str using the encoding passed (which defaults to utf-8). If body is not given, an empty string is stored. Regardless of the type of this argument, the final value stored will be a str (never unicode or None).
источник

I

Ivan in Scrapy
serhii
краулеру покупаю
где покупаете?
источник

s

serhii in Scrapy
Ivan
где покупаете?
Crawlera Scrapinghub, вбей это в поисковик
источник