Size: a a a

2021 January 16

A

Andrii in Scrapy
?
источник

MM

Marat Mkhitaryan in Scrapy
x = R * cos(lat) * cos(lon)

y = R * cos(lat) * sin(lon)

z = R *sin(lat)
походу это
источник

MM

Marat Mkhitaryan in Scrapy
Marat Mkhitaryan
Как можно прикрутить питон, чтобы на вход давал lat long и выходили эти x y z? Нужна же библиотека для преобразования  lat long в x y z? Через какую питон библиотеку такое можно провернуть?
еще говорят "сетка натянута на гуглошарик" это как?
источник

A

Andrii in Scrapy
Marat Mkhitaryan
еще говорят "сетка натянута на гуглошарик" это как?
ты поссорился с Лари Пейдж и он тебя забанил?
источник
2021 January 17

AP

Alex Python in Scrapy
народ, можно ли как то увеличить  Макс. размер get api запроса больше 2000 символов ? я юзаю requests, или это ограничение никак не изменить ?
источник

S

SoHard 🎄 in Scrapy
Alex Python
народ, можно ли как то увеличить  Макс. размер get api запроса больше 2000 символов ? я юзаю requests, или это ограничение никак не изменить ?
Что такое get api запрос?
источник

AP

Alex Python in Scrapy
SoHard 🎄
Что такое get api запрос?
обычный get,  но по api сайта
источник

AP

Alex Python in Scrapy
в api можно указывать кучу параметров, в том числе одновременный парсинг разных данных
источник

М

Максим in Scrapy
Всем привет,
У меня появилась проблема. Я пытаюсь скачать по ссылке файл, но что-то идет не так и он не полностью загружается.
вот код:
os.system(f'wget -P /tmp/ -O data.csv https://data.gov.il/dataset/ica_companies/resource/f004176c-b85f-4542-8901-7b3176f9a054/download/f004176c-b85f-4542-8901-7b3176f9a054.csv')
источник

AP

Alex Python in Scrapy
ладно, уже не актуально ) у сайта все же есть ограничентн на количество параметров ) хоть в faq api и не указано
источник

М

Максим in Scrapy
Максим
Всем привет,
У меня появилась проблема. Я пытаюсь скачать по ссылке файл, но что-то идет не так и он не полностью загружается.
вот код:
os.system(f'wget -P /tmp/ -O data.csv https://data.gov.il/dataset/ica_companies/resource/f004176c-b85f-4542-8901-7b3176f9a054/download/f004176c-b85f-4542-8901-7b3176f9a054.csv')
вывод:
Распознаётся data.gov.il (data.gov.il)… 35.186.245.19
Подключение к data.gov.il (data.gov.il)|35.186.245.19|:443... соединение установлено.
HTTP-запрос отправлен. Ожидание ответа… 200 OK
Длина: нет данных [text/html]
Сохранение в: «f004176c-b85f-4542-8901-7b3176f9a054.csv»

    0K .......... .......... .......... .......... ..........  668K
   50K .......... .......... .......... .......... ........   1,45M=0,1s

2021-01-17 10:07:10 (916 KB/s) - «f004176c-b85f-4542-8901-7b3176f9a054.csv» сохранён [101059]
источник

М

Максим in Scrapy
дело в том, что он не полностью скачивается
источник

S

SoHard 🎄 in Scrapy
Alex Python
в api можно указывать кучу параметров, в том числе одновременный парсинг разных данных
ну с таким описанием можно только господа-бога спросить
источник

S

SoHard 🎄 in Scrapy
Максим
дело в том, что он не полностью скачивается
попробуй не wget-ом скачать, а реквестами или еще чем
источник

М

Максим in Scrapy
SoHard 🎄
попробуй не wget-ом скачать, а реквестами или еще чем
и реквест не помогает
источник

М

Максим in Scrapy
он получает html код
источник

S

SoHard 🎄 in Scrapy
Максим
он получает html код
источник

М

Максим in Scrapy
только я не понимаю почему не могу его получить через requests
источник

М

Максим in Scrapy
response = requests.get(input_url)

reader = csv.reader(response.content, delimiter=",", quotechar='"')
источник

М

Максим in Scrapy
получается такое содержание ответа
источник