EE
а виртуальное окружение в образе обязательно? может зависимости глобально потащить тогда?
Size: a a a
2020 November 11
EE
просто полная картинка не складывается
AB
а виртуальное окружение в образе обязательно? может зависимости глобально потащить тогда?
Ну так и сделаем если не выйдет )
EE
даже при условии отсутствия интернета на разворачиваемом устройстве, по-моему можно локальные пекеджи библиотек поставить в виртуальное окружение
EE
по хорошему конечно же инициалировать виртуальное окружение уже на устройстве
AB
даже при условии отсутствия интернета на разворачиваемом устройстве, по-моему можно локальные пекеджи библиотек поставить в виртуальное окружение
На таргете ничего не выполняется
EE
я сталкивался с подобной проблемой, и даже пытался заранее подговить виртуальное окружение как ты) но по другому все решил
EE
это какое то тестовое задание или реальный кейс?))
EE
просто собрать докер имейдж со всем необходимым тоже незя?)
AB
это какое то тестовое задание или реальный кейс?))
Реальный. Я не видел тестовые задания с yocto )
AB
просто собрать докер имейдж со всем необходимым тоже незя?)
Нет, надо yocto
AB
Видимо поставим глобально, спасибо.
2020 November 12
SL
Всем привет!
Надо сделать много миллионов запросов к API, делаю через asyncio и aiohttp. Есть проблема, что не могу сделать больше 500 запросов в секунду. При чем даже разделил запросы, чтобы они шли на 2 разных сервера, и все равно упираюсь в это ограничение. Выглядит, что можно сильно быстрее. В чем может быть проблема?
Надо сделать много миллионов запросов к API, делаю через asyncio и aiohttp. Есть проблема, что не могу сделать больше 500 запросов в секунду. При чем даже разделил запросы, чтобы они шли на 2 разных сервера, и все равно упираюсь в это ограничение. Выглядит, что можно сильно быстрее. В чем может быть проблема?
DA
Всем привет!
Надо сделать много миллионов запросов к API, делаю через asyncio и aiohttp. Есть проблема, что не могу сделать больше 500 запросов в секунду. При чем даже разделил запросы, чтобы они шли на 2 разных сервера, и все равно упираюсь в это ограничение. Выглядит, что можно сильно быстрее. В чем может быть проблема?
Надо сделать много миллионов запросов к API, делаю через asyncio и aiohttp. Есть проблема, что не могу сделать больше 500 запросов в секунду. При чем даже разделил запросы, чтобы они шли на 2 разных сервера, и все равно упираюсь в это ограничение. Выглядит, что можно сильно быстрее. В чем может быть проблема?
Привет! А что за запросы?
DA
API то в силах обрабатывать больше?
SL
Привет! А что за запросы?
Обычные https GET запросы. Если подробнее то к
https://completion.amazon.com/search/complete То есть я уверен, что держит просто колоссальную нагрузку, и мои там 500 в секунду запросов для него точно мелочь.DA
Может быть там ограничение стоит?
SL
Может быть там ограничение стоит?
ограничение на кол-во запросов в секунду с одного IP? Мне кажется, что проблема на моей стороне (потому что я ровно половину запросов стал отправлять по другому адресу (у них есть ещё другой урл с таким сервисом)) и получил всё равно те же 500 запросов
SK
500 слишком круглое число для случайности.
SK
ограничение на кол-во запросов в секунду с одного IP? Мне кажется, что проблема на моей стороне (потому что я ровно половину запросов стал отправлять по другому адресу (у них есть ещё другой урл с таким сервисом)) и получил всё равно те же 500 запросов
Лучше используй пару проксей. Возможно, амазон ограничивает по твоему ип.