Size: a a a

2020 April 01

К

Кирилл in Scrapy
Может быть Андрей подскажет, что там у скрапи какие-то тонкости ресолвинга. Но скорее всего дело не в скрапи
источник

AC

Alexander Chaptykov in Scrapy
вдруг поможет
Traceback (most recent call last):
 File "/usr/local/bin/scrapy", line 10, in <module>
   sys.exit(execute())
 File "/usr/local/lib/python3.7/site-packages/scrapy/cmdline.py", line 150, in execute
   _run_print_help(parser, _run_command, cmd, args, opts)
 File "/usr/local/lib/python3.7/site-packages/scrapy/cmdline.py", line 90, in _run_print_help
   func(*a, **kw)
 File "/usr/local/lib/python3.7/site-packages/scrapy/cmdline.py", line 157, in _run_command
   cmd.run(args, opts)
 File "/usr/local/lib/python3.7/site-packages/scrapy/commands/shell.py", line 74, in run
   shell.start(url=url, redirect=not opts.no_redirect)
 File "/usr/local/lib/python3.7/site-packages/scrapy/shell.py", line 49, in start
   self.fetch(url, spider, redirect=redirect)
 File "/usr/local/lib/python3.7/site-packages/scrapy/shell.py", line 117, in fetch
   reactor, self._schedule, request, spider)
 File "/usr/local/lib/python3.7/site-packages/twisted/internet/threads.py", line 122, in blockingCallFromThread
   result.raiseException()
 File "/usr/local/lib/python3.7/site-packages/twisted/python/failure.py", line 488, in raiseException
   raise self.value.with_traceback(self.tb)
ValueError: invalid hostname: splash_cont
источник

AR

Andrey Rahmatullin in Scrapy
а каким сервисом оно ресолвиться-то должно? не днсом же поди?
источник

AR

Andrey Rahmatullin in Scrapy
каким образом курл его видит?
источник

AC

Alexander Chaptykov in Scrapy
curl выдает полностью хтмл
источник

AR

Andrey Rahmatullin in Scrapy
не, я имею в виду как курл узнал куда идти
источник

AC

Alexander Chaptykov in Scrapy
как он перевел в ip?
источник

AC

Alexander Chaptykov in Scrapy
да я тоже думал над этим, как кстати узнать ip у этого домена?
источник

AC

Alexander Chaptykov in Scrapy
гуглил но так и не нашел ничего подходящего для локал
источник

К

Кирилл in Scrapy
docker network inspect NETWORK
источник

К

Кирилл in Scrapy
там будут все локальные адреса
источник

AC

Alexander Chaptykov in Scrapy
так сети же нет
источник

AR

Andrey Rahmatullin in Scrapy
брр
источник

AC

Alexander Chaptykov in Scrapy
т.е. в композе я не прописывал ее
источник

AR

Andrey Rahmatullin in Scrapy
пинг работает с этим хостнеймом?
источник

К

Кирилл in Scrapy
в смысле нет?
источник

К

Кирилл in Scrapy
она всегда есть, если ты её не прописываешь, она дэфолтная
источник

AC

Alexander Chaptykov in Scrapy
Andrey Rahmatullin
пинг работает с этим хостнеймом?
щас попробую пинг
источник

AC

Alexander Chaptykov in Scrapy
Кирилл
она всегда есть, если ты её не прописываешь, она дэфолтная
а как узнать ее имя?
источник

К

Кирилл in Scrapy
docker network ls
источник