s
простите за оффтоп
Size: a a a
2019 September 02
СК
эпол
ржу
s
эпол
всегда их недолюбливал
СК
не иопл, на форумах разных с движками такие давно
s
они гораздо менее противные
B
они гораздо менее противные
это пиксельное форумное гавно? ы
s
это пиксельное форумное гавно? ы
да
B
извращенец
DB
Готов заплатить за решение вопроса https://stackoverflow.com/questions/57758498/how-to-convert-xml-to-json
CE
Как сайтам детектить парсеры?
AB
Как сайтам детектить парсеры?
По количеству и частоте запросов для начала?
CE
По количеству и частоте запросов для начала?
Легко сымитировать адекватные кол-во и частоту.
AB
Отдавать данные ажахсом, проверив работоспособность JS в браузере?
AB
Но вообще хороший пример здесь - Skyscanner, они даже заморочились и детектят хедлесс хром. Вообще для этого есть отдельные либы, использующие всякие браузерные мелочи и косвеные признаки, чтоб задетектить
AB
Но тут как любая вечная война двух миров, на каждое действие всегда есть противодействие, вопрос лишь в целесообразности затрат
2019 September 03
NK
Всем привет! Подскажите, как правильно(из чего должно состоять) написать ТЗ на разработку парсера? Какие аспекты нужно учесть при разработке? Прокси-листы? Что еще?
Извините, я немного далек от этого.
Извините, я немного далек от этого.
VC
Всем привет! Подскажите, как правильно(из чего должно состоять) написать ТЗ на разработку парсера? Какие аспекты нужно учесть при разработке? Прокси-листы? Что еще?
Извините, я немного далек от этого.
Извините, я немного далек от этого.
ТЗ это техническое задание. Надо описать что он должен делать, любые требования. В т.ч. на каком языке программирования должен быть написан, если это важно.
VC
Если все равно что и как парсить, просто чтобы это называлось парсер можешь ничего не писать :)
NK
Если все равно что и как парсить, просто чтобы это называлось парсер можешь ничего не писать :)
Важно спарсить информацию с нескольких сайтов. Стек технологий не играет большой роли.
VC
Здесь не доска объявлений