Думаю там есть глубина какая то, ну или автор сайта подсказал гуглу (robots.txt и т.п.) чтобы этот раздел не парсили (чтобы случайно бан для всего сайта не заработать)
Думаю там есть глубина какая то, ну или автор сайта подсказал гуглу (robots.txt и т.п.) чтобы этот раздел не парсили (чтобы случайно бан для всего сайта не заработать)
Кстати роботс.тхт защищает от индексации, но не останавливает изучение всех ссылок краулерами. А за что тут банить по вашему?
гайз, тут, я знаю, биткоин максималисты водятся, вопрос - будет ли что то подобное дефи на битке? коллотеральные долги, дексы и пр? а то биток не работает!