Size: a a a

2020 June 15

J

Jefferson in Go-go!
Да что-то типа сканнера сайтов. Там чуть ниже проверяется наличие определённого контента в теле ответа
источник

J

Jefferson in Go-go!
У кого какие идеи ещё есть?
источник

SS

Stanislav Sagan in Go-go!
Jefferson
Да что-то типа сканнера сайтов. Там чуть ниже проверяется наличие определённого контента в теле ответа
Скрапера?
источник

J

Jefferson in Go-go!
Stanislav Sagan
Скрапера?
Что это?
источник

с

сонная википедия... in Go-go!
Jefferson
У кого какие идеи ещё есть?
ограничить количество одновременных потоков/подключений
источник

DP

Daniel Podolsky in Go-go!
Jefferson
У кого какие идеи ещё есть?
у меня есть идея - задача сформулиролвана мутно, от того и проблемы с реализацией
источник

с

сонная википедия... in Go-go!
чтоб не выходить за лимиты
источник

J

Jefferson in Go-go!
сонная википедия
ограничить количество одновременных потоков/подключений
Ща попробую
источник

AS

Alexander Shavelev in Go-go!
а зачем тебе N чекингтредов? выглядит люто
источник

SS

Stanislav Sagan in Go-go!
Jefferson
Что это?
Скребок на русском. Если ты данные с сайтиков собираешь. Общепринятое название. Погугли. Не сканер а скрапер правильно
источник

J

Jefferson in Go-go!
Stanislav Sagan
Скребок на русском. Если ты данные с сайтиков собираешь. Общепринятое название. Погугли. Не сканер а скрапер правильно
Спасибо, буду знать
источник

J

Jefferson in Go-go!
Alexander Shavelev
а зачем тебе N чекингтредов? выглядит люто
В одном потоке лучше чекать?)
источник

AS

Alexander Shavelev in Go-go!
Jefferson
В одном потоке лучше чекать?)
1) это не поток
2) то как сделано - хер поймешь что оно делает
источник

J

Jefferson in Go-go!
У меня есть файл:
http://domain.com/my/path/ok.php|<h1>Hello world!</h1>
Мне нужно нужно отправить запросы на каждый домен, если в ответе есть нужный мне контент (<h1>Hello world!</h1>) - записать в файл
источник

J

Jefferson in Go-go!
Походу всё дело в defer было. Боди не всегда закрывался почему-то
источник

J

Jefferson in Go-go!
Но теперь после сканирования 20к таргетов валится с ошибкой
источник

MW

Mr. Wh🦠er in Go-go!
как правильно проверить 443 порт, например, у google.com, открыт ли он или нет
источник

MW

Mr. Wh🦠er in Go-go!
conn, err := tls.DialWithDialer(
     &net.Dialer{
       Timeout: connectTimeout,
     },
     "tcp",
     net.JoinHostPort(host, "443"),
     &tls.Config{},
   )
источник

MW

Mr. Wh🦠er in Go-go!
это не работает
источник

MW

Mr. Wh🦠er in Go-go!
источник