YK
Size: a a a
2018 October 15
YK
YK
оу, ну-ка, ну-ка :)
DP
ну там именно браузерная семантика, "пойди туда, найди первую форму на странице, вбей в это поле логин, в это пароль, отправь, на отправленном отгрепай такое-то"
YK
ага, вижу
KR
@Jekhor если речь идёт о парсинге информации со страницы, то это безусловно nokogiri
YK
Я про забор данных
2018 October 16
GK
я тут тоже покопал 115.бел. Вдруг полезно будет: https://github.com/jekhor/115
супер! а по городам кроме Минска (Витебск, Гродно, Солигорск и остальные) -реально ли вытащить данные?
YK
реально, но я не разбирался ещё, как переключать
GK
для Витебска нужно вставить одну строку - city/change/2
screenshot 1: city/change/2 for vitebsk
https://github.com/opendataby/115/issues/7
screenshot 1: city/change/2 for vitebsk
https://github.com/opendataby/115/issues/7
GK
из менее масштабного - смотрю карту geojson - там пару адресов неправильно загеокодились, это баг в координатах, которые сам 115.бел отдаёт? Заявки в Египте и Швеции :)
https://github.com/jekhor/115/blob/master/geojson/2018-9.geojson
https://github.com/jekhor/115/blob/master/geojson/2018-9.geojson
K
Может, там в нашем посольстве что-нибудь сломалось.
YK
для Витебска нужно вставить одну строку - city/change/2
screenshot 1: city/change/2 for vitebsk
https://github.com/opendataby/115/issues/7
screenshot 1: city/change/2 for vitebsk
https://github.com/opendataby/115/issues/7
Добавил смену города в скрипт
YK
из менее масштабного - смотрю карту geojson - там пару адресов неправильно загеокодились, это баг в координатах, которые сам 115.бел отдаёт? Заявки в Египте и Швеции :)
https://github.com/jekhor/115/blob/master/geojson/2018-9.geojson
https://github.com/jekhor/115/blob/master/geojson/2018-9.geojson
да ладно, там для доброй четверти месяцев вообще данные куда-то подевались :)
YK
такие координаты у них в базе, да
GK
да ладно, там для доброй четверти месяцев вообще данные куда-то подевались :)
да-да, поэтому я начал каждый месяц архивировать заявки по Минску, а то потом часть данных исторических никак не найдёшь
GK
Добавил смену города в скрипт
Спасибо! Можно будет попробовать проверить как разные города по темпам роста и разным категориям заявок сравнимы
K
А потом будет ли сайт со шкалой времени (как спутниковые снимки внутри программы Google Earth) ? :)