NK
а "попилить" - это что в себя включает, извините? )))
Size: a a a
2017 February 09
AR
ну, там собрать, перевести в машиночитаемый формат, почистить, визуализировать, вот это все
NK
клёво! только я парсить не умею )
AR
ну, что ж делать, научим)
NK
!
LD
А что за история с учереждениями науки?
AR
вот, например, https://www.import.io/ - код писать не нужно, что накладывает некаторые ограничения, плюс они за последний код стали совсем уж жадными и сильно ограничили возможности бесплатного аккаунта, но достаточно удобная штука для простых случаев
OI
О, класс) а для сильно нагруженных сайтов вроде avito он подойдет?)
AR
есть еще портия, но лично я ее недолюбливаю и регулярно обзываю шайтан-машиной, но зато они опэн сорс https://scrapinghub.com/
AR
О, класс) а для сильно нагруженных сайтов вроде avito он подойдет?)
нужно пробовать, сильно зависит, что конкретно нужно собрать
OI
Ок, спасибо)
AR
А что за история с учереждениями науки?
в фейсбучек такой запрос пришел: для создания научного проекта, связанного с Беларусью, ищется набор данных в машиночитаемом виде белорусских научных организаций. Сейчас есть только список ВУЗов на сайте минобра в таблице doc и Каталог научных организаций в pdf 2013 года.
AR
прошу прощенья https://opendata.by/dataset/1379
AR
если бы таких запросов собрать к дню открытых данных, мне кажется, получилось бы и интересно, и полезно. что думаете?
AR
тут, конечно, главный вопрос, где их искать)
NK
любая организация (государственная, общественная или коммерческая) должна иметь УНП и быть зарегистрированной минюстом. стало быть, либо сайт минюста (там пдф) или какие-нибудь каталоги справочники типа https://kartoteka.by/ - но они как правило платные
NK
у коллег есть большой интерес к такого рода картотеке общественных организаций
OI
У картотеки около 10 запросов возможны
AR
про искать, я имела в виду "некоммерческих" владельцев данных, которым нужна помощь