PT
Size: a a a
2019 November 12
DR
спасибо
DR
интересно, что в 2012 сайт был vybory2012, а сейчас vybary2019
AB
vybory2019.by тоже зареган, но DNS сервера у него другие
2019 November 13
AB
Итак, первые побочные эффекты автоматического парсера. Обнаружено 5 выбывших кандитатов - https://github.com/opendataby/vybary2019/commit/c751f0144995772a25485e8f0ad11adf92c956ae
AB
Интересно, за них вчера и сегодня успели проголосовать уже? Если да, то куда эти голоса пошли..
AB
Интересно, сколько кого проберётся.
2019 November 14
AB
Однако, оказывается там есть карты. Но они не отображаются. То ли программистам недоплатили, то ли с копирайтом недоговорились.
GK
карта похожа на государственного производства подложку, Белгеодезиякартография?
AB
Скоррее всего.
K
В прошлые годы была карта Белкартографии.
AB
Итаг, сегодня в 18:30 в Малиновом хакерспейсе как минимум соберусь я один, чтобы попрактиковаться в сравнении трёх независимых датасетов и анализе их на pandas. Кроме подчистки данных с помощью скрипта, есть задача вытягивать из полнотекстового описания дату рождения, доход, компанию и является ли она гос. или нет. Можно ещё определение пола прикрутить, если кто знает или умеет как. Если будет совсем непонятно, буду читать доки по pandas, а так можем замутить мастеркласс (или мастерфейл) по работе с данными для всех желающих.
KZ
Вот эта библиотека должна уметь в такие штуки https://github.com/natasha/natasha
AB
Да, она есть в плане, но там на мове описания, может не справиться.
AB
Вообще мне кажется задача достаточно простая для тех, кто пайплайны из нейронок собирает.
GK
Итаг, сегодня в 18:30 в Малиновом хакерспейсе как минимум соберусь я один, чтобы попрактиковаться в сравнении трёх независимых датасетов и анализе их на pandas. Кроме подчистки данных с помощью скрипта, есть задача вытягивать из полнотекстового описания дату рождения, доход, компанию и является ли она гос. или нет. Можно ещё определение пола прикрутить, если кто знает или умеет как. Если будет совсем непонятно, буду читать доки по pandas, а так можем замутить мастеркласс (или мастерфейл) по работе с данными для всех желающих.
определение пола обычно я делал по имени. Вот список имён с википедии мужских и женских -
https://ru.wikipedia.org/wiki/%D0%9A%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D1%8F:%D0%9C%D1%83%D0%B6%D1%81%D0%BA%D0%B8%D0%B5_%D0%B8%D0%BC%D0%B5%D0%BD%D0%B0
https://ru.wikipedia.org/wiki/%D0%9A%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D1%8F:%D0%96%D0%B5%D0%BD%D1%81%D0%BA%D0%B8%D0%B5_%D0%B8%D0%BC%D0%B5%D0%BD%D0%B0
https://ru.wikipedia.org/wiki/%D0%9A%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D1%8F:%D0%9C%D1%83%D0%B6%D1%81%D0%BA%D0%B8%D0%B5_%D0%B8%D0%BC%D0%B5%D0%BD%D0%B0
https://ru.wikipedia.org/wiki/%D0%9A%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D1%8F:%D0%96%D0%B5%D0%BD%D1%81%D0%BA%D0%B8%D0%B5_%D0%B8%D0%BC%D0%B5%D0%BD%D0%B0
AB
А есть конфликты? Типа Саша и Саша? Как много таких?
GK
в полных паспортных именах не встречал конфликтов. У нас не Германия, где Саша - это имя по паспорту, вроде :)