В col2 находятся поля в которых список словарей. Как их разобрать чтобы df имел вот такой вид

Только нужно reset_index() сначала сделать, чтобы phrase перестала быть индексной колонкой и стала обычной

Колонка df['b'] - это колонка, которая содержит список словарей. Колонка df['a'] - это колонка, которая содержит phrase

thnx, пошел пробовать

Здравствуйте!
Может не в тему чата. Нужна система обработки данных зависящих друг от друга, типа DAG в airflow. Например, нужно извлечь таблицу, как-то сагрегировать поля по определенным измерениям, передать агрегацию дальше, сагрегировать по другим измерениям и т.д. Т.е. выстаивается такой граф зависимостей. Сложность в том, что нужно как-то по простому (декларативно) описывать измерения и агрегации по полям (сумма, среднее, средневзвешенное, зависимости от собственных функций).
Кто-нибудь сталкивался с подобными\похожими системами\фреймворками?

DVC?

а расшифровку можно узнать?

самое вменяемое в выдаче - https://dvc.org/

ага

спасибо! изучу

Единственная статья по теме, которую я нашел, идеально описывает то, что мне в итоге надо реализовать http://www.incon.ru/services/model_sistemi_otchetnosti/. Может тут есть ее разработчики или сотрудники этой компании, а то у меня есть пару вопросов :)

чем dvc не ок?

насколько я понял, она слишком специфична для ML, единственное, что в ней есть мне нужного - это dataflow и pipilines, но систем, реализующих это много + у них куча других плюшек (да тот же airflow). Например, я пока для себя выбрал как основу https://github.com/PrefectHQ/prefect

к сожалению не вышло, но спасибо за помощь!

Получил ошибку "ValueError: DataFrame constructor not properly called!", не справился с ней.
Ситуацию разрешил по другому, разобрал исходные словари и слепил из них список словарей с нужными айтемами, а из этого уже легко в нужном виде в df лепится.

Добрый день. Кто сталкивался анаконда при запуске ноутбука автоматически стала его открывать в IE. Раньше все в хроме открывалось, Как восстановить ?

Спасибо. Аж стыдно стало )