например вот

вот нашёл ещё

да их много

± все про одно и тоже

как чистить тексты + какие-то базовые модели

Добрый день! Подскажите, влияет ли дисбаланс классов (в моем случае 1:3) при использвании берта для бинарной классификации?

Так, если я не ошибаюсь, не берт выполняет классификацию, а слои после него.

Тоже интересно

Я нашла всякие вчера)даже мне доходчивые)  as-ideas.github.io/headliner/examples/bert_example/ ещё  github.com/as-ideas/headliner и ещё с трансформерами мне этот понравился,прямо в колабе https://colab.research.google.com/drive/1H2u5lUIr4HIiZu5pPKfxgTxhb1zMhF8C?usp=sharing

Спасибо!

Принципиально BERT? Есть опыт с Т5 моделью.
Там достаточно к тексту в самом начале добавить summarize:

как в любой другой классификации, влияет

Просто мне не очень понравились результаты. А у тебя нормальные получились? Он у меня почему- то сделать экстрэктив,поэтому надеюсь на берт. Ещё понравился пегасус. Вот просто супер. Но я всё равно хочу ещё с Берт попытаться. Мучаюсь с итератором.держу в курсе)

Привет! Я искала подобную связку в spaCy. Я делала с английским, но у них в третьей версии есть и русская модель, которая основывается на векторах и датасете, разработанных в проекте Наташа. Вот таким образом я искала ингредиенты при помощи Phrase Matcher. Надеюсь, будет полезным.

# List of some common ingredients
ingredients = [
   'sauce', 'powder', 'cheese', 'oil', 'juice', 'tomato', 'paste', 'cream',
   'onion', 'garlic', 'berry', 'lemon', 'milk', 'egg', 'beef', 'chicken', 'fish', 'meat',
   'eggplant', 'potato', 'bean', 'rice'
]

ingredient_match = {
   'POS': 'NOUN',
   'LEMMA': { 'IN': ingredients }
}

# Entity Patterns

# Just the ingredient
ingredient_pattern = {
   'label': 'ING',
   'pattern': [ ingredient_match ]
}

# Noun followed by an ingredient
noun_ing_pattern = {
   'label': 'ING',
   'pattern': [
       {
           'POS': 'NOUN',
       },
       ingredient_match
   ]
}

# Adj followed by an ingredient
adj_ing_pattern = {
   'label': 'ING',
   'pattern': [
       {
           'POS': 'ADJ',
       },
       ingredient_match
   ]
}

patterns = [ingredient_pattern, noun_ing_pattern, adj_ing_pattern]

Спасибо большое!

всем привет.
скажите, пожалуйста, есть тут люди, готовые в экстремально короткие сроки помочь с дипломной работой за денюжку?

стремно просить по своей теме, но у меня пути два: или в академ по здоровью, или искать вот такую помощь

Я сам в такой же ситуации