я работал и с фасттекстом и с трансформерами))
Тут больше момент того как это тащить в прод и поддерживать.
tf-idf как бейзлайн показал себя хорошо, сомнения теперь на уровне как отправить модель в свободное плавание в проде с наименьшей болью
Tfidf полностью зависим от словаря, fasttext нет, tfidf нужно переобучать всегда, fasttext можно дообучить