Классификация текстов

Токенизация

Процесс сегментации текста на элементарные единицы (токены), такие как слова, подслова или символы, для анализа.

← Назад