Токенизация
Конфигурация токенизатора
JSON-файл конфигурации, содержащий все гиперпараметры и метаданные, необходимые для точного воспроизведения поведения конкретного токенизатора.
← НазадJSON-файл конфигурации, содержащий все гиперпараметры и метаданные, необходимые для точного воспроизведения поведения конкретного токенизатора.
← Назад