Замена токенайзера
#1
by
mikerrr
- opened
А не подскажете как заменить токенайзер на оригинальной модели?
Супер, спасибо!
Ноутбук для обучения пришлось переделывать, так что бы он поддерживал несколько датасетов для нескольких тасок(как в оригинальном скрипте обучения), но при этом - измененный токенайзер, как в ноутбуке NielsRogge. Хотелось, что бы модель могла не только распознавать, но и классифицировать, как в оригинальной работе (разный промпт).