This commit is contained in:
Evgeny Pavlov 2024-03-20 14:45:46 -07:00 коммит произвёл GitHub
Родитель a359723e41
Коммит 36e56b7bdb
Не найден ключ, соответствующий данной подписи
Идентификатор ключа GPG: B5690EEEBB952194
1 изменённых файлов: 2 добавлений и 2 удалений

Просмотреть файл

@ -6,11 +6,11 @@ stages:
- pretrain
- finetune
# Back-translated corpus can vary a lot in size, so we can try using original one to count epochs
# Train until the model sees two epochs of back-translated corpus
pretrain:
- original 0.6
- backtranslated 0.4
- until original 2
- until backtranslated 2
# Fine-tuning only on original clean corpus until the early stopping
finetune: