Update tokenizers to 0.8.1.rc to fix Mac OS X issues (#5867)

This commit is contained in:
Sebastian 2020-07-18 14:20:11 +02:00 коммит произвёл GitHub
Родитель dad5e12e54
Коммит eae6d8d14f
Не найден ключ, соответствующий данной подписи
Идентификатор ключа GPG: 4AEE18F83AFDEB23
1 изменённых файлов: 1 добавлений и 1 удалений

Просмотреть файл

@ -114,7 +114,7 @@ setup(
packages=find_packages("src"),
install_requires=[
"numpy",
"tokenizers == 0.8.1.rc1",
"tokenizers == 0.8.1.rc2",
# dataclasses for Python versions that don't have it
"dataclasses;python_version<'3.7'",
# utilities from PyPA to e.g. compare versions