加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
文件
克隆/下载
requirements-dev.txt 303 Bytes
一键复制 编辑 原始数据 按行查看 历史
Weiguo Zhu 提交于 2024-08-19 11:09 . [Tokenizer] Add Fast Tokenizer (#8832)
paddleocr
pre-commit
pytest==8.1.1
parameterized
pytest-cov
regex
pytest-xdist
pytest-timeout
emoji
ftfy
yacs
unidecode
soundfile
librosa
numpy==1.23.5
rouge
tiktoken
visualdl
wandb
tensorboard
tensorboardX
modelscope
hyperopt
h5py
deploy
ray
loguru
data
wget
huggingface_hub>=0.19.2
tiktoken
tokenizers
Loading...
马建仓 AI 助手
尝试更多
代码解读
代码找茬
代码优化