下载hugging face上的数据集
当搜索数据集之后,浏览器给出的回答中包含hugging face,如果想使用hugging face上的数据集,按照下面的步骤即可成功下载(我使用的是Linux)
1.注册hugging face账号(如果已经有了,直接登录)
2.找到头像点击出现下拉栏,选择Access Token ->Create new token
3.创建之后,先复制token到一个地方,之后会用到
然后找到数据集的名字:(这里我随便找了一个)直接点旁边的复制符号
4.在你的虚拟环境中下载hugging face,安装成功后
输入这个命令即可下载:huggingface-cli download --repo-type dataset --token 你的token uoft-复制的数据集名 --local-dir 存放位置 --resume-download