使用git lfs向huggingface提交较大的数据或者权重
1、克隆以及建立好的项目(最好使用ssh进行克隆)
git clone git@hf.co:datasets/****/xxxx
2、安装 git-lfs
sudo apt-get install git-lfs
3、在仓库中初始化git lfs
git lfs install
4、跟踪文件
git lfs track "video/*.mp4"
注意："video/*.mp4"是需要根据的目录地址和类型。在我的项目中有一个video文件目录存放这xxx.mp4数据。这将创建或更新一个名为 .gitattributes 的文件，指定哪些文件由 Git LFS 管理。
5、添加并提交
git add .
git commit -m "提交"
git push origin main
5、其他技巧
- 清除跟踪
git lfs untrack "*.mp4"
- 查看是否被 LFS 跟踪
推送后，您可以通过以下命令检查 .mp4 文件是否被 LFS 跟踪
git lfs ls-files