问题:要Git的文件太大
解决:使用Git-LFS,LFS原理这里不详说了
-
版本新一点的Git已经集成了Git-LFS,不用单独去下载。LFS的路径就在D:/Program Files/Git/mingw64/bin,其中D:/Program Files/Git是Git的安装目录。
-
如何用Git-LFS clone:
1、先打开一个文件夹,d:/Desktop/新建文件夹,cmd进入它(那么之后Git下来的东西就会存到这个文件加里)
2、在cmd里输入:
d:/Desktop/新建文件夹> git lfs installGit LFS initialized.d:/Desktop/新建文件夹> set GIT_LFS_SKIP_SMUDGE=1d:/Desktop/新建文件夹> git clone <https://huggingface.co/stabilityai/stable-diffusion-2-base>
set GIT_LFS_SKIP_SMUDGE=1的意思是禁用Git-LFS的自动下载和替换功能(每次进入cmd都要重新设置,不然就是未设置的状态)。如果某个文件是用LFS上传Git的文件,则说明它是大文件。
为了避免git clone等待半天下载不完(而且看不到大文件的下载进度),我们手动下载大文件,而非大小文件一起用git下载,所以这里禁用。禁用之后再git clone,则只会下载没有使用LFS的小文件,对于LFS存储的大文件,只会存一个文本的pointer file,而非实质性的数据,这样速度就快了。
然后可以手动一个一个下载其它需要的大模型。
也可以这样:比如现在需要下载所有pytorch.bin,则:d:/Desktop/MultiDiffusion-master> cd stable-diffusion-2-based:/Desktop/MultiDiffusion-master/stable-diffusion-2-base> git lfs pull --include="*.bin"
-
参考:git lfs使用(huggingface下载大模型文件)_git lfs下载大文件_cv_lhp的博客-CSDN博客