要Git的文件太大,如何使用Git-LFS

开源 0

问题:要Git的文件太大
解决:使用Git-LFS,LFS原理这里不详说了

  • 版本新一点的Git已经集成了Git-LFS,不用单独去下载。LFS的路径就在D:/Program Files/Git/mingw64/bin,其中D:/Program Files/Git是Git的安装目录。

  • 如何用Git-LFS clone:

    1、先打开一个文件夹,d:/Desktop/新建文件夹,cmd进入它(那么之后Git下来的东西就会存到这个文件加里)

    2、在cmd里输入:

    d:/Desktop/新建文件夹> git lfs installGit LFS initialized.d:/Desktop/新建文件夹> set GIT_LFS_SKIP_SMUDGE=1d:/Desktop/新建文件夹> git clone <https://huggingface.co/stabilityai/stable-diffusion-2-base>

    set GIT_LFS_SKIP_SMUDGE=1的意思是禁用Git-LFS的自动下载和替换功能(每次进入cmd都要重新设置,不然就是未设置的状态)。如果某个文件是用LFS上传Git的文件,则说明它是大文件。

    为了避免git clone等待半天下载不完(而且看不到大文件的下载进度),我们手动下载大文件,而非大小文件一起用git下载,所以这里禁用。禁用之后再git clone,则只会下载没有使用LFS的小文件,对于LFS存储的大文件,只会存一个文本的pointer file,而非实质性的数据,这样速度就快了。

    然后可以手动一个一个下载其它需要的大模型。
    也可以这样:比如现在需要下载所有pytorch.bin,则:

    d:/Desktop/MultiDiffusion-master> cd stable-diffusion-2-based:/Desktop/MultiDiffusion-master/stable-diffusion-2-base> git lfs pull --include="*.bin"
  • 参考:git lfs使用(huggingface下载大模型文件)_git lfs下载大文件_cv_lhp的博客-CSDN博客

也许您对下面的内容还感兴趣: