python - 如何从带有 pip 的 git-lfs 内容的 git repo 安装 python 包？

Question

我已将 git 存储库中的大文件迁移到 git-lfs。存储库包含自定义 python 库的源代码。我能够使用 pip 安装它:

pip install git+https://gitserver.com/myrepo.git@branch

目前(迁移后)，存储在 lfs 的大文件显然不在安装范围内(只有链接)。我已经在环境中安装了来自 PyPI 的 git-lfs 包，但它没有帮助。
有什么方法可以告诉 pip 在克隆 repo 时获取 git-lfs 文件？

Answer 1

我遇到了同样的问题，我有几个包含 LFS 文件的内部 python 包。他们每个人都有自己的 requirements.txt 和 setup.py 文件，其中一个文件基于 pip，不能​​很好地处理 git lfs另一个是基于setuptools...

我的 requirements.txt 看起来像:

pip_package1==0.1
pip_package2==0.2
pip_package3==0.3
git+ssh://git@{url}:{port}/{repo}.git@{branch}

在 setup.py 中，一个解决方案是捕获任何 git+ssh 以不让它们进入 setup 函数，而是强制安装它们通过 pip:

def install_requires():
    reqdir = os.path.dirname(os.path.realpath(__file__))
    with open(os.path.join(reqdir, 'requirements.txt'), encoding='utf-8') as f:
        all_packages = f.readlines()
        packages = [
            package
            for package in all_packages
            if 'git+ssh' not in package
        ]
        manual_pip_packages = [
            package
            for package in all_packages
            if 'git+ssh' in package
        ]
        for package in manual_pip_packages:
            subprocess.call([sys.executable, '-m', 'pip', 'install', package])
    return packages

然后是pip/git lfs 兼容性。我的理解是 git repo 上的 pip install 将简单地 git clone 然后 python setup.py [something] 所以我在每个setup.py 在包含 lfs 文件的包中 git pull 假设相关的 setup.py 在 git 存储库中。

def pull_first():
    """This script is in a git directory that can be pulled."""
    cwd = os.getcwd()
    gitdir = os.path.dirname(os.path.realpath(__file__))
    os.chdir(gitdir)
    g = git.cmd.Git(gitdir)
    try:
        g.execute(['git', 'lfs', 'pull'])
    except git.exc.GitCommandError:
        raise RuntimeError("Make sure git-lfs is installed!")
    os.chdir(cwd)

这样我就有了一个setup.py:

from setuptools import setup, find_packages

import os
import subprocess
import sys

try:
    import git
except ModuleNotFoundError:
    subprocess.call([sys.executable, '-m', 'pip', 'install', 'gitpython'])
    import git


def install_requires():
    ...


def pull_first():
    ...


pull_first()

setup(name=...,
      version=...,
      description=...,
      long_description=...,
      url=...,
      author=...,
      license=...,
      packages=find_packages(),
      python_requires=">=3.0",
      install_requires=install_requires())