代码收藏家技术教程 2025-01-06

pip install -r requirements.txt时遇到报错自动跳过

1，问题背景
在尝试复制一个环境时，导出所有 Python 库为 requirements.txt 文件，打算使用 pip install -r requirements.txt 进行安装。但如果遇到某个库安装失败，程序会中断，例如出现 ERROR: Could not find a version that satisfies the requirement anaconda-navigator 错误，导致后续的库无法安装。

2，原因
anaconda-navigator 不是通过 pip 安装的，而是通过 Anaconda 或 Miniconda 安装的。因此，pip 无法找到该包并报错。

3，解决方法
pip 本身没有提供跳过错误的选项，但可以通过以下方法间接实现：

使用 --ignore-installed 和 --no-deps 选项

pip install --ignore-installed --no-deps -r requirements.txt

--ignore-installed：忽略已安装包。
--no-deps：不安装依赖包，减少冲突。

增加重试次数和超时时间

pip install --retries 5 --timeout 60 -r requirements.txt

--retries：设置重试次数。
--timeout：设置超时时间。

使用 Python 脚本逐个安装
编写脚本逐行安装库，并在遇到错误时跳过。

import subprocess

with open("requirements.txt", "r") as f:
    for line in f:
        package = line.strip()
        if not package:
            continue
        try:
            print(f"Installing {package}...")
            subprocess.check_call(["pip", "install", package])
        except subprocess.CalledProcessError as e:
            print(f"Error installing {package}: {e}")
            print("Skipping and continuing...")

使用 pip-tools 和 pip-sync
安装 pip-tools 并使用 pip-sync 安装依赖。
```
pip install pip-tools
pip-sync requirements.txt
```
手动编辑 requirements.txt
注释掉无法安装的库：
```
# anaconda-navigator
numpy
pandas
```
然后重新运行安装命令。
进一步添加日志

新增了一个变量pip_source，用于指定安装源（例如阿里云的镜像源）；

如果某个库安装失败，将其名称写入failed_packages.txt文件中；

如果某个库安装失败，将错误信息写入failed_logs.txt文件中，方便后续排查问题。

import subprocess

# 定义保存失败库和日志的文件路径
failed_packages_file = "failed_packages.txt"
failed_logs_file = "failed_logs.txt"

# 指定安装源
pip_source = "https://mirrors.aliyun.com/pypi/simple/"

# 打开文件用于记录失败的库和日志
with open(failed_packages_file, "w", encoding="utf-8") as failed_packages_f, \
     open(failed_logs_file, "w", encoding="utf-8") as failed_logs_f:

    with open("requirements.txt", "r", encoding="utf-8") as f:
        for line in f:
            package = line.strip()
            if not package:
                continue
            try:
                print(f"正在安装 {package}...")
                # 使用指定的安装源
                subprocess.check_call(["pip3", "install", package, "-i", pip_source])
                print(f"{package} 安装成功！")
            except subprocess.CalledProcessError as e:
                print(f"安装 {package} 时出错: {e}")
                print("跳过并继续安装其他库...")

                # 记录失败的库
                failed_packages_f.write(package + "\n")

                # 记录失败的日志
                failed_logs_f.write(f"安装 {package} 时出错:\n")
                failed_logs_f.write(str(e) + "\n")
                failed_logs_f.write("-" * 50 + "\n")

print(f"安装失败的库已保存到 {failed_packages_file}")
print(f"安装失败的日志已保存到 {failed_logs_file}")

作者：sagima_sdu