如何修复我的自定义 conda 包的 conda UnsatisfiableError？

Posted 2023-02-16

【中文标题】如何修复我的自定义 conda 包的 conda UnsatisfiableError？

【英文标题】：How do I fix conda UnsatisfiableError of my custom conda package?

【发布时间】：2020-05-24 12:01:01

【问题描述】：

我正在尝试打包我的 python 代码以在 Anaconda 云上发布。 文件夹结构如下所示：

.
├── conda-recipe
│   ├── build.bat
│   ├── build.sh
│   └── meta.yaml
├── demos
│   ├── datasets
│   │   ├── com-amazon.all.dedup.cmty.txt
│   │   ├── com-amazon.ungraph.txt
│   │   ├── email-Eu-core-department-labels.txt
│   │   └── email-Eu-core.txt
│   ├── directed_example.ipynb
│   ├── email_eu_core_network_evaluation-Copy1.ipynb
│   ├── node_classification.ipynb
│   └── zacharys_karate_club_evaluation.ipynb
├── LICENSE.txt
├── README.md
├── setup.py
├── sten
│   ├── embedding.py
│   └── __init__.py
├── test
│   ├── __init__.py
│   └── test_system.py
├── zachary_computed.png
└── zachary_expected.png

meta.yaml 文件：

package:
  name: sten
  version: "0.1.0"

source:
  path: ..

build:
  number: 0
  noarch: generic

requirements:
  build:
    - python >=3.7
    - setuptools
  run:
    - python >=3.7
    - pypardiso >=0.2.2
    - numpy >=1.18.1
    - networkx >=2.4
    - scipy >=1.4.1
    - markdown


test:
  imports:
    - sten.embedding

about:
  home: https://github.com/monomonedula/simple-graph-embedding
  license: Apache License 2.0
  license_file: LICENSE.txt
  summary: Simple deterministic algorithm for generating graph nodes topological embeddings.

我用来构建包的命令（haasad 是 pypardiso 包的通道名称）： conda build conda-recipe -c haasad 构建成功，我在这里上传了它： https://anaconda.org/monomonedula/sten

但是，在使用两个本地构建安装后，如下所示： conda install sten --use-local -c haasad 并将构建上传到云端 conda install -c monomonedula sten -c haasad 我遇到了几个问题。

使用 python 3.7 时，我无法导入我的包，即使它在 conda list 中列出（我已经仔细检查了所有内容，我使用的是正确的解释器）。 使用 python 3.8 时，我可以导入和使用它，但由于未知原因无法安装 stellargraph。错误信息：

Collecting package metadata (current_repodata.json): done
Solving environment: failed with initial frozen solve. Retrying with flexible solve.
Solving environment: failed with repodata from current_repodata.json, will retry with next repodata source.
Collecting package metadata (repodata.json): done
Solving environment: failed with initial frozen solve. Retrying with flexible solve.
Solving environment: \ 
Found conflicts! Looking for incompatible packages.
This can take several minutes.  Press CTRL-C to abort.
failed                                                                                                                                                       

UnsatisfiableError: The following specifications were found to be incompatible with each other:

Output in format: Requested package -> Available versions

conda search sten -c monomonedula --info的输出：

sten 0.1.0 py38_0
-----------------
file name   : sten-0.1.0-py38_0.tar.bz2
name        : sten
version     : 0.1.0
build       : py38_0
build number: 0
size        : 16 KB
license     : Apache License 2.0
subdir      : noarch
url         : https://conda.anaconda.org/monomonedula/noarch/sten-0.1.0-py38_0.tar.bz2
md5         : 53661562513861f9433b252c8ae7b5f4
timestamp   : 2020-05-23 19:24:36 UTC
dependencies: 
  - markdown
  - networkx >=2.4
  - numpy >=1.18.1
  - pypardiso >=0.2.2
  - python >=3.7
  - scipy >=1.4.1

sten 0.1.0 py38_0
-----------------
file name   : sten-0.1.0-py38_0.tar.bz2
name        : sten
version     : 0.1.0
build       : py38_0
build number: 0
size        : 16 KB
license     : Apache License 2.0
subdir      : noarch
url         : https://conda.anaconda.org/monomonedula/noarch/sten-0.1.0-py38_0.tar.bz2
md5         : 53661562513861f9433b252c8ae7b5f4
timestamp   : 2020-05-23 19:24:36 UTC
dependencies: 
  - markdown
  - networkx >=2.4
  - numpy >=1.18.1
  - pypardiso >=0.2.2
  - python >=3.7
  - scipy >=1.4.1

conda search stellargraph -c stellargraph --info 的输出：

stellargraph 1.0.0 py_0
-----------------------
file name   : stellargraph-1.0.0-py_0.tar.bz2
name        : stellargraph
version     : 1.0.0
build       : py_0
build number: 0
size        : 7.8 MB
license     : Apache Software
subdir      : noarch
url         : https://conda.anaconda.org/stellargraph/noarch/stellargraph-1.0.0-py_0.tar.bz2
md5         : e62b9c897d0a5481159c1e7cb8024717
timestamp   : 2020-05-05 07:54:44 UTC
dependencies: 
  - gensim >=3.4.0
  - ipykernel
  - ipython
  - matplotlib >=2.2
  - networkx >=2.2
  - numpy >=1.14
  - pandas >=0.24
  - python >=3.6
  - scikit-learn >=0.20
  - scipy >=1.1.0
  - tensorflow >=2.1.0

The repo

我在这里缺少什么以及如何正确打包它？

【问题讨论】：

您是否尝试安装到现有环境中？如果是这样，可能某些以前安装的软件包与您的新版本冲突。如果您使用conda create 而不是conda install，会发生什么？

@StuartBerg 我每次都在使用干净的新环境。

【参考方案1】：

问题出在您的meta.yaml 文件中。根据Anaconda blog post：

Noarch 通用包允许用户在 conda 包中分发文档、数据集和源代码

和

Noarch Python 包通过在安装时整理平台和 Python 版本特定的差异，减少了在不同架构和 Python 版本上构建多个不同纯 Python 包的开销

因为你要分发一个纯python包，你应该使用noarch: python。此外，您不需要在build 和run 中设置python 版本。我在下面包含了一个更新的meta.yaml。它还包括其中的构建脚本，因此您不再需要 build.sh 和 build.bat 文件。它还将许可证部分修复为 conda 将接受的内容（它仍然是 Apache 2.0）。

package:
  name: sten
  version: "0.1.0"

source:
  path: ..

build:
  number: 0
  noarch: python
  script:  PYTHON  setup.py install

requirements:
  build:
    - python
    - setuptools
  run:
    - python
    - pypardiso >=0.2.2
    - numpy >=1.18.1
    - networkx >=2.4
    - scipy >=1.4.1
    - markdown

test:
  imports:
    - sten.embedding

about:
  home: https://github.com/monomonedula/simple-graph-embedding
  license: Apache-2.0
  license_family: Apache
  license_file: LICENSE.txt
  summary: Simple deterministic algorithm for generating graph nodes topological embeddings.

以下是我使用上述meta.yaml 文件构建和安装此软件包的步骤：

git clone https://github.com/monomonedula/simple-graph-embedding
cd simple-graph-embedding/
git checkout 'refactor&cleanup'
# Replace contents of `meta.yaml`
rm conda-recipe/build.sh conda-recipe/build.bat
conda create --yes -n testing python=3.7 conda-build conda-verify
conda activate testing
conda-build --channel haasad .

这就是我在 3.7 环境中安装软件包所做的。您将在conda-build 日志输出的底部找到sten-0.1.0-py_0.tar.bz2 的完整路径。

conda install -n testing /home/jakub/miniconda3/envs/testing/conda-bld/noarch/sten-0.1.0-py_0.tar.bz2
conda activate testing
$CONDA_PREFIX/bin/python -c "import sten"

我还在 python 3.8 环境中测试了安装。

conda create --yes -n testing3.8 python=3.8
conda install -n testing3.8 /home/jakub/miniconda3/envs/testing/conda-bld/noarch/sten-0.1.0-py_0.tar.bz2
conda activate testing3.8
$CONDA_PREFIX/bin/python -c "import sten"

conda install --use-local sten 不适合我 - 有一个 GitHub issue 关于它。