如何使本地Pypi镜像没有互联网接入和搜索可用？

Question

我正在尝试在只能连接外部硬盘的服务器上制作一个带有pip搜索功能的完整本地Pypi存储库镜像。要明确的是，我不想要一个简单的缓存系统，服务器在一个完全封闭的网络中连接到其他机器，根本无法访问互联网。

到目前为止，我所做的是用bandersnatch倾倒每个pypi包，我可以在它前面用一个简单的超文本传输协议服务器进行pip安装。我还检索了pypi遗留源代码，并让它在没有任何python包的情况下工作。我现在遇到的问题是将双方联系起来，我甚至不确定这是否可以这样做。

我还测试了pypiserver。它本可以完成我想要的，但速度太慢，最终导致pip搜索超时（看起来它不是为处理那么多包而构建的）。

最后，我看了一下devpi。似乎做的很好，我想做的，但我正在寻找一种方法，导入我的bandersnatch转储到它容易。看起来我无法基于本地目录创建索引。

谢谢你的回复。

Answer 1

我不妨提供一个适当的答案，说明我们是如何让DevPi在我们的环境中非常好地工作的：

1. 安装DevPi

DevPi需要Python 3！因此，请确保安装了Python 3版本的pip。利用这一点：

pip install -U devpi

（可能是root）应该可以做到这一点。

默认情况下，DevPi使用端口3141。如果您安装了以下内容

firewall-cmd --zone=public --add-port=3141/tcp --permanent
firewall-cmd --reload

或系统上的等效命令。

DevPi将使用现成的PyPi。我们还希望能够“覆盖”我们自己只在组织内部提供的包。对于本地nabCERT包，需要一个内部索引。好东西，因为这一个本身可以使用PyPi作为后备！

选择要工作的devpi服务器——可能是你所在的服务器

devpi use  http://localhost:3141

现在创建一个用户，该用户可以添加和管理内部包并使用它们登录

devpi user -c myuser  password=mypassword
devpi login myuser --password mypassword

现在创建我们的内部索引来保存本地包，同时确保它将使用PyPi作为“后备方案”

devpi index -c myindex bases=/root/pypi volatile=True

启动它

Devpi-server--host=0.0.0.0--port=3141--serverdir=/var/www/pypi

尝试安装一个软件包

pip安装-ihttp://localhost:3141/root/pypi/辛普莱克森

如果出现问题，请检查日志，在我们的例子中，它们位于/var/www/pypi/。xproc/devpi服务器/xprocess。日志

此时，如果成功地遵循了上述所有设置，您应该能够打开一个web浏览器，并使用

http://localhost:3141/myuser/myindex

这各不相同。我们使用System d，所以我创建了一个文件/usr/lib/system/devpi.service

[Unit]
Requires=network-online.target
After=network-online.target 

[Service]
EnvironmentFile=-/etc/sysconfig/devpi
Type=forking
PIDFile=/var/www/pypi/.xproc/devpi-server/xprocess.PID
Restart=always
ExecStart=/bin/devpi-server --host=0.0.0.0 --port 3141 --serverdir /var/www/pypi --start
ExecStop=/bin/devpi-server --host=0.0.0.0 --port 3141 --serverdir /var/www/pypi --stop
User=root 

[Install]
WantedBy=multi-user.target

保存文件并通知system d。

systemctl daemon-reload
systemctl enable devpi

要将客户端的pip指向使用新的DevPi存储库，请使用以下内容创建一个/etc/pip.conf文件

[global]
trusted-host = <server IP or FQDN>

[install]
index-url = http://<server IP or FQDN>:3141/myuser/myindex/+simple/

[search]
index = http://<server IP or FQDN>:3141/myuser/myindex/