python - 如何在 aws ec2 中安装带有 nss 后端的 libcurl？ (Python 3.6 64 位亚马逊 Linux)

Question

我在 AWS 中有一个运行 Python3.6 (Amazon Linux/2.8.3) 的 ec2 实例，其中我需要安装带有 NSS ssl 后端的 pycurl。

首先，我尝试将 pycurl==7.43.0 --global-option="--with-nss" 添加到我的 requirement.txt 文件中，但我出现错误安装错误。所以我最终通过在 .ebextensions (在部署期间运行)中添加一个 .config 文件来做到这一点:

container_commands:
  09_pycurl_reinstall:
    # the upgrade option is because it will run after PIP installs the requirements.txt file.
    # and it needs to be done with the virtual-env activated
    command: 'source /opt/python/run/venv/bin/activate && PYCURL_SSL_LIBRARY=nss pip3 install pycurl --global-option="--with-nss" --upgrade --no-cache-dir --compile --ignore-installed'

Pycurl 似乎已正确安装，但 celery worker 未运行。 celery worker 日志显示:

__main__.ConfigurationError: Could not run curl-config: [Errno 2] No such file or directory

如果我通过 ssh 连接到实例并运行 python 3.6 -c 'import pycurl' 我会得到更详细的错误:

ImportError: pycurl: libcurl link-time ssl backend (openssl) is different from compile-time ssl backend (nss)

所以我想我的问题是我之前安装了带有 openSSL 而不是 NSS 的 libcurl，因此 libcurl 和 pycurl 之间不匹配。

根据另一个 stackoverflow 问题，要使用 NSS 后端安装 libcurl，我应该安装它:

sudo apt libcurl4-nss-dev

但是由于服务器正在运行 Amazon Linux，我无法使用 apt 命令。所以我改为:

yum install libcurl-devel

我想这就是问题所在:当我需要 NSS 支持时，它会安装支持 OpenSSL 的 libcurl。

我如何在 Amazon Linux 中使用 NSS 安装 libcurl？？(我需要 NSS，因为我正在使用 SQS 作为代理运行带有 celery 的 Django 应用程序，而 SQS 需要 NSS)。 p>

非常感谢!

Answer 1

我刚刚遇到了同样的问题并设法解决了它:)

1. 检索 libcurl 的 Amazon Linux 配置选项:

curl-config --configure

所有引用路径的选项都可以忽略，但如果您想要与系统 libcurl 相同的功能，则必须保留其他选项。当然，--with-ssl会被替换成--without-ssl --with-nss。

1.1 安装先决条件:

sudo yum install libssh2-devel nss-devel

(当然你应该添加到你的 ebextensions 的 packages > yum 部分)

1. 从源代码编译 libcurl(我选择 7.61.1 以匹配 Amazon Linux 2018.03 使用的版本):

wget https://curl.haxx.se/download/curl-7.61.1.tar.gz
tar xf curl-7.61.1.tar.gz
cd curl-7.61.1
./configure '--build=x86_64-redhat-linux-gnu' '--host=x86_64-redhat-linux-gnu' '--target=x86_64-amazon-linux-gnu' '--program-prefix=' '--cache-file=../config.cache' '--disable-static' '--enable-symbol-hiding' '--enable-ipv6' '--enable-threaded-resolver' '--with-gssapi' '--with-nghttp2' '--without-ssl' '--with-nss' '--with-ca-bundle=/etc/pki/tls/certs/ca-bundle.crt' '--enable-ldap' '--enable-ldaps' '--enable-manual' '--with-libidn2' '--with-libpsl' '--with-libssh2' 'build_alias=x86_64-redhat-linux-gnu' 'host_alias=x86_64-redhat-linux-gnu' 'target_alias=x86_64-amazon-linux-gnu' 'CFLAGS=-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector --param=ssp-buffer-size=4 -m64 -mtune=generic'
make
sudo make install

(当然，这应该通过 ebextensions 的 files 部分作为 Shell 脚本正确部署)。

现在您应该看到在 /usr/local/lib 中创建了 libcurl.so.4。

1. 为要使用自定义 libcurl 编译的 pycurl 定义以下环境变量:

LD_LIBRARY_PATH=/usr/local/lib
PYCURL_CURL_CONFIG=/usr/local/bin/curl-config
PYCURL_SSL_LIBRARY=nss

1. 运行您的pip install

可以查看pycurl链接到右边的libcurl:

ldd /opt/python/run/venv/local/lib64/python3.6/site-packages/pycurl.cpython-36m-x86_64-linux-gnu.so

应该向您展示 libcurl.so.4 =>/usr/local/lib64/libcurl.so.4

当然 python 3.6 -c 'import pycurl' 应该可以工作。

就是这样!您应该能够使用 SQS 运行 Celery。