如果这不是正确的网站,我深表歉意。如果不是,请告诉我。
这是我正在尝试的一些背景知识。我们正在开发一系列即将投入生产的聊天机器人。他们每个人都将在 Anaconda 的环境中运行。但是,我们的设置使用 tensorflow,它使用 gcc 进行编译,合规性已禁止生产编译器。此外,合规性规则也不赞成我们在生产环境中使用 pip 或 conda install。
作为解决此问题的一种方法,我尝试对 Anaconda 3 文件夹进行压缩并将其移动到产品中,所有依赖项都已编译和安装。但是,环境之间的帐户具有不同的名称,因此这需要我进入 bin 文件夹(至少;我确定我还需要在 lib 和 pckg 文件夹中更改它们)并使用 sed -i重命名硬编码路径以指向 \home\<dev account>\anaconda至 \home\<prod account>\anaconda ,虽然这似乎可行,但它也是破坏我的安装的好方法。
我的问题如下:
- 有什么好的方法可以将 anaconda 从一个用户转移到另一个用户,而不必使用
sed -i在这些路径上?我已经读到 Anaconda 本身不支持这一点,但我希望得到您的意见。 - 有什么方法可以让我在 dev 中安装 anaconda,这样其中的脚本要么被硬编码为在其路径中使用生产帐户名称,要么使用
~. - 如果我必须继续使用
sed, 我应该注意什么重要的事情吗?例如,当我使用grep <dev account> *, 我将一些文件列为binary file matches.我需要做任何特别的事情来改变这些吗?
再一次,我很清楚我应该在生产机器上创建一个新的 Anaconda 安装,但这根本不是一个选项。
编辑: 到目前为止,我已经更改了/etc 中的 conda.sh 和 conda.csh 文件,以及根 bin 中的 conda、activate 和 deactivate 文件。因此,我能够在新用户帐户上激活和停用我的环境。另外,我把bot环境下bin文件夹下的文件都改了。现在,我正在尝试训练机器人来测试它是否有效,但它一直失败并指出列表中不存在自定义操作。不过,我认为这与此无关。
编辑2: 我已经确认我遇到的错误与此无关。为了让 bot 与 Anaconda 的移植版本一起正常工作,我只需要更改/etc 中的 conda.sh 和 conda.csh 文件,以便它们到 python 的路径使用 ~,对激活和执行相同的操作停用/bin 中的文件,并将/bin 中的 conda 文件中的 shebang 行更改为使用实际帐户名。这使得/bin 和 lib 中的所有其他文件仍然在其 shebang 行中使用旧帐户名以及使用该路径的其他变量,但机器人仍按预期工作。无论如何,我认为这应该行不通,但确实如此。
请您参考如下方法:
Anaconda 对路径名很敏感。它们显然被插入到脚本中,但它们也可能被插入到二进制文件中。我想到的一些方法是:
在生产环境中使用 Docker 镜像。构建图像时:
- 根据需要安装编译器。
- 建立你的东西。
- 卸载运行时不需要的编译器和其他东西。
- 将图像压缩成一个图层。
这可以确保卸载的东西确实消失了。
将 Anaconda 安装到目录
\home\<prod account>\anaconda在开发或构建系统上也是如此。即使帐户不同,也应该有一种方法可以在同一位置创建用户可写的目录。- 更好:将 Anaconda 安装到目录
\opt\anaconda在所有环境中。或者其他一些不包含用户名的目录。
- 更好:将 Anaconda 安装到目录
如果您无法获得用户主目录之外的目录,请在固定路径
\opt\anaconda协商符号链接(symbolic link)或联结 ( mklink.exe /d or /j )指向用户主目录。- 如有必要,从 QA 角度考虑:与所有其他环境相比,生产环境中的不同目录路径会引入只能在生产环境中检测和重现的错误风险。 QA 或运营团队应该强制所有应用程序在任何地方都使用固定路径,而不是为您的应用程序破例 ;-)
使用目录
\home\<prod account>\anaconda在 Docker 容器内构建,然后导出存档并在没有 Docker 的生产系统上运行。- 在可重现的 Docker 环境中构建通常是个好主意,即使您可以获得其中没有帐户名的固定路径。
将您的整个应用程序捆绑为一个预编译的 Anaconda 包,这样它就可以在没有编译器的情况下安装。
- 但这并不能真正解决您的问题,因为即使
conda install在生产中不受欢迎。但它可以在不压缩的情况下简化构建 Docker 镜像。
- 但这并不能真正解决您的问题,因为即使
我一直在 Docker 中构建 Anaconda 环境,并在生产中的裸机上运行它们。但我们始终确保路径在不同环境中是相同的。我发现破坏路径太可怕了,甚至无法尝试。当我们随处切换到 Docker 镜像时,生活变得简单多了。但是如果你必须继续使用 sed ...祝你好运 :-)
