OStack程序员社区-中国程序员成长平台

标题: git - 在构建期间向 docker 添加大文件 [打印本页]
作者: 菜鸟教程小白    时间: 2022-8-3 10:13
标题: git - 在构建期间向 docker 添加大文件

我的服务在运行时需要一些大文件(~ 100MB-500MB)
这些文件可能会不时更改，我不介意重建我的容器并在发生时重新部署它。

我想知道在构建过程中存储和使用它的最佳方法是什么，以便团队中的任何人都可以更新容器并重建它。

到目前为止，我最好的想法是将这些大文件存储在 git LFS 中每个版本的不同分支中。这样我就可以将它添加到我的 Dockerfile 中:

RUN git clone -b 'version_2.0' --single-branch --depth 1 https://...git.git

这样，如果这些大文件发生变化，我只需要更改version_2.0在 Dockerfile 中，然后重建。

有没有其他推荐的方法？我考虑将这些文件存储在 Dropbox 中，然后使用 wget 通过链接获取它们。在构建期间

P.S - 这些大文件是一些深度网络的权重

编辑 - 问题是在 docker 中存储大文件的合理方法是什么，这样一个开发人员/团队可以更改文件和匹配的代码，并且它将被记录(git)并且可以很容易地被另一个团队使用甚至部署(因为这个原因，只是本地PC上的大文件不好，因为它需要发送到另一个团队)


Best Answer-推荐答案


它实际上归结为您如何构建容器，例如，我们使用 Jenkins 和 fabric8 io 插件作为 maven 构建的一部分构建我们的容器。我们将 ADD 与远程源 url (Nexus) 一起使用。

通常，您可以使用 URL 作为源。所以这取决于您可以访问哪个存储。
1. 您可以创建一个 s3 存储桶并提供对您的 docker builder 节点的访问权限。您可以添加 ADD http://example.com/big.tar.xz /usr/src/things/在你的 docker 文件中构建

  • 您可以将大文件上传到工件存储库(例如 Nexus 或 Artifactory)并在 ADD
    • 中使用它
  • 如果您使用 Jenkins 构建，请在同一主机中创建一个文件夹并配置网络服务器以使用虚拟主机配置提供该内容。然后使用该网址。

    • 最佳解决方案是在不影响安全性的情况下，在努力和成本方面更便宜的解决方案。

    关于git - 在构建期间向 docker 添加大文件，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/54479271/





    欢迎光临 OStack程序员社区-中国程序员成长平台 (http://ostack.cn/) Powered by Discuz! X3.4