请选择 进入手机版 | 继续访问电脑版
  • 设为首页
  • 点击收藏
  • 手机版
    手机扫一扫访问
    迪恩网络手机版
  • 关注官方公众号
    微信扫一扫关注
    公众号

git - 在构建期间向 docker 添加大文件

[复制链接]
菜鸟教程小白 发表于 2022-8-3 10:13:45 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题

我的服务在运行时需要一些大文件(~ 100MB-500MB)
这些文件可能会不时更改,我不介意重建我的容器并在发生时重新部署它。

我想知道在构建过程中存储和使用它的最佳方法是什么,以便团队中的任何人都可以更新容器并重建它。

到目前为止,我最好的想法是将这些大文件存储在 git LFS 中每个版本的不同分支中。这样我就可以将它添加到我的 Dockerfile 中:

RUN git clone -b 'version_2.0' --single-branch --depth 1 https://...git.git

这样,如果这些大文件发生变化,我只需要更改version_2.0在 Dockerfile 中,然后重建。

有没有其他推荐的方法?我考虑将这些文件存储在 Dropbox 中,然后使用 wget 通过链接获取它们。在构建期间

P.S - 这些大文件是一些深度网络的权重

编辑 - 问题是在 docker 中存储大文件的合理方法是什么,这样一个开发人员/团队可以更改文件和匹配的代码,并且它将被记录(git)并且可以很容易地被另一个团队使用甚至部署(因为这个原因,只是本地PC上的大文件不好,因为它需要发送到另一个团队)



Best Answer-推荐答案


它实际上归结为您如何构建容器,例如,我们使用 Jenkins 和 fabric8 io 插件作为 maven 构建的一部分构建我们的容器。我们将 ADD 与远程源 url (Nexus) 一起使用。

通常,您可以使用 URL 作为源。所以这取决于您可以访问哪个存储。
1. 您可以创建一个 s3 存储桶并提供对您的 docker builder 节点的访问权限。您可以添加 ADD http://example.com/big.tar.xz /usr/src/things/在你的 docker 文件中构建

  • 您可以将大文件上传到工件存储库(例如 Nexus 或 Artifactory)并在 ADD
  • 中使用它
  • 如果您使用 Jenkins 构建,请在同一主机中创建一个文件夹并配置网络服务器以使用虚拟主机配置提供该内容。然后使用该网址。

  • 最佳解决方案是在不影响安全性的情况下,在努力和成本方面更便宜的解决方案。

    关于git - 在构建期间向 docker 添加大文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/54479271/

    回复

    使用道具 举报

    懒得打字嘛,点击右侧快捷回复 【右侧内容,后台自定义】
    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    关注0

    粉丝0

    帖子520893

    发布主题
    阅读排行 更多
    广告位

    扫描微信二维码

    查看手机版网站

    随时了解更新最新资讯

    139-2527-9053

    在线客服(服务时间 9:00~18:00)

    在线QQ客服
    地址:深圳市南山区西丽大学城创智工业园
    电邮:jeky_zhao#qq.com
    移动电话:139-2527-9053

    Powered by 互联科技 X3.4© 2001-2213 极客世界.|Sitemap