Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >Harbor和Dragonfly双剑合璧 打造容器镜像运维新模式

Harbor和Dragonfly双剑合璧 打造容器镜像运维新模式

作者头像
CNCF
发布于 2020-04-18 14:39:01
发布于 2020-04-18 14:39:01
2.6K0
举报
文章被收录于专栏:CNCFCNCF

上周传来好消息,由阿里巴巴发起的云原生开源项目Dragonfly,正式晋升为 CNCF(云原生计算基金会)孵化级别的托管项目,恭喜阿里的同学们!

Dragonfly 主要解决云原生领域应用镜像分发的问题,帮助用户改善 Kubernetes 中镜像 / 文件分发的体验,让企业工程师可以专注于应用程序本身而非基础架构管理。

Dragonfly的架构(图片来自Dragonfly社区)

Dragonfly 和 Harbor 一样,都是早期进入 CNCF 的中国原创开源项目,而且都是帮助解决容器镜像管理中的问题,可谓兄弟项目。不仅如此,两个项目都支持许多相同的用户群体,两个开源社区的同学一直在通力合作,为用户创造更流畅的容器镜像管理体验。

早在 2018 年底的北美 KubeCon 上,两个项目的维护者:Harbor 的邹佳和 Dragonfly 的孙宏亮联袂演示了 Harbor 集成 Dragonfly 的 P2P 镜像分发功能。随后,Harbor 社区成立了 P2P 工作组( Workgroup ),来自阿里云、腾讯、网易、灵雀云和 VMware 等公司的工程师紧密协作,集成容器镜像管理和分发功能。

Harbor 集成 Dragonfly 的 P2P 分发功能

在最近一次 Harbor 社区会议上可以看到,P2P 的镜像分发功能已经初具雏形,计划在Harbor 2.1中实现集成。Harbor负责镜像管理,Dragonfly侧重镜像分发,具体就是在 Harbor 中可制定预热 (preheat) 策略,把镜像预先发送到 Dragonfly 超级节点的缓存中,后续集群中镜像的 P2P分发可以由 Dragonfly 完成。

Harbor定义了 P2P provider的规范,可以和 Dragonfly 等 P2P 引擎对接。当镜像推送到 Harbor 后,根据用户定制的策略,可通知 P2P 分发软件进行镜像的预热,提前分发应用的镜像。

Harbor 中 Dragonfly 的 P2P provider (演示界面)

Harbor 和 Dragonfly 两大镜像管理项目双剑合璧,前者确保镜像安全控制访问,后者加速镜像大规模分发,相得益彰,是云原生用户的一大福音。Harbor 社区的 P2P 工作组在密锣紧鼓地推进,欢迎大家参与围观、反馈和试用:

https://github.com/goharbor/community/tree/master/workgroups/wg-p2p



本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-04-15,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 CNCF 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
Harbor功能特点看这一篇就够了
本文由“GO开源说”第七期 《Harbor助你玩转云原生》直播内容修改整理而成,视频内容较长,本文内容有所删减和重构。 注:微信公众号不按照时间排序,请关注“亨利笔记”,并加星标以置顶,以免错过更新。 相关视频: 视频回放:Harbor助你玩转云原生(1) 视频回放:Harbor助你玩转云原生(2) 云原生技术的兴起为企业数字化转型带来新的可能。作为云原生的要素之一,带来更为轻量级虚拟化的容器技术具有举足轻重的推动作用。其实很早之前,容器技术已经有所应用,而 Docker 的出现和兴起彻底带火了容器。其
Henry Zhang
2023/04/04
2.4K0
Harbor功能特点看这一篇就够了
Dragonfly v2.2.0 发布:Rust 客户端、P2P 升级、增强图片加速
今年 1 月,云原生计算基金会(CNCF)发布 了 Dragonfly 2.2.0 版,为这个开源的点对点(P2P)文件分发和镜像加速系统引入了几项重大改进。
深度学习与Python
2025/02/18
1430
Dragonfly v2.2.0 发布:Rust 客户端、P2P 升级、增强图片加速
盘点那些走向世界的中国项目
Kylin™是第一个成为Apache顶级开源项目的中国作品。它是一个分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,能够处理TB乃至PB级别的分析任务。它能在亚秒内查询巨大的Hive表,并支持高并发。
IT大咖说
2019/10/11
1.3K0
盘点那些走向世界的中国项目
Harbor:将制品库发挥到极致
Harbor 是一个用于存储和分发Docker 镜像的企业级Registry 服务器,由vmware开源,是一个可信的云原生制品仓库,用来存储、签名、管理相关的内容。
没有故事的陈师傅
2020/11/19
3K0
Harbor:将制品库发挥到极致
Harbor社区成立“性能工作组”和“多架构支持工作组”
随着Harbor在企业级业务的应用的快速发展,由Harbor支撑的镜像仓库也在不断的发展壮大,承载了越来越多的用量和更多的使用场景。作为目前最流行的开源镜像仓库解决方案,Harbor的表现很大程度上决定了上层容器应用的发布时延,其整体性能及稳定性,以及在多架构场景下的应用自然备受社区众多用户及开发者的关注。
灵雀云
2021/04/02
8190
3月18日晚直播及赠书:Harbor助你玩转云原生 |GoCN 开源说第七期
Harbor 开源项目维护者邹佳将于今晚( 3月18日)8点,在 GoCN 开源说第七期上直播:Harbor助你玩转云原生 ,欢迎用户和开发者参与直播和互动。感谢 GoCN 社区的邀请。 写在前面 GoCN 开源说是 GoCN 推出的一档分享 Go 开源好项目的直播栏目,通过开源说希望能够帮助到开源作者们实现以下目标: 第一是去推广他们的开源项目 第二说说背后的设计原理和理念,产品优越性等 第三让我们用户可以了解到更多好玩有用的项目,避免自己造轮子重复发明 第四当然也希望通过这些分享让大家学习到每一个开源项
Henry Zhang
2023/04/04
4640
3月18日晚直播及赠书:Harbor助你玩转云原生 |GoCN 开源说第七期
Dragonfly + Harbor实现的p2p镜像分发
超级节点充当CDN,同时调度每个对等者(peer)在他们之间传输文件块。dfget是P2P客户端,也称为对等者(peer),主要用于下载和共享文件块。
李鹤
2023/03/28
2.1K0
Dragonfly + Harbor实现的p2p镜像分发
Dragonfly发布Nydus容器镜像加速服务
在容器的生产实践中,偏小的容器镜像能够很快的部署启动。当应用的镜像达到几个GB以上的时候,在节点上下载镜像通常会消耗大量的时间。Dragonfly 通过引入 P2P 网络有效的提升了容器镜像大规模分发的效率。然而,用户还是必须等待镜像数据完整下载到本地,然后才能创建自己的容器。我们希望进一步缩减镜像下载的时间,让用户能够更快地部署容器应用。同时,如何更好的保护用户的数据,也是容器行业近年来的重要关注点。
CNCF
2020/11/02
2.3K0
Dragonfly发布Nydus容器镜像加速服务
CNCF 宣布首个中国原创项目 Harbor毕业
加利福尼亚州旧金山 – 2020 年 6 月 23 日  长期致力于云原生软件生态构建的云原生计算基金会 ( CNCF ) 今天宣布,Harbor 成为第 11 个毕业的项目。从孵化( incubation )级别晋升为毕业( graduation )级别的过程中,Harbor 展现了其使用率的不断提高、开放的治理流程、完整功能成熟度以及对社区持续性和包容性的坚定承诺。 Harbor 是一个开源制品(artifact)仓库,可通过策略和基于角色的访问控制来保护制品(如容器镜像、Helm Chart等
Henry Zhang
2023/04/18
3680
CNCF 宣布首个中国原创项目 Harbor毕业
CNCF 首个中国开源项目Harbor是如何炼成的?
题图摄于加州蒙特雷 感谢 InfoQ 万佳 编辑的采访, 本文经授权转载,增加了配图。 相关信息:招聘云原生工程师 “天南地北侃技术,自娱自乐于互联网的缝隙中”,这是公众号亨利笔记的简介。而这个公众号的主人就是张海宁。不久前,笔者在 VMware 北京办公室见到了他:个子挺高,人很瘦,说话不疾不徐。 张海宁是一名资深程序员,从小学起,他就开始学习编程,是中国最早的 iOS 应用开发者之一。他设计和开发的几个 iOS 工具类 App 在苹果应用商店名列前茅,曾获免费应用榜首、付费应用前三名的佳绩。 VMw
Henry Zhang
2023/04/04
3600
CNCF 首个中国开源项目Harbor是如何炼成的?
揭秘Harbor镜像仓库——首个源自中国的CNCF毕业项目
开源云原生制品仓库 Harbor 2.1 上月正式发布了!关于 Harbor 你了解多少呢? ---- 容器技术这些年 近些年来,容器技术迅速席卷全球,颠覆了应用的开发、交付和运行模式,在云计算、互联网等领域得到了广泛应用。其实,容器技术在约二十年前就出现了,但直到 2013 年Docker推出之后才遍地开花,毫不夸张地说,Docker公司率先点燃了容器技术的火焰,拉开了云原生应用变革的帷幕,促进容器生态圈一日千里地发展。2015年CNCF的成立促进了容器技术在云原生领域的应用,降低用户开发云原生应用的门槛
博文视点Broadview
2023/05/19
5570
揭秘Harbor镜像仓库——首个源自中国的CNCF毕业项目
技术公开课丨Harbor 助你玩转云原生
开源云原生制品仓库 Harbor 2.1 上月正式发布了!2.1版本增加了好几项新功能,给镜像管理带来很大的便利和提高了效率,可以挽救不少运维工程师的发际线了: ● 镜像的代理和缓存 ● 非阻塞的镜像垃圾回收 ● P2P镜像分发的预热 ● 机器学习模型的管理 ● Sysdig镜像扫描器 新版发布,大家一定有很多关心的问题! 11月12日(周四)晚8:00,博文视点学院联合云原生社区邀请了VMware中国研发中心主任工程师、Harbor 架构师及核心维护者、《Harbor权威指南》作者邹佳老师为大家带来直播分
博文视点Broadview
2023/05/19
2220
技术公开课丨Harbor 助你玩转云原生
运维 Harbor 镜像仓库的法宝:Operator
不知不觉,Harbor 开源项目发布后我们已经走过了 4 个年头,Github 上的星星数超过1万1千,参与贡献代码的开发者有170多位。随着 Harbor 功能的完善,用户对 Harbor 的认可度很高,在生产系统中的部署也越来越多,我们也从用户反馈中了解到需要改进的地方。比较多用户的呼声是需要 Harbor 的Operator,以便更好地管理多个 Harbor 镜像仓库实例。
Henry Zhang
2020/04/14
1.1K0
运维 Harbor 镜像仓库的法宝:Operator
Harbor 2.0通过对OCI的支持在扩展工件支持方面取得了巨大的飞跃
作者:Alex Xu,Harbor贡献者,VMware高级产品经理。文章最初在goharbor.io发表。
CNCF
2020/05/22
1.6K0
Harbor 2.0通过对OCI的支持在扩展工件支持方面取得了巨大的飞跃
Harbor应用案例:网易轻舟微服务平台
本文作者系裴明明,网易杭州研究院轻舟云原生架构师,Harbor 开源项目维护者,主要负责网易轻舟云原生 DevOps 体系设计、研发及落地等,在云原生、DevOps、微服务架构等领域拥有丰富的经验。
Henry Zhang
2021/03/12
6460
Harbor应用案例:网易轻舟微服务平台
Harbor开源项目生产使用率高达47%
注:微信公众号不按照时间排序,请关注“亨利笔记”,并加星标以置顶,以免错过更新。 根据近日发布的 2020 年 CNCF 中国云原生调查报告显示,源自中国的首个 CNCF 开源项目 Harbor 在国内用户生产系统中使用率达到 47%,比一年前的调查结果(27%)大幅增长了 75%,这与 Harbor 社区和用户在国内发展的实际情况是一致的。 自从去年 Harbor 成为首个源自中国的 CNCF 毕业项目以来,和国内主要的公有云厂商、各个行业的用户以及云原生创业公司形成了良好的合作关系,Github 上共
Henry Zhang
2023/04/04
5730
Harbor开源项目生产使用率高达47%
探真科技携手HARBOR,镜像漏洞从此无所遁形
随着企业上云的步伐逐渐加快,Docker 作为当前云原生领域中最热门的开源容器引擎,其热度也是一路走高。虽然官方提供了公共的镜像仓库,但是从安全和效率等角度考虑,部署企业私有环境内的 Registry 也是非常必要的。Harbor 是由 VMware 公司中国研发中心发起的企业级的云原生制品仓库开源项目,现已从CNCF毕业。Harbor 可通过策略与基于角色的访问控制实现工件保护,扫描镜像内容使其免受漏洞侵害,最后对镜像进行可信签名。为企业用户提供了包括了 RBAC 权限管理、LDAP、审计、安全漏洞扫描、镜像验证、管理界面、自我注册、HA 等必需的功能,
CNCF
2021/05/07
4600
探真科技携手HARBOR,镜像漏洞从此无所遁形
Dragonfly项目
说明:Dragonfly是一个智能、基于P2P的镜像和文件分配系统。它旨在解决在文件传输过程中出现的低效、低成功率和浪费网络带宽问题。特别是大型文件分布场景,如应用程序分发、缓存分发、日日志分发、镜像分发等等。在阿里巴巴,Dragonfly每个月调用20亿次,分布式的数据是3.4PB。Dragonfly在阿里巴巴已成为最重要的基础设施。可靠性高达99.9999%。Dragonfly由Cloud Native Computing Foundation(CNCF)托管。如果您是一家希望帮助塑造容器打包、动态调度和面向微服务的技术发展的公司,请考虑加入CNCF。有关谁参与以及Dragonfly扮演角色的详细信息,请阅读Dragonfly CNCF项目建议书(https://github.com/cncf/toc/blob/master/proposals/dragonfly.adoc)。
CNCF
2019/12/05
7690
Harbor企业级落地实践 | 灵雀云AceCon演讲实录
近日,由 VMware 联合Intel、PingCAP、EMQ、灵雀云等合作伙伴联合主办的大型开源活动——2021智能云边开源峰会(2021 Open Source AceCon)成功落下帷幕。作为开源技术生态的年度盛会,大会邀请了多位来自开源领域的技术领导者及重要贡献者,分享“云原生、边缘计算、人工智能”三大热门技术趋势及洞察。
灵雀云
2021/10/26
5840
Harbor企业级落地实践 | 灵雀云AceCon演讲实录
Harbor开源镜像仓库企业级实践(1/3)
Harbor[1]是由VMware公司中国团队为企业用户设计的Registry server开源项目,包括了权限管理(RBAC)、LDAP、审计、管理界面、自我注册、HA等企业必需的功能,同时针对中国用户的特点,设计镜像复制和中文支持等功能。Harbor是CNCF毕业的项目,可提供合规性,性能和互操作性,以帮助您跨Kubernetes和Docker等云原生计算平台持续,安全地管理工件。
公众号: 云原生生态圈
2020/07/14
1.1K0
推荐阅读
相关推荐
Harbor功能特点看这一篇就够了
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档