开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

社区首页 >专栏 >NVIDIA A100助力DGX SuperPOD系统，打破16项世界纪录

NVIDIA A100助力DGX SuperPOD系统，打破16项世界纪录

镁客网

发布于 2020-08-02 08:57:23

发布于 2020-08-02 08:57:23

7390

举报

文章被收录于专栏：镁客网镁客网

英伟达是唯一一家在MLPerf Training v0.7测试中均采用市售商用产品的公司。

策划&撰写：家衡

北京时间7月30日，MLPerf组织发布了第三个版本MLPerf Training v0.7基准测试（Benchmark）结果。在这次测试中，NVIDIA DGX SuperPOD超级计算机系统共打破16项世界纪录。

MLPerf是成立于2018年5月的行业基准测试组织，致力于机器学习硬件、软件和服务的训练和推理性能测试，囊括行业中几乎所有知名企业和机构，比如Intel、NVIDIA、Google、微软、阿里巴巴等。

DGX SuperPOD系统公布于去年6月17号，最初由96台 NVIDIA DGX-2H 超级计算机和 Mellanox 互连技术在短短三周内建成，提供9.4千兆次的处理能力，用于该公司在无人驾驶车辆部署计划中的需求。

而此次创造纪录的NVIDIA DGX SuperPOD系统主要基于Ampere架构以及Volta架构，并且搭载了今年5月份发布的Ampere架构GPU A100。

在强化学习测试上，NVIDIA用256块A100卡和64块AMD Epyc 7742 CPU核心，用时29.7分钟，成功训练了一款全尺寸19x19围棋模型。该测试是本轮最复杂的测试，内容涵盖从游戏到训练的多项操作。

此前NVIDIA在2018年12月的首次测试中就创下6项记录，次年7月再次创下8项记录。特别值得一提的是，英伟达是唯一一家在MLPerf Training v0.7测试中均采用市售商用产品的公司。

本文参与腾讯云自媒体同步曝光计划，分享自微信公众号。

原始发表：2020-07-30，如有侵权请联系 cloudcommunity@tencent.com 删除

腾讯云测试服务

本文分享自镁客网微信公众号，前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

腾讯云测试服务

评论

登录后参与评论

暂无评论

编辑精选文章

换一批

万字详解高可用架构设计

Go 开发者必备：Protocol Buffers 入门指南

10分钟带你彻底搞懂分布式链路跟踪

Docker 基础知识 - 使用卷(volume)管理应用程序数据

node.js 容器容器镜像服务

卷（volumes）是 Docker 容器生产和使用持久化数据的首选机制。绑定挂载（bind mounts）依赖于主机的目录结构，卷（volumes）完全由 Docker 管理。卷与绑定挂载相比有几个优势：

用户8803964

2021/07/05

3.9K1

docker数据管理

容器容器镜像服务存储 maven node.js

用户在使用Docker的过程中，往往需要能查看容器内应用产生的数据，或者需要把容器内的数据进行备份，甚至多个容器之间进行数据共享，这必然涉及到容器的数据管理操作。

yuezhimi

2020/09/30

7890

Docker数据管理

容器容器镜像服务

在前面我们详细学习了docker的三大核心概念：镜像、容器和仓库，接下来开始学习如何管理数据。在实际工作中使用docker，往往需要对数据进行持久化，或者需要在多个容器之间进行数据共享，此时必然会使用到容器数据管理的各种操作。

啃饼思录

2020/12/29

1.4K0

容器中的数据管理

容器容器镜像服务网站 html

本节学习的内容是如何管理容器中的数据以及容器之间的数据,我们将要学习如下两个主要方式:

字母哥博客

2020/09/23

8930

Docker 数据管理

我们已经熟悉了 -v 或者 --volume，官方最近建议( Docker 17.06+ ) 使用 --mount。官方文档：https://docs.docker.com/engine/admin/volumes/ 类型 bind volume tmpfs source source 或 src destination destination 或 dst 或 target volumes 创建 volume $ docker volume create VOLUME_NAME $ dock

康怀帅

2018/02/28

1.6K0

Docker数据管理

容器容器镜像服务编程算法

数据卷（ Data Volumes ）是一个可供容器使用的特殊目录，它将主机操作系统目录直接映射进容器，类似于 Linux 中的 mount 行为。

海盗船长

2021/12/07

8680

No zuo no die ，用Docker安装Mysql

容器镜像服务云数据库 SQL Server shell grep

回显，GENERATED ROOT PASSWORD: Axegh3kAJyDLaRuBemecis&EShOs

birdskyws

2018/09/12

1.2K0

No zuo no die ，用Docker安装Mysql

Docker学习笔记之Docker的数据管理和存储

容器镜像服务

数据是应用程序重要的产出，所以很好的管理和存储数据，是对应用程序劳动结果的尊重。特别是在大数据时代，所有的数据都是重要的资产，保护好数据是每个开发者必须掌握的技能。我们知道，在 Docker 里，容器运行的文件系统处于沙盒环境中，与外界其实是隔离的，那么我们又要如何在 Docker 中合理的通过文件与外界进行数据交换呢？在这一小节中，我们就来介绍 Docker 中与文件数据有关的内容。

Jetpropelledsnake21

2019/03/04

1K0

Docker学习笔记之Docker的数据管理和存储

Docker 入门到实战教程(六)Docker数据卷

容器容器镜像服务云数据库 postgresql

一. 前言上一篇介绍到如何构建镜像以及镜像管理,不知道大家学到现在有没有疑问?比如我运行web服务产生的日志,我如何在宿主机上看到?我想安装mysql或者redis等,配置文件如何配置,可以进到容器

小东啊

2020/07/23

1.6K0

Docker 入门到实战教程(六)Docker数据卷

Docker核心技术之数据管理

容器容器镜像服务 node.js

为解决这些问题，docker加入了数据卷(volumes)机制，能很好解决上面问题，以实现：

Lansonli

2021/10/09

4250

Docker实践(三):数据持久化及共享

容器容器镜像服务 html

在Linux上运行的Docker有三种不同的方式将数据从 Docker Host挂载到 Docker 容器，并实现数据的读取和存储：volumes、bind mounts、tmpfs。

loong576

2019/09/10

9320

Docker实践(三):数据持久化及共享

Docker应用程序数据管理与持久化

默认情况下，container内部新创建文件或者修改文件，结果会保存在container的可读写层中，这意味着：当container消失时，与container一体的可读写层也一并消失，数据并没有持久化。并且，当一个container需要其它container中可读写层的数据时，取出操作非常困难。

Power

2025/03/03

1420

Docker如何管理数据

容器数据库 sql 容器镜像服务 bash

http://os.51cto.com/art/201406/443516.htm 到目前我们介绍了一些Docker的基础概念, 知道了如何使用Docker的p_w_picpath，也知道了如何在多个container间通过网络通讯. 在这章里我们将介绍如何在docker的container内管理数据以及如何在不同的container间共享数据。我们将介绍两种主要的在docker中管理数据的方法： Data volumes Data volume container Data volumes 一个 data volume 就是一个在一个或者多个container里的特殊用途的目录。它绕过了 Union File System (译者：这里不确定，需要研究)为持久化数据、共享数据提供了下面这一些有用的特性： Data volumes 可以在不同的container之间共享和重用数据对 Data volume 的修改及时生效（译者：data volumn是一个目录，多个container都挂载这个目录，具体的可以通过 docker inspect 看 volumne的信息) 对 data volume 修改内容在升级p_w_picpath的时候不会被包括进去 (译者：在docker的整个设计中p_w_picpath是一个无状态的，这样对升级重用非常有利。而标记状态的数据，比如数据库的数据，生产的log之类的应该放到volume里。volume的持久化和恢复在下面有介绍，是通过文件的形式的，而不是通过p_w_picpath) Volumes 的持久化直到没有container使用他们添加数据卷你可以在docker run 的时候使用 -v 来添加一个 data volume。这个参数在docker run 的时候可以多次使用来添加多个 data volumes。让我们为我们的web application container挂载一个 volume。 $ sudo docker run -d -P --name web -v /webapp training/webapp python app.py 这里一个新的volume会创建到container里的 /webapp. （译者：如果你通过ssh或者通过 -i 登陆到你的container的一个shell里，使用 ls /webapp 可以验证挂载成功了) 注意: 你也可以在Dockerfile里添加 VOLUME 字段，这样在创建一个新的p_w_picpath的 container是就会自动的创建新的volume. 安装一个目录作为数据卷使用 -v 不仅能创建一个新的 volume，还可以把宿主机一个目录mount到container里。 $ sudo docker run -d -P --name web -v /src/webapp:/opt/webapp training/webapp python app.py 这条命令会把本地目录 /src/webapp mount到container里的 /opt/webapp 目录上。用这个方法来测试程序非常方便，比如我们可以把我们的源代码通过这个方法mount到container里，修改本地代码后立即就可以看到修改后的代码是如何在container里工作的了。宿主机的目录必须是绝对路径，如果这个目录不存在docker会为你自动创建。注意这里是没法用 Dockerfile实现的，因为这样的用法有悖于可移植性和共享. 因为本地目录就像他名字告诉我们的，是和本地相关的，不一定可以在所有的宿主机上工作.(译者: 鬼知道你在使用p_w_picpath的时候的host是啥样子的） Docker默认设置volume是可读写的，但是我们也可以mount一个目录为只读： $ sudo docker run -d -P --name web -v /src/webapp:/opt/webapp:ro training/webapp python app.py 这里我们同样mount了 /src/webapp 目录，但是我们加上了 ro 参数，告诉docker这个volume是只读的. 创建并安装数据卷容器如果你有一些持久化的数据，并且想在不同的container之间共享这些数据，或者想在一些没有持久化的container中使用，最好的方法就是使用 Data Volumn Container, 在把数据mount到你的container里.(译者：如开篇译者提到的docker的container是无状态的，也就是说标记状态的数据，例如：数据库数据，应用程序的log 等等，是不应该放到container里的，而是放到 Data Volume Container里, 这点和f

DevinGeng

2019/04/09

1.1K0

Docker学习——数据管理、使用网络（三）

这一章介绍如何在 Docker 内部以及容器之间管理数据，在容器中管理数据主要有两种方式：

wuweixiang

2018/12/06

5790

06. 管理Docker容器数据

centos 容器服务 dockerfile 云原生

在生产环境中使用 Docker，一方面，需要对数据进行保存或者在多个容器之间进行数据共享；另一方面，在 Docker 的容器被删除后，并不会保留容器的状态信息。那么如何实现信息的持久化呢？这必然涉及容器的数据管理。

有一只柴犬

2024/01/23

1710

06. 管理Docker容器数据

06. 管理Docker容器数据

数据数据管理主机容器管理

在生产环境中使用 Docker，一方面，需要对数据进行保存或者在多个容器之间进行数据共享；另一方面，在 Docker 的容器被删除后，并不会保留容器的状态信息。那么如何实现信息的持久化呢？这必然涉及容器的数据管理。

有一只柴犬

2024/01/25

1630

06. 管理Docker容器数据

Docker 学习笔记-数据管理

容器容器镜像服务数据库 sql 编程算法

我们在使用 docker 的时候会将一些数据（例如网站文件、配置文件、数据库文件等）存储在容器中。这样存在一个严重的问题，如果容器出现损坏（例如无法启动，被删除等）那么存储在容器中的数据就会丢失，即使我们进行了容器备份，数据也不可能恢复到故障发生时。如果要解决这个问题，我们就需要用到 docker 的数据管理。在 docker 中数据管理一共有两种方式，分别是数据卷和数据卷容器，下面我们来一一讲解。

喵叔

2020/09/08

5340

Docker 数据管理介绍

node.js 容器容器镜像服务编程算法存储

默认容器的数据是保存在容器的可读写层，当容器被删除时其上的数据也会丢失，所以为了实现数据的持久性则需要选择一种数据持久技术来保存数据。官方提供了三种存储方式：Volumes、Bind mounts和tmpfs。前面还介绍了：Docker 服务终端 UI 管理工具

民工哥

2021/03/15

7590

Docker存储卷

容器容器镜像服务存储

Docker镜像由多个只读层叠加而成，启动容器时，Docker会加载只读镜像层并在镜像栈顶部添加一个读写层。

Alone-林

2022/08/23

8880

02、数据卷（Data Volumes）以及dockefile详解

容器 data 镜像数据主机

天蝎座的程序媛

2023/10/17

5650

02、数据卷（Data Volumes）以及dockefile详解

相关推荐

Docker 基础知识 - 使用卷(volume)管理应用程序数据

更多 >