一、Kubernetes 如何管理存储资源: 理解volume 1)Kubernetes 如何通过 Volume 为集群中的容器提供存储; 2)实践几种常用的 Volume 类型并理解它们各自的应用场景...Volume 本节我们讨论 Kubernetes 的存储模型 Volume,学习如何将各种持久化存储映射到容器。 我们经常会说:容器和 Pod 是短暂的。...PersistentVolume (PV) 是外部存储系统中的一块存储空间,由管理员创建和维护。与 Volume 一样,PV 具有持久性,生命周期独立于 Pod。...需要为 Pod 分配存储资源时,用户可以创建一个 PVC,指明存储资源的容 量大小和访问模式(比如只读)等信息,Kubernetes 会查找并提供满足条件的 PV。...有了 PersistentVolumeClaim,用户只需要告诉 Kubernetes 需要什么样的存储资源,而不必关心真正的空间从哪里分配,如何访问等底层细节信息。
无论从何种角度考虑,盘活存储资源势在必行。...目前利用不同规格存储资源,并在不同规格存储资源之间取得负载均衡的主流方法是Ceph,通过设置大配比纠删码策略,为旧存储介质的处理提供更多操作空间。...通过强大的兼容性和硬件异构特性充分利用全部存储资源。...SRRS不独占硬件资源的特点使其可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合。...利用存储资源盘活系统SRRS有效盘活存储资源,对于提升基础设施运营管理水平、拓宽社会投资渠道、合理扩大有效投资以及降低债务风险、降低负债水平等都具有重要意义。
2、资源管理器 OushuDB支持三级资源管理: 全局资源管理:可以集成YARN,和其他系统共享集群资源。 OushuDB内部资源管理:可以支持查询,用户等级别的资源管理。...操作符级别资源管理:可以针对操作符分配和强制资源使用。 现在OushuDB支持多极资源队列。可以通过DDL方便的定义和修改资源队列。...下面是OushuDB资源管理器的主要架构图: image.png资源管理器中的各个组件作用如下: 请求处理器:接收查询派遣器进程的资源请求。 资源分配器:负责资源的分配。...资源池:保存所有资源的现有状态。 策略存储:保存所有的分配策略,将来会做到策略可定制。 资源代理:负责与全局资源管理器交互。...3、存储模块 OushuDB支持多种优化的存储格式,比如AO, Parquet, ORC, Magma。并提供HDFS,Hive协议外部表。其他各种存储和存储格式通过可插拔扩展框架访问。
随着IT技术的发展,存储数据的爆炸式增加,存储的地位变得越来越重要;存储部分逐渐地从应用系统中分离出来,形成了专门的存储系统,进而形成了专门的存储网络(SAN)。...研究表明,在目前的存储系统中,容量的利用率都很低,以传统磁盘存储为例,考虑到用户数据的不断增长,实际上平均40%-50%的磁盘容量从未被利用过,大量的、宝贵的存储资源被浪费掉了,没有发挥应有的作用。...同时为满足系统性能和以后升级扩容等方面的要求,客户一般购买超过实际数据容量需求3-4倍的磁盘,从而造成了存储空间资源的极大浪费。为什么资源闲置问题如此普遍?大体可以分为异构存储和SAN孤岛两个原因。...SAN孤岛与异构存储有非常直接的关系。由于存储设备来自多个厂商,而且各自有各自的操作规范,那么多个SAN之间很难实现相互协作,集中管理并实现资源的共享就更无从谈起了。...SAN孤岛无疑也将极大的增加企业存储系统的管理难度和运维成本,建议引入存储资源盘活系统来优化存储空间。
提到HBlock,一个更加普及的名字恐怕是存储资源盘活系统。存储资源盘活系统通过标准iSCSI协议提供虚拟Target和逻辑卷。它可以通过提高资源利用率,优化资源成本,助力企业用户实现绿色转型。...它能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池,通过分布式双控制器架构保证了低延迟、高可用、易拓展的特性;通过完善的控制台、命令行与API来统一调度管理所有存储资源...;通过强大的兼容性和独特的硬件异构特性充分利用全部存储资源。...存储资源盘活系统特别适用于边缘计算、混合云存储、次级存储(备份/视频监控)、提升硬件利用率等场景。如果部署在可靠的硬件环境中,还可以承载企业的重要工作负载。...因此,无论使用哪种存储协议,存储资源盘活系统都可以将各种服务器、空闲磁盘整合为统一高性能资源池,灵活调度、分配、使用、上云,打造无缝融入现有业务的存储系统。
容器和虚拟机确实有很多相同点,它们都提供了一种虚拟化途径,充分利用服务器空闲资源,提高了资源利用率。对于最终用户,也无需感知程序运行的环境是虚拟机还是容器。...集群的生产级操作需要许多组件 ,用户通常没有足够的技术能力;问题之二,是尽管 Kubernetes可以在多种类型的基础架构上运行,但多架构同时存在导致云原生平台的底层基础设施(即支持 Kubernetes 集群的计算、存储和网络资源...存储资源盘活系统(Storage Resource Reutilization System, SRRS)。SRRS 可以在存储层面解决上述问题。...SRRS 是一款纯用户态的绿色软件,只有150MB左右的安装包,不需要ROOT权限就可以安装在任何Linux操作系统上,不独占硬盘、操作系统,以2GB内存把各服务器中分散的磁盘整合成高性能的存储资源池,...通过分布式双控制器架构保证了低延迟、高可用、易拓展;支持x86、ARM、龙芯等异构、非对称服务器混合部署,通过功能全面完善的控制台、命令行与API来统一调度管理所有存储设备;通过强大的兼容性和硬件异构性充分利用全部存储资源
研究表明,在目前的存储系统中,容量的利用率都不高,以传统磁盘存储为例,考虑到用户数据的不断增长,实际上平均40%-50%的磁盘容量从未被利用过,大量的、宝贵的存储资源被浪费掉了,没有发挥应有的作用。...同时为满足系统性能和升级扩容等方面的要求,客户一般购买超过实际数据容量需求3-4倍的磁盘,从而造成了存储资源的极大浪费。为什么资源闲置问题如此普遍?大体可分为异构存储和数据孤岛两个原因。...数据孤岛与异构存储有直接的关系。由于存储设备来自多个厂商,而且各自有各自的操作规范,那么多个存储网络之间很难实现相互协作,集中管理并实现资源的共享就更无从谈起了。...通过强大的兼容性和硬件异构特性充分利用全部存储资源。...SRRS不独占硬件资源的特点使其可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合。
碳中和的春风帮助新基建补完了它的核心拼图,那就是存储资源盘活系统。 存储资源盘活系统是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池。...存储资源盘活系统不独占硬件资源,可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合,帮用户把现有服务器集群中存储资源利用率不高的设备进行统一管理,形成统一存储资源池...存储资源盘活系统为了降低能耗、响应新基建建设,在硬件适配与软件优化方面做了很多技术创新。...存储资源盘活系统还优化了EC编码效率,能够提升性能的同时大幅降低CPU占用,节省集群整体能耗。...因此,存储资源盘活系统可以称得上是百花齐放的新基建浪潮中的一块“核心拼图”。
随着ChatGPT这种大预言模型的训练数据和参数量呈指数增长,这些操作需要更多的计算资源和存储资源,这是导致大语言模型成本增加在原因。...这个时候,就需要存储资源盘活系统(Storage Resource Reutilization System,SRRS)。 存储资源盘活系统是一个ZIP包。...存储资源盘活系统会充分利用用户的全部资源来提供最好的性能,帮助用户进一步提高现有硬件资源的利用率。这对于硬件更新换代频率很快的AI领域来说是好消息:再也不用担心被淘汰的设备闲置了。...存储资源盘活系统是高性能的。存储资源盘活系统采用分布式双控制器架构,像传统硬件存储阵列一样提供低延迟和高可用性,像传统分布式存储一样提供高可扩展性和高吞吐量。...在AI的时代来临之前,存储资源盘活系统可以为其构建坚固、灵活的存储底座。
2023年3月10日,由百易传媒(DOIT)主办、上海市计算机学会与上海交通大学支持的第六届分布式存储高峰论坛在线上成功举办。存储资源盘活系统荣获“2023分布式存储产品金奖”。...此外,传统存储系统建设周期较长,基建赶不上业务发展,也是诸多企业面临的难题。在“双碳”目标日益紧迫的背景下,企业亟需通过创新数字技术,盘活存储资源,降本增效,实现可持续绿色发展。...分布式存储凭借灵活、可靠性强、扩展性强等方面的优势,成为存储行业未来发展趋势。针对以上需求,江峰提出了“存储资源盘活”的概念,并带领团队研发出首款存储资源盘活系统:HBlock。...HBlock可以把通用服务器及其管理的存储资源转换成高性能的虚拟存储阵列,通过标准iSCSI协议提供分布式块存储服务,帮助用户提高资源利用率,优化资源成本,助力企业用户实现绿色转型。...在“数字化”和“低碳化”的大趋势下,HBlock将坚持以科技创新推动产品升级,助力企业高效利用资源,驱动数字经济实现绿色高质量发展。
存储资源盘活系统是这种情况的优秀选择,它是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池,通过分布式双控制器架构保证了低延迟、高可用、易拓展的特性...;通过完善的控制台、命令行与API来统一调度管理所有存储设备;通过强大的兼容性和独特的硬件异构特性充分利用全部存储资源。...存储资源盘活系统支持硬件异构,集群中的每个Linux操作系统实例具有不同的硬件配置,例如不同的CPU数量、不同的内存大小、不同的本地硬盘驱动器容量等,将其统一抽象成一个单独的块设备提供给客户端,彻底消解数据孤岛...存储资源盘活系统会充分利用用户的全部资源来提供最好的性能,帮助用户进一步提高现有硬件资源的利用率。...存储资源盘活系统不独占硬件资源,可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合,帮用户把现有服务器集群中存储资源利用率不高的设备进行统一管理,形成统一存储资源池
存储资源盘活系统(HBlock)通过提高资源利用率,优化资源成本,助力企业用户实现绿色转型。...存储资源盘活系统的架构体系有两个核心:软件定义存储与分布式存储。...存储资源盘活系统正是具备了上述软件定义存储与分布式存储的优点,不独占硬件资源,可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合,帮用户把现有服务器集群中存储资源利用率不高的设备进行统一管理...,形成统一存储资源池。...后段 存储池容量不足、如何进行多资源池的流量调度、网关协议转换等问题。该项目体现了存储资源盘活系统的架构优势与天翼云存储产品HBlock团队的技术实力。
因此,如果把公司中所有服务器都看做一个整体,所有数据统一定义并存储,尽可能充分发挥其中所有硬件的效率,不光会消除数据孤岛,还会提升整体硬件利用率,变相“创造”出新的资源,节省购置新设备与其配套软件、服务设施的成本...存储资源盘活系统是贯彻硬件液化思想的产品之一,它是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池,通过分布式双控制器架构保证了低延迟、高可用、易拓展的特性...;通过完善的控制台、命令行与API来统一调度管理所有存储设备;通过强大的兼容性和独特的硬件异构特性充分利用全部存储资源。...存储资源盘活系统不独占硬件资源,可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合,帮用户把现有服务器集群中存储资源利用率不高的设备进行统一管理,形成统一存储资源池...若使用存储资源盘活系统与原有业务混合部署,可以不用增加4台服务器,硬件液化后原利用率提到了90%,总功率在10*600W=6000W的基础上略微增加,总能耗降低了约28%,制冷方面的要求也会随之降低约28%
存储资源盘活系统是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池,通过分布式双控制器架构保证了低延迟、高可用、易拓展的特性;通过完善的控制台、命令行与...API来统一调度管理所有存储资源;通过强大的兼容性和独特的硬件异构特性充分利用全部存储资源。...在硬件问题方面,存储资源盘活系统作为一组用户态进程来运行,与其他系统级、软硬件集成或云服务级软件定义的存储解决方案相比,存储资源盘活系统不依赖于任何特定版本的Linux内核或Linux发行版,不依赖或修改操作系统环境...存储资源盘活系统将文件打碎成若干数据块并进行分布式存储,具有良好的防篡改作用。...存储资源盘活系统实现纯软件层面容错能力,适合区块链高并发,经常回滚的场景。 存储资源盘活系统作为纯软件的分布式块存储产品,增加存储节点即可实现动态扩容,天然适合区块链。
对象存储 COS 简介 对象存储(Cloud Object Storage) COS 是腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务...COS作为一款云端存储产品,用户无需进行传统硬件的采购、部署和运维,从而节省了运维工作和托管成本;支持按量付费,且无容量限制,用户无需预先支付任何预留存储空间的费用;COS还提供多样化的存储类型,覆盖数据热...、温、冷和离、在线存储能力,用户更可通过生命周期管理进行数据降冷,进一步降低成本。...将 Typecho 数据存储在 COS COS团队专为Typecho开发插件,将Typecho与对象存储COS打通,以便Typecho的附件、图片的网站静态资源保存在云端COS上: 1、释放存储和管理数据的压力...,节省部署存储成本,相比于自己搭建的本地存储,云对象存储COS更加弹性灵活,即开即用,按需购买,省钱,省心; 2、节省Typecho博客服务器网络成本,用户查看图片附件时、将直连云端 COS,不占用Typecho
存储资源盘活系统可以补全存储安全问题。存储资源盘活系统是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池。...此外,存储资源盘活系统解压后只需几个命令行就可以完成配置,还搭配直观的图形化界面,最大限度避免了因配置错误而导致的安全问题。...面对外部事故导致能源供给不稳定的情况,存储资源盘活系统可适应网络不稳定、电压电流不稳定等弱网弱电场景。...当服务器宕机时,存储资源盘活系统可以在供电恢复服务器重启后,无缝恢复至断电前的运行状态,具备可靠的自愈能力。...存储资源盘活系统是国内完全自主研发的纯软件存储控制器,攻克了分布式双控架构(distributed dual-controller architecture)技术。
之前写了两篇文章《.NET资源并不限于.ResX文件》(上篇、下篇),介绍了如何通过自定义ResourceManager的方式来扩展资源的存储形式。...前者是一个全局意义的资源文件,供所有Web页共享;后者则是基于某个Web页单独使用的本地资源。...二、创建自定义ResourceProvider 要让ASP.NET现有的资源编程方式将我们添加的XML作为资源存储,必须了解ASP.NET内部采用的资源读取机制。...所不同的是,CreateGlobalResourceProvider方法返回的XmlResourceProvider基于的资源文件是一个存储在GlobalResources目录下指定名称(classKey....resx文件,你可以采用任意存储形式[上篇] .NET的资源并不限于.resx文件,你可以采用任意存储形式[下篇] 如何在ASP.NET应用中使用自定义资源存储形式
存储资源盘活系统是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池。...它不独占硬件资源,可与现有应用混合部署在同一套硬件设备上,不影响现有业务的运行的同时将闲置存储资源予以整合,帮用户把现有服务器集群中存储资源利用率不高的设备进行统一管理,形成统一存储资源池。...因此,存储资源盘活系统可以很方便地部署在各种边缘机房中,同时解决了低时延与存储能力两个问题。...存储资源盘活系统兼具强大的性能和低功耗特性,更适合部署在边缘侧。存储资源盘活系统是天生面向混沌环境设计的产品,可对抗能源供给不稳定的导致网络不稳定、电压电流不稳定等弱网弱电场景。...边缘云在计算和存储资源方面相比中心云更加受限,而应用又多对实时性要求极高。 存储资源盘活系统将文件打碎成若干数据块并进行分布式存储,具有良好的防篡改作用。
本文主要介绍了,用COS和CDN存储静态资源,以及腾讯云API的使用。...COS 对象存储(Cloud Object Storage,COS)是腾讯云提供的一种存储海量文件的分布式存储服务,具有高扩展性、低成本、可靠安全等优点。...我们只需要关心把一个个对象存储到“存储桶”中,其物理上是怎么存储的我们不需要关心。...腾讯云COS和CDN 为了提高我们页面的体验,我们可以选择结合腾讯云的对象存储COS和内容分发网络CDN来托管我们的静态资源。...痛点:设计同学直接用COSBrowser管理COS上的资源,每次替换资源后,CDN的更新有延时,需要手动触发一下腾讯云的CDN刷新,但是COSBrower客户端上没有可以刷新的地方,每次需要登录腾讯云的网页管理端去刷新
存储资源盘活系统具备不独占硬件资源的特点,可以在不影响现有业务运行的同时将闲置存储资源进行整合,形成统一存储资源池,能够极大程度的提升数据存储的利用率,从而降低能耗。...硬件适配方面,存储资源盘活系统支持ARM和X86双架构并存,利用ARM处理器的低功耗优势可以降低能耗,同时,支持SSD在内的多种存储介质,而SSD可以提供约10倍于HDD的性能,而功耗仅为机械盘存储的50%...存储资源盘活系统可以有效对抗能源供给不稳定产生的一系列问题。...当企业遇到因断电或极端条件导致的服务器宕机情况时,存储资源盘活系统可以在供电恢复服务器重启后,恢复至断电前的运行状态,具备超强的“自愈力”;在网络、电路不稳定的环境下,存储资源盘活系统可将数据直接写入磁盘...此时,打算新建一个能够提供相同标准服务的机房,但装载了存储资源盘活系统。假设原先磁盘利用率为60%,存储资源盘活系统可以将利用率提升为90%,使机柜数及相应数据减少33%。
领取专属 10元无门槛券
手把手带您无忧上云