导语 | CBS云硬盘为腾讯云客户提供了⾼可靠、⾼可⽤和低成本的统⼀块存储服务。CBS针对数据安全、云服务器⽣产、资源均衡、云盘介质升级等场景下的数据调度能⼒需求,抽象出统⼀数据调度平台。本文是对腾讯云存储专家工程师——杨光超在云+社区online的分享整理,希望与大家一同交流。
之前,我们开源了腾讯云数据库Tendis存储版,同时又对这个产品的适用场景、架构、特性和发展历程进行了分享。 而这次,我们还对Tendis存储版的技术特性进行深度解读。 进入公众号,后台回复“0120刘锐”,即可下载分享PPT。本文将主要分为简介,架构,和特性三个部分展开。 tendis存储版是一款支持redis协议,数据存放在磁盘的存储引擎。架构可以简单的分为三层,一个是tendis的server层,然后是rocksdb的引擎层,底层我们通常采用ssd来提高io速度,当然sata盘也是可以的。我们
假设一台服务器要从一个机房迁移到另外一个机房,这个过程就好比你去出差,从北京到上海,怎么准备才是最方便,安全,快捷的。 如果出去时间不长,有了银行卡,这些都不是问题,很多小件的东西都可以通过买买买来解决,这里的银行卡就好比服务器的iDRAC模块一样(也常叫ILO),而你的出行又不可避免需要使用有效证件,交通如此,住酒店如此,这里的身份证就好比系统的root密码一样重要。 而在这个基础上,你的出行还需要考虑是否带电脑,是否带拖鞋,是否带行李箱等等,这些都是我们需要考虑的点,对于服务器迁移来说也是
Instagram 有 2 亿用户,上面保留有用户分享的 200 亿张照片。从 2010 年到今年春之前,这些照片一直存放在 Amazon 的 EC2(弹性计算云)上,但现在这些照片已经被Instagram的一只小型团队搬到了收购了他们的 Facebook 的数据中心上,但 2 亿用户对此却毫不知情,仿佛什么事情都没发生过一样。他们是怎么做到的呢? Facebook 是在以 10 亿美元收购 Instagram 1 年后的 2013 年 4 月作出迁移决定的。整个迁移过程用时大约 1 年。尽管迁移工作量巨
好像好多人还不知道怎么备份和搬迁网站 这个问题其实再简单不过了,我就用宝塔示例一下吧
机房搬迁,肯定是要把机房里面运行的所有设备,包括交换路由、防火墙、服务器这些从老的机房下架,再把它们安装的新的机房里面。在设备搬运途中,设备肯定是要断电的。但如果有工程师对客户说,在搬机房的过程中能做到网络不中断,你信不信?
云函数(Serverless Cloud Function,SCF)是腾讯云为企业和开发者们提供的无服务器执行环境,帮助用户在无需购买和管理服务器的情况下运行代码。而随着方便快捷的云原生服务愈发受人青睐,业务量与日俱增,作为提供云函数SCF底层支持的云服务器,也承受着越来越大的压力。鲜为人知的是,承担云服务器创建任务的,是CBS云硬盘快照服务。当云函数SCF团队需要业务扩容或版本变更,云服务器创建并发量会增长为平常业务系统的数十倍。 通过不断优化服务,在云函数SCF业务高峰期,云硬盘快照系统扛住了1分钟
最近在处理服务器机房迁移的事宜,很多事情其实看起来简单,但是实现的时候总会有一些不如意的地方,很可能你考虑的是一个看起来非常稳定完美的迁移,但是 实现中总会有这样那样的限制最后不得不采用一种混合式或者看起来有些别扭的方式来实现。这种方式里面有一个坑就是如果一旦看到这种迂回或者别扭的方式能够 改善问题,那么后续再想进一步改进问题,就会有潜意识中的懒惰和不情愿,而这个也是我们碰到的很多遗留问题,兼容问题的源头,有时候我们说我们说这个东西 太烂,那个一点都不高级,其实很多时候我们就是始作俑者。 我们来看
JavaWeb是指通过java语言编写可以通过浏览器访问的程序的总称叫javaweb
这是前两天腾讯一技术总监来华科做的一个演讲, 今天才整理出来. 因为里面有些内容好逗, 为了免除给大牛带来烦恼, 就不署名了. 都是纯纯的干货, 都是亲身经历获得的经验, 十分感谢这位大牛. 为了穿插成文, 里面有些我自己的想法, 如有错误, 谢谢指出, 和大牛无关. 大纲 提升系统性能主要从提高CPU利用率, 和减小IO入手. 提高CPU利用率 减小IO 异步/协程 机械硬盘顺序写 高并发epoll 内存共享 无锁化 cache失效过载 作者举了一个异步的例子, 是关于获取时间的. 获取时间涉及到内核
字典类型容量变化过程叫做rehash,需要满足一定的条件才能触发扩容机制 服务器当前没有进行BGWRITEAOF或者BGSAVE命令,且当前键值对个数超过一维数组的大小,才会触发扩容。
基础网络是腾讯云上所有用户的公共网络资源池(如下图右所示)。所有云服务器的内网 IP 地址都由腾讯云统一分配,无法自定义网段划分、IP 地址。
企业要更换办公地址的时候,最头疼的问题就是搬迁机房,机房的搬迁可不是搬家那么简单,是否能顺利搬迁,将成为保障企业业务连续性的关键要素。在企业机房的搬迁中,最容易出现哪些问题?
编辑手记:Evernote在70天的时间里完成了3PB数据迁移至云端,整个过程竟然实现用户零感知。那么迁移过程到底使用了什么样的技术,我们一起来学习。 回顾:用户零感知到达云端: Evernote顺利完成向 Google 云平台的迁移 自2008年开始服务以来,Evernote已拥有自主配置和维护的服务器和网络。 我们能够用我们自己的方式,构建我们想要的服务。 当然自我管理也有一些限制,比如难以扩大规模、升级缓慢、维护昂贵。 虽然我们的基础设施在当时非常适合支持Evernote,但就现在来看,随着各方面的
自从使用了Orabbix监控Oracle以来,很多工作都能够通过这种配置可控的方式处理,有些问题是潜在问题,有些是遗留问题,多多少少还是提高了效率。 最近涉及机房搬迁,我们的Zabbix服务器也在迁移计划中,而因为部署的规模也不大,所以Orabbix和Zabbix Server放在了一起,结果搬迁之后问题就来了,搬迁之后开通了网络防火墙的前提下,系统层面的监控Zabbix Agent表现正常,而原本可用的Orabbix现在没有任何监控信息, 在这种监控基本失效的情况下,我总是不断的收到这
Gavin Zhu,携程软件技术专家,负责监控系统运维开发、ES系统运维及Clickhouse技术应用推广及运维工作。
服务器搬迁后不是简单能连接上服务器就可以了,还有许多的事情需要考虑,否则服务器不可用还是白搭。 我大体碰到了如下的一些问题,也能够反应出来对于系统的各种潜在隐患。 1 批量检测服务器的可用状态 如果有大批量的服务器搬迁,有些能够连通,有些不可以,使用telnet本身就有硬伤,我们直接设置个超时时间,对于服务是否可用一目了然。这个时候还是推荐使用nc命令。比如测试服务器10.129.128.37的22端口是否可通,超时时间为2秒,则可以使用如下的命令。 nc -z -v -n -w 2 10
经典游戏服务器端架构概述(下) 今天将详细说明全服分线模型和全服全线模型,正文如下: 1全服分线模型 一、模型描述 由于多进程服务器模型的发展,游戏开发者们首先发现,由于游戏业务的特点,那些需要
《王者荣耀》是全球首款5V5英雄公平对战手游, 腾讯游戏天美工作室开发的MOBA游手大作。作为全球用户数最多的手游,你有没有发现无论什么时候上线、玩多久,王者荣耀从来都如丝般顺滑,甚至连排队等待都不需要? 其实,每一次响起那句经典冲锋号"稳住,我们能赢"的时候,后端数据库也在严阵以待。峡谷的战场,就是数据的战场,每一次团战都是在海量的数据中增删改查。接下来,就为大家解密在这款现象级手游背后的腾讯云自研游戏数据库TcaplusDB数据库技术。 PartⅠ 面临的问题 对于王者荣耀而言,数据库是灵魂,承载着所
根据文章内容总结的摘要
在程序员的工作中,经常会遇到数据库更换服务器的情况,那么如何有效快速安全的将数据库搬迁呢?下面我介绍一种通过导出sql脚本,然后到新服务器中执行的方法来实现。
今年疫情带来的挑战很明显,远程办公和在线教育用户暴涨,从1月29到2月6日,日均扩容1.5w台主机。业务7×24小时不间断服务,远程办公和在线教育要求不能停服,停服一分钟都会影响成百上千万人的学习和工作,所以这一块业务对于我们的要求非常高。
云硬盘(Cloud Block Storage,CBS)是一种高可用、高牢靠、低本钱、可定制化的块存储设备,能够作为云服务器的独立可扩展硬盘运用,为云服务器实例供给高效牢靠的 存储 设备。云硬盘供给数据块级别的持久性存储,通常用作需要频频更新、细粒度更新的数据(如文件体系、数据库等)的主存储设备,具有高可用、高牢靠和高性能的特色。云硬盘选用三副本的分布式机制,将您的数据备份在不同的物理机上,防止单点毛病引起的数据丢失等问题,进步数据的牢靠性。
受疫情影响,多数企业员工目前无法回到写字楼办公,学生推迟开学,稳定高效的进行远程办公和直播授课成为2020年的开年刚需。2月,腾讯宣布疫情期间免费开放可支持300人在线会议的腾讯会议,央视新闻联播对此也给予了报道。 出生不久的腾讯会议瞬间成为了一款国民会议软件,海量用户呈几何级爆发涌入,1月29日开始到2月6日,腾讯会议每天都在进行资源扩容,日均扩容云主机接近1.5万台,8天总共扩容超过10万台云主机,共涉及超百万核的计算资源投入,2月10日,腾讯会议后台服务器请求数增长了5倍。 那么腾讯会议是如何做到
关于织梦DedeCMS程序整站迁移搬迁服务器/主机的问题是我在上一篇文章中给网友解决问题的时候想到的话题,我并没有帮他迁移数据。只是顺带想到就一并简单的记录学会织梦DedeCMS整站迁移主机/服务器,这里他没有更换域名,所以相对来说简单一些。
导语| 远程办公期间,在线会议用户需求激增,腾讯会议8天完成100万核云服务器扩展,Redis集群仅在半小时以内就高效完成了数十倍规模的扩容,单集群的扩容流程后台处理时间不超过30分钟。在这背后,腾讯云Redis是如何做到的呢?本文是伍旭飞老师在「云加社区沙龙online」的分享整理,详细阐述了腾讯云Redis无损扩容的实践和挑战。
我都记不清楚这是第几次搬迁博客主机了。写个博客咋这么难,到处迁徙,囧下,不过我希望这次是最后一次了,因为这次我买的是据说号称性能最强劲的 (mt) Media Temple 主机。 我购买的是 (mt) Media Temple 的 Dedivated-Virtual(DV)虚拟服务器的 BASE 版本,mt 把内存加倍之后,BASE 版本的性价比已经是非常高了,20GB 的空间,512MB 的内存 和 1T 的流量,已经足够用了,其实看重 mt 的最大原因还是他的稳定性。
我把制造业的八种浪费模式(左边)映射到我们运维的八种浪费模式(右边),这种浪费模式的整理是一个引子,目的就是让大家观察运维组织中存在的浪费行为,这种浪费行为的梳理可以更大面积的扩大,比如说到IT组织上。
更多内容请关注腾讯云大学公众号 从找不到需求险些被叫停,到支撑亿级DAU的数据库行业标杆,这款支撑了《王者荣耀》多个系统的腾讯云数据库TcaplusDB在风雨中走过了整整10年。辉映日月破风浪,十年一剑破九天。百万行代码就像淙淙流淌的数据溪流,终于在十年后汇成不可逾越的护城河。 1 出发 2010年前后,QQ空间很火,带动了基于SNS互动页游(WebSNS)的火爆,腾讯内部开始考虑怎么做页游。也开始建设页游基础技术体系,其中最重要的产出是研发自己的分布式数据库TcaplusDB。与MMOG游戏不同,通常W
云计算技术发展至今已经成为企业不可或缺的一部分,同时伴随着公有云模型的成熟,企业已经把部分数据迁移到公有云端,形成私有云与公有云并存的形式,即混合云逐渐成为常态。在混合云时代,企业要如何打造自己的云?甲骨文从自己的经验中摸索出PaaS六大标准,下面甲骨文公司副总裁及中国区技术产品事业部总经理吴承杨对此进行了介绍。 从最近和客户的沟通过程中,我们发现相对比较保守的政府、银行业,纷纷提出了上云的需求,说明了云计算的趋势已经覆盖所有行业,企业对于云计算的接受度、信任度,相比于前几年已经有明显的增长,正呼应了之前
数据库作为企业核心的数据存储引擎,在其提供服务的过程中,经常会因为各种各样的原因需要进行数据的迁移。数据库迁移作为一个古老的话题并不神秘,但因为迁移数据的重要性,以及业务对数据库可用性的高要求,导致数据库迁移的复杂度极高,一般都需要专业工具的协助才能完成。当前 ,市面上也已经提供了各种各样的数据库迁移工具。本文将介绍数据库迁移的步骤以及市面上常见的迁移工具。
在腾讯云数据库举办的【国产数据库专题线上技术沙龙】中,4月30日陈爱声的分享已经结束,没来得及参与的小伙伴不用担心,以下是直播的视频和文字回顾。 关注“腾讯云数据库”公众号,回复“0430陈爱声”,即可下载直播分享PPT。 大家好,我是陈爱声,目前负责腾讯云TBase产品实施和运维相关工作。非常感谢大家百忙之中抽空来到TBase直播间。 今天的分享主题是“TBase优秀的企业级能力原理剖析”,主要分为四个特性。 第一:数据透明加密能力。 第二:基于任意时间点的恢复能力。 第三:异构数据同步能力。 第
从找不到需求险些被叫停,到支撑亿级DAU的数据库行业标杆,这款支撑了《王者荣耀》多个系统的腾讯云数据库TcaplusDB在风雨中走过了整整10年。辉映日月破风浪,十年一剑破九天。百万行代码就像淙淙流淌的数据溪流,终于在十年后汇成不可逾越的护城河。 1 出发 2010年前后,QQ空间很火,带动了基于SNS互动页游(WebSNS)的火爆,腾讯内部开始考虑怎么做页游。也开始建设页游基础技术体系,其中最重要的产出是研发自己的分布式数据库TcaplusDB。与MMOG游戏不同,通常WebSNS游戏是全区全服的,数据
本文介绍了分布式数据库在金融互联网场景下的数据治理挑战和实践,重点介绍了PGXZ在微信支付项目中的数据治理方案,包括数据治理工程、数据治理平台、数据治理规范、数据治理流程、数据治理评估等方面的内容。通过严格的数据治理,可以提升数据质量、降低数据不可用风险、提升数据使用效率、提升数据价值。
导语:传统行业转型的过程中,腾讯向来扮演的是数字化助手的角色,腾讯云作为帮助企业数字化转型的入口,也已经成为腾讯的“独角兽”业务。 然而伴随着云业务的增长,腾讯内部业务如何上云,对于外界来说一直是个秘密。近日,腾讯自研上云项目负责人周小军首次披露,腾讯如何把内部海量的自研业务搬上云端的故事。以下是他的分享内容。 大家好,我今天分享的核心内容有三个: 腾讯自研业务如何从私有云的模式搬迁到公有云; 如何把这些大体量的业务搬到云端; 如何拥抱云原生。 腾讯的业务量非常庞大,社交业务包括QQ和空间的体量有
今天中午老蒋遇到一个网友要求帮他解决主机的问题,给的服务器开始居然没登录上去,后来才知道原来他用的是Windows系统镜像,问其为什么用WIN系统,何况他也是用的PHP+MYSQL程序建站的。告知自己在选择的时候也不懂选择什么镜像,看到熟悉的Win系统就选择,自己还捣鼓一天才弄成有个WEB环境的。
[1502177262557_639_1502177262854.png] 作者介绍:gavinliao(廖晶贵),腾讯云研发工程师,隶属于腾讯TEG-基础架构部-CBS云存储研发团队,主要负责分布
三地都是简陋的网络环境,却出人意料地采用BGP连接,昂贵的月租费,几年下来,什么样的路由器和防火墙都能买了,何必吊死在BGP上呢?
HttpServletResponse 类和 HttpServletRequest 类一样。每次请求进来,Tomcat 服务器都会创建一个 Response 对象传 递给 Servlet 程序去使用。HttpServletRequest 表示请求过来的信息,HttpServletResponse 表示所有响应的信息,
如果我们准备搭建正规网站且准备长期运营的,建议还是选择较为成熟的WEB面板或者脚本安装环境,毕竟通过多年的完善比较成熟,而且有较多的可用文档解决常规问题。且我们平时有在浏览个人博客或者论坛网站的时候会看到一些脚本工具,我们可以用来学习和体验使用。比如在这里我们有看到有网友分享的一键安装Caddy环境,以及PHP和SQLite,且可以快速的部署Typecho及WordPress网站。
金融领域数字化转型是指金融行业利用新兴技术,如人工智能、区块链、云计算、大数据等,对传统金融业务进行重构和升级,以提高金融业务的效率、降低成本、提升客户体验等。金融行业的数字化转型意味着业务重塑,从技术手段到实际运用整个流程都将发生巨变。在这些变化过程中,我们应该如何做出应对以及变化? 在 ArchSummit 全球架构师峰会(上海站),我们设置了【金融业数字化转型探索】专题,邀请陆金所技术总监朱益盛担任专题出品人,为专题内容质量把关。在此专题下,我们一共有四场分享,以下是详细介绍: 首先,我们邀请了宜信运
HttpServletResponse 类和 HttpServletRequest 类一样。每次请求进来,Tomcat 服务器都会创建一个 Response 对象传 递给 Servlet 程序去使用。HttpServletRequest 表示请求过来的信息,HttpServletResponse 表示所有响应的信息, 我们如果需要设置返回给客户端的信息,都可以通过 HttpServletResponse 对象来进行设置.
网站想要实现不关站备案就需要涉及到两个方面的考量,一个是需要服务器在境外,内陆服务器肯定是不行的;另一个则是需要禁止或者屏蔽域名首页的正常访问,那么为此子凡这里可以给搭建提供一些方法和思路。
老蒋之前在医院工作的时候用DEDECMS仿模板建站用的比较多,后来一直就没有接触过这款CMS,虽然这款CMS漏洞较多,但是安全处理的完善,其还是算一款非常不错的内容管理系统,比帝国CMS容易上手很多。这次在帮助一个客户定制一个模板在本地运营良好,但是搬迁上服务器之后出现首页出现index.htm Not Found!错误提示。
一场突袭而来的大雨猛烈冲刷着 DBA 小 D 身侧宽大的玻璃窗。窗外原蓝天白云映照下的深南大道转眼陷入一片阴暗。
负载均衡 负载的均衡,是分布式系统中一个永恒的话题,要让大家各尽其力齐心干活,发挥各自独特的优势,不能忙得忙死闲得闲死,影响战斗力。而且,负载均衡也是一个复杂的问题,什么是均衡,是一个很模糊的概念。比如,在分布式文件系统中,总共三百个数据块,平均分配到十个数据服务器上,就算均衡了么?其实不一定,因为每一个数据块需要若干个备份,各个备份的分布应该充分考虑到机架的位置,同一个机架的服务器间通信速度更快,而分布在不同机架则更具有安全性,不会在一棵树上吊死。。。 在这里说的负载均衡,是宽泛意义上的均
领取专属 10元无门槛券
手把手带您无忧上云