首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

腾讯首次披露业务上历程

然而伴随着业务的增长,腾讯内部业务如何上,对于外界来说一直是个秘密。近日,腾讯项目负责人周小军首次披露,腾讯如何把内部海量的业务搬上云端的故事。以下是他的分享内容。...直播业务上模式是一整套直播业务从机房搬迁到公有机房,在腾讯上提供服务,完成国内和海外几十个节点的建设,服务于的直播业务和外部客户。...第二个阶段是沙箱,这个阶段是在腾讯上建立一个逻辑隔离的私有网络空间,利用腾讯的IaaS服务,使用的虚拟机、的网络、的机房来支撑业务的服务。...内部、企业内部我们有一整套的安全体系。上后,我们结合上的一些安全产品,以及原来自的安全服务和安全策略,制定混合的安全通用体系。...业务层有应用防护,运维有运维安全,上有丰富的产品可以去使用。然后我们也打造了一些内部积累的安全方案,并回馈到上。形成了公有云安全产品安全产品两者相互匹配融合的上案例解决方案。

15.5K23

腾讯数据库CynosDB存储架构揭秘

本文作者:许中清,腾讯数据库CynosDB的分布式存储CynosStore负责人。从事数据库内核开发、数据库产品架构和规划。...曾就职于华为,2015年加入腾讯,参与过TBase(PGXZ)、CynosDB等数据库产品研发。专注于关系数据库、数据库集群、新型数据库架构等领域。...企业IT系统迁移到公有上已然是正在发生的趋势。数据库服务,作为公有上提供的关键组件,是企业客户是否愿意将自己运行多年的系统搬到上的关键考量之一。...CynosDB for PostgreSQL是腾讯的一款原生数据库,其主要核心思想来自于亚马逊的数据库服务Aurora。这种核心思想就是“基于日志的存储”和“存储计算分离”。...除此之外,每个Store Node会自动将数据和日志持续地备份到腾讯对象存储服务COS上,用来实现PITR(即时恢复)功能。

13.6K150
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    腾讯HIDS「洋葱」后台上架构演进实践

    文|Louis、Jaylam 导语 “洋葱”系统是腾讯的主机入侵检测系统(HIDS),能够实时采集服务器上的各种行为并进行实时关联分析和落地存储,承载公司所有的服务器、虚拟机和容器的入侵防护、漏洞检测...洋葱作为公司的老牌安全系统,从2007年开始预,经过几代洋葱人的不断努力,洋葱的功能不断完善、架构几经迭代,满足了公司的服务器安全需求。现在进入计算时代,洋葱也要跟随业务拥抱原生和DevOps。...主要原理是: (1) 引入外部存储:腾讯COS服务和CFS网络磁盘服务 在文件分片下载请求到达任意一个download容器时,服务会检查CFS是否存在待下载的文件,如果不在,会向COS发起文件拉取请求...(2) 引入外部缓存服务:腾讯Redis服务 当文件分片上传请求到达任意一个upload容器时,服务会检查Redis是否由该文件上传的状态信息,如果存在,则读取状态信息并向Reids中继续写入对应分片数据...效提升 原有功能从开发完成到发布耗时由原有的2~3天缩短至1小时内。

    1.6K180

    腾讯汤桢乾:腾讯交换机成长之路

    2020 SONiC产业生态研讨会回顾 “2020 SONiC产业生态研讨会”于9月19日圆满落幕,腾讯网络平台部汤桢乾带来了主题演讲《腾讯交换机成长之路》。 腾讯为什么要做?...对于管理平面,在2019年腾讯的基础设施服务能力已经进入了“双百时代”,腾讯的服务器数量超过了100万台,与此同时腾讯的峰值带宽已经突破了100T。...对于腾讯交换机来说,在硬件设计阶段引入了 BMC,可以在硬件层面做到管控分离。同时腾讯交换机可以跟服务器共享运营生态,真正的做到Switch as a Server。 ?...目前腾讯交换机已经在数据中心实现了大规模部署,稳定运行近一年,显著提升了网络系统的可靠性和运营效率。...随着腾讯网络端到端计划的推进,已经逐步打造了一个自主可控的网络业务系统,相信未来腾讯交换机会给行业带来更多惊喜。 ?

    1.3K40

    聚焦新基建,腾讯十余项技术应用集中亮相

    无论是从消费互联网到产业互联网,还是聚焦“新基建”,技术都是腾讯战略布局的底气所在。 在转型产业互联网后,腾讯原本自用的技术和业务,开始通过腾讯对外输出。...9月11日,在2020腾讯全球数字生态大会原生技术专场,腾讯就集中展示了在新基建和数字化转型领域多年来的技术积淀与产品服务,从服务器到数据中心,再到云端软件,揭开了腾讯技术领域的全景图...未来,依托大量的技术积累与海量用户服务经验,腾讯也将继续加速构建技术体系,为各行各业提供更优质的计算服务。...在原生技术专场上,还有许多源于腾讯自用的原生技术,正依托腾讯,以SaaS的形式为数字化提供助力。...从服务器到数据中心,再到云端软件,腾讯已经在计算技术领域进行了广泛布局。

    1K63

    免费报名 | 腾讯数据库CynosDB交流会

    All in +时代,数据库的高可用性、按需付费、按需扩展等属性解放了大批开发者。...腾讯发布的数据库CynosDB作为国内首款同时兼容MySQL和PG的原生数据库在业内引发热议,还不够了解TA?那么本期分享你一定不能错过!...本期+社区技术沙龙将全方位解读CynosDB,揭秘技术内幕,解读兼容两大主流开源数据库的一主多读架构、高可用架构及快速恢复实现、可计算智能存储和分布式存储。...Cloud native为数据库以及传统数据库打开了崭新的发展方向,腾讯CynosDB(MySQL)正是在此方向上衍生而来,专为而打造CynosDB存储与计算分离的架构实现,不仅使其在产品性能、扩展性

    1.1K30

    腾讯数据库CynosDB发布会现场实录

    2018年11月22日, 腾讯新一代原生数据库CynosDB正式发布。这是业界第一款全面兼容市面上两大最主流的开源数据库MySQL和PostgreSQL的高性能企业级分布式数据库。...我是腾讯数据库产品中心NewSQL的产品负责人,我叫刘峰。我想在座的各位有谁了解什么叫NewSQL?我给出一个比较狭义的定义,NewSQL其实就是SQL加上NoSQL。...如果前两个重要的历史时期你们错过了,那么此时此刻是第三个重要的时刻,腾讯的NewSQL数据库的诞生。 我们首先来看一下数据库有哪些类型,有两种,搬迁和原生。...为了解决传统数据库的问题,我们作为服务厂商提供了一个完整的一站式的解决方案——腾讯的数据库产品CynosDB。...CynosDB是腾讯的高性能、高可用、企业级数据库,兼容开源数据库MySQL和PostgreSQL。 我们来看一下我们当初是怎么考虑要设计这样一款数据库的。

    1K20

    免费报名 | 腾讯数据库CynosDB交流会

    All in +时代,数据库的高可用性、按需付费、按需扩展等属性解放了大批开发者。腾讯发布的数据库CynosDB作为国内首款同时兼容MySQL和PG的原生数据库在业内引发热议,还不够了解TA?...本期+社区技术沙龙将全方位解读CynosDB,揭秘技术内幕,解读兼容两大主流开源数据库的一主多读架构、高可用架构及快速恢复实现、可计算智能存储和分布式存储。...Cloud native为数据库以及传统数据库打开了崭新的发展方向,腾讯CynosDB(MySQL)正是在此方向上衍生而来,专为而打造CynosDB存储与计算分离的架构实现,不仅使其在产品性能、扩展性...腾小 赞赏 长按二维码向我转账 ? 受苹果公司新规定影响,微信 iOS 版的赞赏功能被关闭,可通过二维码转账支持公众号。

    1.1K30

    腾讯交换机系统优化之路

    摘自https://www.opencompute.org/projects/sonic 腾讯交换机采用白盒硬件 + NOS模式, 基于SONiC( Software for Open Networking...三、管理平面突破 2019年,腾讯基础设施服务能力进入“双百时代”(服务器数量超过100W,与此同时,腾讯峰值带宽突破100T),服务和流量迈入全球第一梯队。...腾讯交换机团队与湖南大学合作推出的集中式路由算法,可以有效改善数据中心网络的故障收敛性能。...网关硬件卸载总体架构 五、展望未来 目前,腾讯交换机稳定运行近一年,大幅提升了网络系统的可靠性和运营效率,并在疫情期间承载腾讯关键业务,经受住了考验。...随着网络端到端计划的逐步推进,腾讯交换机将会出现在越来越多的场景,为而生的腾讯网络会在未来带给我们更多惊喜。

    2.7K30

    腾讯产品有哪些?

    今天我们来讲讲腾讯的常用产品有哪些?...用户不需要担心计算服务的中断以及数据的丢失,对于腾讯独有的云游戏这个产品腾讯不仅仅提供了云游戏的接入,同时还提供了云游戏的运营这样独特的服务。...,选择不同的服务器产品。...四.腾讯数据库 腾讯数据库产品,同样为用户提供了选择的能力,用户可以依据业务系统的需求,在腾讯数据库平台当中,选择mysql ,sqlserver mariaDB, postgresql 等不同的数据库产品和数据库平台...用户可以依据不同的领域选择不同的计算应用,从而满足自己的业务需求, 最后奉上腾讯福利活动: 活动一:腾讯新客户代金券2860元 活动二:热门产品秒杀活动

    11.7K50

    腾讯产品有哪些?

    今天我们来讲讲腾讯的常用产品有哪些?...用户不需要担心计算服务的中断以及数据的丢失,对于腾讯独有的云游戏这个产品腾讯不仅仅提供了云游戏的接入,同时还提供了云游戏的运营这样独特的服务。...,选择不同的服务器产品。...666.png 三.腾讯存储 腾讯存储,依据企业不同的应用场景和需求,提供了不同类型的存储产品,分别包括对象存储、文件存储、归档存储、存储网关以及私有存储,如果企业要实现将文件存储到云端,那么就可以选择文件存储...777.png 四.腾讯数据库 腾讯数据库产品,同样为用户提供了选择的能力,用户可以依据业务系统的需求,在腾讯数据库平台当中,选择mysql ,sqlserver mariaDB, postgresql

    13K21

    腾讯媒体分享计划

    腾讯媒体分享计划 “腾讯媒体计划”是由腾讯发起的为期一年的为广大媒体扶持的计划,对于有 20 篇以上符合投稿要求原创技术文章的博主或微信公众号,提供各大技术社区及平台百万级流量支持、技术书籍...、腾讯周边礼品、线下技术沙龙及大会的门票、腾讯新品内测试用体验、与开源项目大牛零距离接触、社区成长值激励、服务器 CVM 代金券(有效期为3个月,使用条件:限新购、续费,适用付费类型:预付费)。...invite_code=1y0wuqjulw97v 扶持奖励 提供各大技术社区及平台百万级流量支持、技术书籍、腾讯周边礼品、线下技术沙龙及大会的门票、腾讯新品内测试用体验、与开源项目大牛零距离接触、...计划流程 注册/登录腾讯账号-申请分享计划-审核通过后可获取分享资源包。我们会把你原有博客或微信公众号的文章迁移至腾讯专栏,后期会定期更新新增文章至腾讯专栏。...奖励名包括cn域名和180元服务器代金券 ? 欢迎各位一同加入腾讯媒体计划,对于站点的宣传和SEO都是不错滴!,对于要求20篇原创其实并不难,对于用心的博客相信这个没有阻碍!

    2.9K20

    能力再获认可,腾讯数据库入选 Forrester Translytical 报告

    腾讯数据库经历了腾讯业务的飞速发展,海量业务群雄并起时代,经过无数核心业务和亿级应用的苛刻打磨,在性能上逐渐突破了性能瓶颈、数据可靠性保障、高可用等“不可能三角”的技术难题。...第七次全国人口普查实现全面电子化的背后主要由腾讯数据库提供支持。...版本等完善的产品服务体系。...在金融领域,腾讯数据库已服务近半国内TOP20银行,TOP10银行中服务比例也高达60%,助力20余家金融机构进行核心系统改造,处于行业领先地位。...未来五年,腾讯数据库还将助力1000家金融机构实现核心系统数据库国产化转型。 ﹀ ﹀ ﹀ -- 更多精彩 -- HTAP大潮下,TDSQL的探索与实践 14亿人的大项目,拿下!

    1.1K20

    腾讯业务上:优化Kubernetes集群负载的技术方案探讨

    组件(Pod-Resource-Compress-Ratio-Reconciler)基于Workload的历史监控数据,动态的/周期性去调整压缩比。...组件(Node-Resource-Oversale-Ratio-Reconciler)基于节点历史监控数据,动态的/周期性的去调整超卖比例。...的支持,只能注册一个后端监控服务,如果集群中有些业务通过prometheus来expose应用自定义指标,也有一些业务通过Monitor来监控应用自定义指标,这个时候就做不到All in了,这在for的场景中...我们了HPAPlus-Controller组件: 每个HPA对象会启动一个goroutine协程专门负责该HPA对象的管理和计算工作,各个协程并行执行,极大的优化了性能。...我们正与腾讯监控产品团队深入合作,更好的服务于腾讯业务上

    6.3K576

    Firestorm - 腾讯Remote Shuffle Service在Spark原生场景的实践

    业务痛点 Spark在原生场景下的挑战 基于本地磁盘的shuffle方式,使得Spark在原生、存储计算分离、在离线环境中有极大的使用限制: 在原生环境中,serverless化是服务部署的一个目标...其中实际的Shuffle数据以Block形式存储在Data文件中,而Index文件则存储每个Block的元数据,具体存储信息如下: BlockId: 每个Block的唯一标识,long型,前19位为增...Firestorm 收益 支撑原生的部署模式 Firestorm目前在腾讯内部已经落地于近万个节点的在离线混布集群,每天支撑近5W的分布式计算作业,每天的Shuffle数据量接近2PB,任务失败率从原先的...总结 Firestorm 本文介绍了现有Spark Shuffle实现的各类问题及业界的应对方式,结合腾讯公司内部的Spark任务实际运行状况,介绍了我们的Firestorm的架构,设计,性能,应用等...希望在原生的场景中,Firestorm能更好的协助分布式计算引擎上

    3.1K30
    领券