在之前的文章Elasticsearch跨集群数据迁移之离线迁移中,我们介绍了如何在离线场景下把自建的ES集群或者在其它云厂商购买的ES集群迁移至腾讯云的ES, 但是如果在迁移过程中业务不能中断或者不能够暂停写操作,就必须采用其它的方案进行迁移。2020年5月份,腾讯云ES上线的新版本中,对集群节点所在的网络进行了优化,使得集群节点能够反向访问到用户VPC下的ip,因此采用集群融合的方式可以实现在线不停服地迁移自建ES集群至腾讯云ES。
随着腾讯云ES集群稳定性越来越高、产品体验越来越好。有越来越多的外部客户希望将自建的ES集群迁移到腾讯云上来。本文将介绍一种腾讯云ES在业界独有的业务不停服无感知的迁移方案--在线融合迁移方案。本方案目前已经迁移了上百套客户自建ES集群上云。下面将结合我们在给客户迁移过程中总结出的宝贵经验,来详细介绍下在线融合迁移技术方案的基本原理、核心优势、迁移步骤和注意事项。
本文描述问题及解决方法同样适用于 腾讯云 Elasticsearch Service(ES)。
前言 随着微服务架构的流行,一次请求通常涉及到多个组件及应用,往往需要根据整个请求的链路信息进行问题排查。 因此,企业通常会引入可帮助其了解系统行为、用于分析性能问题工具- APM (应用性能监控)。以便在发生故障时,进行调用链路追踪,快速定位和解决问题。 目前 APM 开源及商业化产品已经比较成熟,但搭建 APM 平台是自建还是上云呢?本文通过成本和产品功能的角度,给大家提供 APM 选型方案的建议。教您如何实时了解并追踪应用性能情况,低成本打造最佳用户体验。 自建成本分析 在成本问题上,小编粗略的计算了
大家好,上一篇写到如何在腾讯云CVM上用bind9 自建内网解析DNS服务。本篇承继上篇继续分享内容,分享一个如何实现腾讯云自建DNS高可用的方法。
随着腾讯云Elasticsearch产品功能越来越丰富、产品体验越来越好。越来越多的客户将自建的ES集群或者部署在其他云厂商的 ES 集群迁移到腾讯云上来。为了更加方便快捷地帮助客户完成集群迁移工作,下面简单介绍下可提供的两种迁移方案,离线迁移和在线迁移。
黄小龙 腾讯云高级工程师/腾讯云监控方案架构师,多年监控开发和应用经验,对业务监控、智能监控有深刻的理解,主导腾讯云 DevOps 可观测方案落地。 案例背景 由广州趣丸科技有限公司推出的 TT 语音是一款在国内领跑游戏社交赛道的语音社交产品。通过 TT 语音,用户可以在游戏中实时语音组队开黑,在社区语音交友以及直播聊天,广受年轻群体以及游戏玩家的喜爱。 自2014年上线以来,TT语音已累计超1亿注册用户,秉承“让天下没有孤单的玩家”的理念,为玩家提供组队开黑、趣味游戏、电子竞技等等互动服务。 TT语
自建开源大数据平台会随着企业数据的增长遇到:性能慢、扩容周期长、平台稳定性差、运维难、投入成本高等问题。在这里我们将从 EMR 的简介、EMR与自建Hadoop对比优势、自建迁移上云的实践案例来介绍 EMR 是如何解决这些问题的。
在我们深入使用CLS 的过程中,CLS的性能和数据加工的简便性给我们留下了深刻印象。原来需要自建Kafka和Flink才能完成的需求现在CLS两分钟就可以搞定了!
上期我比较了腾讯云和阿里云的MySQL数据库,文章发布之后引起了一些反响,有质疑数据的,也有希望了解更多细节的同学。其实一个数据库产品的好坏,不光是QPS、TPS这种吞吐量指标,其他特性如主从复制、灾备、稳定性、可视化管理等也起着重要作用,有兴趣的同学可以自己去体验一下,我也会逐步完善这些数据库测试。这期我们来看另一个常用的数据库:Redis。
7月20日,腾讯云数据库SQL Server基础版(单机版)正式上线。云数据库SQL Server 基础版提供了正版授权、高可用、高安全、高性能及轻运维的全套数据库解决方案,且兼具超高性价比。腾讯云SQL Server基础版是业内首个支持云上sysadmin权限的云数据库,真正做到自建数据库用户的数据、服务和业务访问都能完全平滑上云,在为用户提供正版企业级服务的同时,价格仅为自建数据库的二十分之一。 相对于云数据库灵活扩容、简易部署、安全可靠等特点,企业通过购买云服务器或IDC自建服务器搭建数据库不仅成
在前面的生产实践中,我们经常会用reindex命令去拷贝复制索引文档,但是除了此功能,reindex还能实现跨集群复制索引,今天我们来试试这个功能.我将以自建集群与云上集群为标准,互相使用Reindex,来实现数据的跨越拷贝。拓扑如下:
在经历了惨痛的黑天鹅事件以及激烈的数据恢复过程后,作为微盟DBA的我们进行了深刻的反省和自查,作为公司的核心资产,数据库也得到了前所未有的重视。如何保证数据安全以及用户服务的高可用性是我们要解决的首要问题。
关于ES与COS之间的使用场景主要体现在数据迁移、数据恢复备份这几个方面。其原理就是通过COS将源ES数据中间存储,然后再将存储的数据进行目标ES集群异步恢复的过程。COS在ES数据离线迁移Snapshot方式中使用较为广泛;因为近期遇到的此类需求挺多,结合客户实际以及腾讯云ES官方文档,特地梳理总结,通过本文,您可以了解到以下场景的COS使用:
谢莹莹 腾讯云监控产品经理,硕士毕业于哈尔滨工业大学。目前主要负责腾讯云 Prometheus 监控服务和 Grafana 可视化服务的产品工作,对 to B 商业化产品领域有着丰富的经验。 背景 随着云原生的快速发展,Prometheus 已成为越来越多企业监控的首选解决方案,然而自建 Prometheus 对企业的运维人力要求高,也容易因为性能问题出现后期维护困难的情况。在此背景下,使用云上托管 Prometheus 已成为大多数企业的最优选择。 腾讯云 Prometheus 监控服务(TMP),
有使用过腾讯云数据库CDB for MYSQL的用户都知道,腾讯云数据库MYSQL高可用版本身已经是主从架构,不过很多用户还是希望通过自建mysql服务用于和云数据库CDB实现主从同步,这时候用户就可以自己在云服务器CVM上部署从库,为数据安全提供一层保障;
在未来的技术趋势一定是,朝着 Serverless 架构转向,先送给大家一份《腾讯云工具指南》。
作者:吴云涛,腾讯 CSIG 高级工程师 导语 | 最近梳理了一下如何用 Flink 来实现实时的 UV、PV 指标的统计,并和公司内微视部门的同事交流。然后针对该场景做了简化,并发现使用 Flink SQL 来 实现这些指标的统计会更加便捷。 一、解决方案描述 1.1 概述 本方案结合本地自建 Kafka 集群、腾讯云流计算 Oceanus(Flink)、云数据库 Redis 对博客、购物等网站 UV、PV 指标进行实时可视化分析。分析指标包含网站的独立访客数量(UV )、产品的点击量(PV)、转化率(
最近梳理了一下如何用 Flink 来实现实时的 UV、PV 指标的统计,并和公司内微视部门的同事交流。然后针对该场景做了简化,并发现使用 Flink SQL 来 实现这些指标的统计会更加便捷。
作者:吴云涛,腾讯 CSIG 高级工程师 导语 | 最近梳理了一下如何用 Flink 来实现实时的 UV、PV 指标的统计,并和公司内微视部门的同事交流。然后针对该场景做了简化,并发现使用 Flink SQL 来 实现这些指标的统计会更加便捷。 一 解决方案描述 1.1 概述 本方案结合本地自建 Kafka 集群、腾讯云流计算 Oceanus(Flink)、云数据库 Redis 对博客、购物等网站 UV、PV 指标进行实时可视化分析。分析指标包含网站的独立访客数量(UV )、产品的点击量(PV)、转化率(
作为春节档最火的游戏,帕鲁的玩家总数突破2500万人、Steam在线人数屡破纪录,直接挤垮了官方服。
随着消费互联网的红利日渐消退,各互联网企业便开始将发展方向从C端向B端转移,其中C端用户增速逐渐放缓的抖音和快手,也成为了转向B端市场众多企业中的一员。
导语 | 最近梳理了一下如何用Flink来实现实时的UV、PV指标的统计,并和公司内微视部门的同事交流。然后针对该场景做了简化,并发现使用Flink SQL来实现这些指标的统计会更加便捷。 一、解决方案描述 (一)概述 本方案结合本地自建Kafka集群、腾讯云流计算Oceanus(Flink)、云数据库Redis对博客、购物等网站UV、PV指标进行实时可视化分析。分析指标包含网站的独立访客数量(UV)、产品的点击量(PV)、转化率(转化率=成交次数/点击量)等。 相关概念介绍: UV(Unique
简介 前言感谢各位用户在云监控用户交流群中的积极发言,踊跃提问,感谢大家的支持,在此把 Grafana 插件和 Prometheus 监控服务相关的一些问题整理如下。 Grafana 插件 腾讯云于 4 月 20 日宣布与开源数据可视化平台 Grafana 的 Grafana Labs 合作,为全球云用户提供腾讯云 Grafana 云监控应用程序插件。用户可通过此插件,在简单易用的平台上快速监控与整合指标和数据。目前已经支持 30+ 款腾讯云基础产品的接入展示。点击此处了解 Grafana 插件 Q:se
大家好,本文主要介绍混合云场景中 IDC环境与腾讯云 DNS域名解析建设方案。 以供参考~
下方视频为邵宗文在未来大会演讲实录。每个行业对数据库有不一样的要求,云上数据库通过智能化运维,数据会越来越多,准确度也越来越高,模型也会越来越精准。腾讯云上数据库如何满足用户多样化的诉求?一起来听听吧。
托管到腾讯云容器服务,我们的公众号“magiccodes”已经发布了相关的录屏教程,大家可以结合本篇教程一起查阅。
“使用腾讯云 Elasticsearch Service(ES) 服务,微盟能够快速构建日志分析、应用搜索、APM 追踪、异常监控、BI 分析等各类业务,提高云端商业服务的竞争力。” ——微盟集团运维部资深运维工程师 体验,已经成为一种新的消费时尚。Z 世代年轻人购物焦点不再只是好和省,而是融合了信息度、愉悦感的全新体验。微盟,中国企业云端商业及营销解决方案的领军者,企业精准营销服务提供商,正通过科技创新驱动商业革新,帮助300万+商家高效链接消费者并实现最好的体验经营。 一、深耕触点场景,链接 B 端和
最近在学习数据库相关知识,经常跟一个在某金融公司做DBA的大学朋友交流问题。听说他们公司最近在使用云数据库,我立马来了兴趣,以前只听说过云主机,没想到数据库这种产品也可以在云上买。正好最近在学习使用sysbench,索性我就买了腾讯云数据库(因为他们家的可以按量付费,用完了就释放掉哈哈),配合自己购买的腾讯云主机进行一个对比测试。下面就贴出测试过程和结果,仅供大家参考。
作者:何金胜&张加浪,腾讯云云监控高级工程师 前言 知名游戏公司云资源使用了腾讯云、AWS 和自研 IDC,业务覆盖了国内和海外。云上资源包括了计算资源服务器、存储类的包括 MySQL、Redis、S3 等、大数据处理(EMR)以及网络资源等。业务服务主要通过 Golang与 PHP 语言开发,服务使用微服务框架,由多个游戏工作室共同开发完成。如此大的业务,如何实现高可用的一体化监控并降低云原生 Prometheus 的监控成本呢? 客户现状和痛点 经内部规划后,该游戏公司决定基于自建的 Prometh
阿里云使用Flex Gateway 连接腾讯云V**GW 声明: 文档归档人—hunter 版本说明: 版本 修订日期 修订内容 修订人 联系方式 1.0 20180706 初稿完成 hunter hunter_xiao@126.com 目 录 第1章 需求背景 1 1.1 需求 1 1.2 需求准备 1 1.3 网络拓扑 3 1.4 V**网关配置 3 1.4.1 腾讯云V**网关配置 3 1.5 阿里云ECS自建V**网关配置 7 1.6 V**故障问
前言 今年6月,Kubernetes (K8s)迎来了8周岁。K8s 大幅降低了容器化应用部署的门槛,目前已在容器编排领域的事实标准。但随着 K8s 上的业务类型越来越丰富,它的配置也越来越复杂,给开发和运维同学带来了不少困难。 在 K8s 环境中,应用程序运行在跨集群内的多个节点,同时服务也将分布在多个集群或者多个云厂商中,这就使得追踪、监控这些应用程序及其所依赖的基础设施的健康状况,具有非常大的挑战性。 在这样的环境下,Prometheus 应运而生,天然支持 K8s,成为容器场景的最佳监控工具。在
腾讯云日志服务(Cloud Log Service,CLS)提供从日志采集、存储、检索分析、数据加工、消费投递、可视化及告警等一站式 SaaS 服务,协助用户通过日志来解决业务运维、服务监控、日志审计等场景问题。
TKE(Tencent Kubernetes Engine) 是腾讯云提供的容器服务PAAS 平台,基于kubernetes, 集成了腾讯云vpc网络,负载均衡,存储等IAAS 资源,提供容器调度、日志、监控、镜像仓库,Helm编排,自动弹性伸缩,微服务治理,DevOps 等功能,为客户提供完整的企业级容器服务。
当下,随着数字化技术不断深入,愈来愈多企业将核心业务搬到线上。业务系统高可用、可扩展、容灾能力决定企业系统的连续性,中间件作为构建企业核心系统的重要组成部分,其高可用容灾能力也将决定应用系统的。本文结合腾讯云中间件各PaaS产品的容灾能力及实践,以一个行业头部客户业务容灾实践举例,来展开说明基于腾讯云中间件PaaS层相关产品的实践。
数据传输服务 DTS 支持数据迁移功能,提供自建 MySQL 数据库到云数据库 TencentDB 的连续数据复制,用户可在不停服的情况下对数据进行在线热迁移,支持具有公网 IP/Port 或专线接入腾讯云的本地 IDC 或腾讯云 CVM 上 MySQL 数据库迁移。现已支持 MySQL 5.7 数据传输服务。
今天收到了腾讯云的推送通知,广州一区服务需要下线了,本人也在使用腾讯云的服务为,在这里分享下相关教程。
腾讯云容器服务(Tencent Kubernetes Engine,TKE)是高度可扩展的高性能容器管理服务,您可以在托管的云服务器实例集群上轻松运行应用程序。使用该服务,您将无需安装、运维、扩展您的集群管理基础设施,只需进行简单的 API 调用,便可启动和停止 Docker 应用程序,查询集群的完整状态,以及使用各种云服务。您可以根据资源需求和可用性要求在集群中安排容器的置放,满足业务或应用程序的特定要求。
腾讯云在推出轻量应用服务器Lighthouse后又推出了轻量数据库LighthouseDB。接下来就介绍一下最近使用轻量数据库LighthouseDB的感受吧。
传统企业在建设数据库初期,不仅建设服务器,还要保证数据库能够稳定和可靠的运行。当业务数据增长到一定大小的时候,就需要增加服务器CPU及内存以及磁盘相关资源。为了保证服务器的稳定性,还需要制定相关制度及体系,定制数据库的架构,防止数据库被攻击,确保数据库安全稳定。搜索关注“腾讯云数据库”官方微信立得10元腾讯云无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。
数据爆炸时代已经来临,数据作为企业的核心资产,如何利用好数据对企业来说至关重要,数据湖存储应运而生。腾讯云存储团队技术大牛程力,围绕数据湖加速器GooseFS展开演讲,下面让我们一起回顾下程力老师的精彩演讲内容。今天的主题是数据湖存储方面的内容。整个内容分四个部分:
腾讯云应该是官方认可的 中国首家运营服务器超过百万的公司 2019年5月腾讯宣布全网服务器超100万 2021年150W+:猜一猜腾讯有多少服务器 随着腾讯自研业务全面上云服务器200W+靠谱 📷 2020 阿里云峰会上 阿里云智能总裁张建锋表示 阿里云有超过100多万台服务器 预计在3年后这个数字达到300万台 2020年公开数据已经接近200万的规模 作为公有云老大目前应该已经接近300万 磐久网络 | 阿里云揭秘自研可编程网络核心技术 📷 2021年数据显示 百度智能云有十万级自建数据中心 承载
领取专属 10元无门槛券
手把手带您无忧上云