大数据与微服务架构-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

大数据与微服务架构

专栏成员

44

文章

46440

阅读量

14

订阅数

B端产品的决胜之路

uml analytics io ui 报表

指公司所有产品和系统的整体结构和布局，在设计一套新系统必须考虑如何和公司现有系统架构融合，不同系统的模块之间如何衔接

2022-12-05

3370

你就是干不过做PPT的

②后半部分：解决方案 -> 目标 -> 计划【时间表、组织架构、预算等】（让听众认同“观点”）

2022-12-05

2990

ElasticSearch亿级数据检索深度优化

api es java jvm http

四、使用API获取集群节点信息（http,thread_pool,transport,jvm,os,process.....）

2022-12-05

4030

高性能NoSQL图数据库Neo4j

api sdn 编程算法 spring

Neo4j是一个NoSQL的图数据库管理系统，图是一个比线性表和树更高级的数据结构。具有始终保持高效查询性能，不会因数据的增长而降低查询的反应能力，具备事务管理特性，完全支持ACID事务管理。

2022-12-05

2.4K0

超快！大数据分析引擎ClickHouse

分布式编程算法数据库管理数据库

ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。

2021-01-18

1.7K0

ElasticSearch Server 扩展的弹性搜索解决方案

config error match prefix range

索引（相当数据库，包含行（代表文档）和列（字段）的表）、副本（用于控制查询性能及数据故障）、分片（每个分片就是一个Lucene索引）

2020-04-11

1.5K0

RAID 0、1、5、1+0总结

存储数据安全

RAID（Redundant Array Of Independent Disk，独立磁盘冗余阵列）,可以提供比普通磁盘更快的速度、更高的安全性，生产环境中服务器在安装时一般都会做RAID，RAID的创建有两种方式，一种是软RAID（由操作系统来实现，生产环境下一般不采用，因为是基于系统，所以一旦系统挂掉了，数据就挂了），另一种是硬RAID（使用的是RAID卡，也叫阵列卡等的一种独立于系统之外的卡，当系统挂掉之后可以保证磁盘数据的安全性）。

2020-04-11

1.3K0

千亿级海量数据库OceanBase

TDSQL MySQL 版 sql 数据库云数据库 SQL Server 存储

OceanBase是阿里集团研发的可扩展性关系型数据库，实现了数千亿条记录、数百TB数据上的跨行跨表事务。

2020-04-11

2.1K0

大数据时代个人学习篇

大数据机器学习神经网络人工智能数据挖掘

牛津大学职业研究分析报告可以看到，大数据智能时代首先取代的是比较有规则的职业，如重复性、机械性的会被淘汰，终身学习、人文沟通、信息化与数字化、智能协作等方面的能力将越来越重要。

2020-04-11

6500

大流量限流与消峰方案

编程算法开源缓存

连接资源耗尽、分布式缓存容量被撑爆、数据库吞吐量降低，最终引起系统雪崩。2、应对高并发、大流量的常规手段：

2020-04-11

1.2K0

缓存技术-大促场景下热点数据的读/写优化方案

java 缓存云数据库 Redis®编程算法分布式

1、缓存是指将被频繁访问的热点数据存储在距离计算最近的地方，以方便系统快速做出响应。

2020-04-11

1.8K0

分布式协调服务ZooKeeper

node.js 分布式 zookeeper 负载均衡负载均衡缓存

分布式协调服务是分布式应用中不可缺少的，通常担任协调角色，比如leader选举、负载均衡、服务发现、分布式队列和分布式锁

2020-04-11

4050

资源管理与调度系统YARN

YARN作为一个通用的资源管理系统，目标是将短作业和长服务混合部署到一个集群中，并为他们提供统一的资源管理和调度功能，概括起来主要解决以下两个问题：1.提高集群资源利用率，2.服务自动化部署。

2020-04-11

1.3K0

大数据查询引擎Presto

hive sql api kafka apache

Presto设计精巧，可以处理海量数据，最大化地利用硬件性能，计算全部在内存中完成，很好的利用高速网络来进行数据调度。性能基本上是Hive的10倍。

2020-04-11

1.5K0

大数据工作流Oozie

hadoop hive mapreduce ios

因为工作需要用到oozie，但是网上的资料越看越迷茫，经过很大的努力，终于折腾清楚了，这里，做一个总结，帮助后来者更好地进行入门，当然，粗鄙之言，难免疏漏，欢迎交流指正。

2020-04-11

4860

流式计算引擎-Storm、Spark Streaming

spark css windows 云计算

目前常用的流式实时计算引擎分为两类：面向行和面向微批处理，其中面向行的流式实时计算引擎的代表是Apache Storm，典型特点是延迟低，但吞吐率也低。而面向微批处理的流式实时计算引擎代表是Spark Streaming，其典型特点是延迟高，但吞吐率也高。

2020-04-11

2.4K0

Hive-数据仓库

hive 大数据存储 sql 网站

交互方式-用户接口：CLI（linux命令行）、WUI（hive web页面）、Client（连接远程服务HiveServer2，eg：JDBC、ODBC）

2020-04-11

6750

Docker的基本概念

虚拟化容器镜像服务容器

容器：又称“集装箱”，其核心技术是Cgroups和namespace。容器技术通过namespace实现资源隔离，通过Cgroups实现资源控制。

2020-04-11

3760

分布式消息队列Kafka

bash bash 指令 zookeeper 文件存储 kafka

Zookeeper：保存集群元数据和消费者信息，broker和主题元数据、消费者元数据分区偏移量

2020-04-11

1K0

HBSAE-NoSQL 非关系型数据库

hbase TDSQL MySQL 版单片机大数据 node.js

每天写入量巨大，而相对读数量较小的应用，不需要复杂查询条件来查询数据的应用，HBase只支持基于rowkey的查询

2020-04-11

4750

点击加载更多

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态