数据技术-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

数据技术

专栏成员

34

文章

122118

阅读量

14

订阅数

纵观110+年航空事故数据，发现历史空难规律 | 由东航MU5735坠机引发的思考

2022 年 3 月 21 日，东方航空公司一架航班号为 MU5735 的波音 737-800 客机在执行昆明-广州航班任务时，于广西梧州上空失联坠毁，2 分钟内急降超过 8000 米。

2022-04-19

4.6K0

使用 Spark | 手把手带你十步轻松拿下 Spark SQL 使用操作

sql spark python hive 大数据

在《20张图详解 Spark SQL 运行原理及数据抽象》的第 5 节“SparkSession”中，我们知道了 Spark SQL 就是基于 SparkSession 作为入口实现的。

2022-03-28

8.8K0

初识 Spark SQL | 20张图详解 Spark SQL 运行原理及数据抽象

spark python hive api analyzer

不管是做平台的，还是做应用的，都免不了跟 SQL 打交道。一句“SQL Boy”，虽然是大家的自嘲，但也能说明大数据工程师们跟 SQL 的关系之紧密。

2022-03-28

10.9K0

在线新经济背景下的新职业与新就业发展白皮书

全文共 61 页，完整 PDF 版白皮书请关注『数人之道』公众号，回复 220302 获取。

2022-03-28

3721

带你理解并亲手实践 Spark HA 部署配置及运行模式

大数据 spark

由于 Spark 是计算框架，还需要有底层存储系统、资源协调管理、分布式协作管理等框架等进行支撑，因此我们这里使用在《万字+50图，详解 Hadoop HA 完全分布式部署配置及运行调试》中部署的 Hadoop 作为 Spark 的存储及管理系统，在此基础上以 HA 模式来安装部署并运行 Spark 集群。

2022-03-26

2.3K0

达摩院 | 2022 年十大科技趋势

一个世纪以来，数字科技的演进推动了人类的技术进步与产业发展。我们当前正在经历数字科技最快发展的阶段，数字化、网络化、智能化让数字世界与物理世界的融合与协同更加紧密。

2022-03-25

2850

初识 Spark | 带你理解 Spark 中的核心抽象概念：RDD

spark css python 分布式 serverless

RDD（Resilient Distributed Dataset, 弹性分布式数据集）是 Spark 中相当重要的一个核心抽象概念，要学习 Spark 就必须对 RDD 有一个清晰的认识。

2022-03-25

1.9K0

元宇宙2022：蓄积的力量 | 北京大学×安信证券元宇宙报告

pdf 互联网硬件元宇宙

全文共 199 页，完整 PDF 版报告请关注『数人之道』公众号，回复北大元宇宙获取。

2022-03-25

4510

解读“东数西算”工程，数据人必须关注的未来头号风口

https 大数据网络安全

2022 年 2 月 17 日，国家发改委、中央网信办、工业和信息化部、国家能源局联合印发通知，同意在京津冀、长三角、粤港澳大湾区、成渝、内蒙古、贵州、甘肃、宁夏等 8 地启动建设国家算力枢纽节点，并规划了 10 个国家数据中心集群。至此，全国一体化大数据中心体系完成总体布局设计，“东数西算”工程正式全面启动。

2022-03-25

1.1K0

初识 Spark - 7000字+15张图解，学习 Spark 入门基础知识

spark mapreduce python css sql

Spark 是 UC Berkeley AMP Lab 开源的通用分布式并行计算框架，目前已成为 Apache 软件基金会的顶级开源项目。

2022-02-14

3.5K0

Snowflake 荣获 2021 年年度数据库

云数据库 MongoDB mongodb 数据库 postgresql sql

DB-Engines 根据其网站的数据，宣布 Snowflake 荣获“2021 年度数据库”称号。

2022-02-14

1.6K0

AI 要取代码农？DeepMind 祭出超越近半程序员的编程版“阿尔法狗” AlphaCode！

https 网络安全 github git 开源

在国内欢度虎年春节之际，作为 Google 母公司 Alphabet 旗下的人工智能企业——DeepMind，发布了基于 Transformer 模型的编程 AI：AlphaCode，并声称其编写的计算机程序具有竞争力，能与人类普通程序员相媲美。

2022-02-14

7680

推荐一款低代码炫酷的地理空间数据可视化工具

大数据数据可视化 jupyter notebook 开源图像处理

在开源的地理空间信息数据可视化工具中，大部分都需要一定的编程基础和技巧才能使用。而今天要介绍的这款工具，不需要任何编程基础，即可实现地理空间数据的可视化，而且效果十分炫酷。

2022-02-14

2.1K0

汤加火山喷发后，分析全球火山分布，发现最多火山的地区在这里！

folium int location map 地图

南太平洋岛国汤加的一座海底火山，于当地时间 1 月 14 日、15 日，连续两次剧烈喷发，爆发出大量岩浆并引发海啸，海浪环绕地球足足两圈，导致环太平洋多国发布海啸预警。这次火山喷发初步评估VEI 等级为 5～6 级，或对全球航运和农业造成较大影响。

2022-02-14

2.2K0

2021年度微博热搜回顾，暨开年热搜分析

2022 年虎年新春的钟声即将敲响，拼搏奋斗了一年，我们都期盼着归家的团聚与喜悦，洗去身上的疲倦，调整好状态，抖擞地继续新一年的征程。但如今国内已被奥密克戎攻破防线，新变种的病毒来势汹汹，全国包括一线城市在内的多个地区均已破防，这让春节的出行政策变得更加难以预测。希望大家都能如愿回家，过个好年。

2022-02-14

2.1K0

推荐10款优秀的 MongoDB GUI 工具

gui 云数据库 SQL Server shell https 网络安全

目前最流行的文档型数据库 MongoDB 催生了市场上丰富的 MongoDB 管理工具，这些工具可以提高我们的 MongoDB 开发和管理任务的效率，以提高生产力。下面是 10 款优秀的 MongoDB GUI 工具列表，其中包括其简介、主要功能介绍和下载链接。

2022-02-14

21.6K0

探索 MongoDB - MongoDB Compass 安装配置及使用介绍 | MongoDB GUI

ssh mongodb 数据库 sql 云数据库 MongoDB

MongoDB Compass 是 MongoDB 官网开发及提供的 MongoDB GUI（图形化用户界面）管理工具。它能以视觉化的方式探索数据、在数秒内运行即时查询、创建数据库及管理集合和文档、与数据交换实现 CRUD 功能、查看和优化查询性能、构建地理查询等。让你能在索引、文档验证等方面作出更合理的决策。提供 Linux、Mac 及 Windows 版本。

2022-02-14

5.3K0

优化 HBase - HBase 的预分区及 rowkey 设计原则与方法

hbase TDSQL MySQL 版 javascript unix

之前在《初识 HBase - HBase 基础知识》中提到过，HBase 的数据物理存储格式为多维稀疏排序 Map, 由 key 及 value 组成：

2022-01-18

4K0

华为数字化转型与数据管理实践 PDF 版

pdf 公众号华为

全文共 14 页，完整 PDF 版请关注『数人之道』公众号，回复华为获取。全文共 14 页，完整 PDF 版请关注『数人之道』公众号，回复华为获取。全文共 14 页，完整 PDF 版请关注『数人之道』公众号，回复华为获取。 THE END

2022-01-18

1.3K1

初识 MongoDB - MongoDB 介绍及安装 | 最流行的文档数据库

文件存储存储 mongodb 数据库

MongoDB 是基于分布式文件存储的数据库，由 C++语言编写，专为 WEB 应用提供可扩展性、高性能和高可用性的数据存储解决方案。它可以从单服务器部署扩展到大型、复杂的多数据中心架构。利用内存计算的优势，MongoDB 能够提供高性能的数据读写操作。MongoDB 的本地复制和自动故障转移功能让应用程序具有企业级的可靠性和操作灵活性。

2022-01-18

1.7K0

点击加载更多

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态