云数据仓库入门
云数据仓库是一种基于云计算技术的大规模数据存储和分析系统。它可以存储大量的数据，并允许用户通过复杂的查询和分析来获取有价值的信息。云数据仓库的主要优势在于其可扩展性、可靠性、安全性和成本效益。
云数据仓库的应用场景非常广泛，包括数据分析、商业智能、市场营销、产品开发、风险管理等。它可以帮助企业快速获取有关市场趋势、竞争对手和客户行为等方面的信息，从而做出更明智的决策。
腾讯云提供了一个名为 TDSQL 的云数据仓库产品，它是一个完全托管式的数据仓库服务，可以支持用户快速创建、管理和查询数据仓库。TDSQL 支持标准 SQL 语言，并且具有高可扩展性和可靠性，可以满足大多数企业的数据仓库需求。此外，TDSQL 还提供了一系列数据分析工具，包括 DataWorks、Analysis Workspace 等，帮助用户更方便地进行数据分析和报告。
推荐的腾讯云相关产品和产品介绍链接地址：
- TDSQL 云数据仓库：https://cloud.tencent.com/product/tdsql
- DataWorks：https://cloud.tencent.com/product/dataworks
- Analysis Workspace：https://cloud.tencent.com/product/analysisworkspace
相关·内容
2回答
有没有与Amazon Redshift和Google Big query相当的Oracle云数据仓库？我遇到了Oracle12c，Exadata，即将推出的自治数据仓库。不确定oracle产品在云数据仓库中的应用
浏览 0提问于2017-11-21得票数 1
我在谷歌云中有一个数据仓库，我的数据在谷歌驱动器上是excel格式的，我想自动将数据从谷歌驱动器导入到谷歌云sql数据仓库中。我该怎么做呢?请帮帮我。
浏览 3提问于2016-08-11得票数 0
2回答
我想学习数据库建模。虽然我在Oracle DB上从事数据库应用程序开发(我了解业务模型和数据库模型之间的关系，以及产品数据库如何支持业务模型)，但我还没有接触过数据库建模。
如果你能引导我从零开始学习数据库建模的正确途径的话，那将是你的好意。
我的方法是-
我目前对数据建模基础的理解程度。
学习基础知识并刷新已知项。
学习中间环节，建立样本数据模型，体验挑战。
为了遵循上述方法，我需要以下细节。-
一种测量我目前对数据建模基础的理解程度的工具。
一个学习数据库建模的好地方。(网站/推荐书籍/一个好的视频教程(免费是最好的选择！)
一个不错的数据模型练习可能有答案
浏览 0提问于2013-01-09得票数 0
回答已采纳
2回答
我们知道Snowflake是基于云的分析数据仓库，在这些云环境(AWS、Azure、GCP)上提供Saas。我们可以选择像亚马逊网络服务这样的云环境，数据将存储在雪花管理的S3存储桶中。是否可以使用我们的AWS云环境而不是针对存储进行管理的snowflake？有什么选择吗？
浏览 5提问于2021-10-22得票数 2
12回答
什么是数据仓库？
、、
一位客户问我“数据仓库”这个术语的真正含义是什么。
我想过ETL，数据模型的细节，与NoSQL，云，‘普通’数据库管理系统，主数据管理等的区别，但无法用几句话向他描述这个术语……(事实上，我做了一些谈话，没有照亮他。)
如何用1-3个(或更多)句子来描述“数据仓库”？
浏览 0提问于2010-06-23得票数 26
回答已采纳
是否有从Azure SQL Server数据库(云)查询Azure SQL数据仓库(云)的选项？我们有一个托管在云中的中央仓库，其中包含应用程序所需的所有域。如果我们可以使用中描述的方法将这些表用作外部表，那就太好了。
浏览 8提问于2017-01-09得票数 0
1回答
我一直在使用IBM作为Microsoft中的数据源，但最近我们将数据仓库转移到了云(Azure)上。表保持不变(只是前缀不同)。当我们使用时，我已经在Power中做了几个报告，我如何使用相同的报告，但却将它们与Azure连接起来呢？
浏览 13提问于2022-11-20得票数 0
回答已采纳
我正在尝试用开源框架来做ETL，我听说过两件事，Apache Beam和Apache Airflow，这两件事最适合整个ETL或ELT，比如Talend、Azure Data Factory等，事实上，我正在尝试用云数据仓库(redshift、azure数据仓库、雪花等)来做所有的事情。哪一个对这些类型的工作更好，如果我能在这两个框架之间进行一些比较，那就太好了。提前谢谢。
浏览 35提问于2019-07-09得票数 0
我的任务是设计一个Kimball风格的数据仓库。它将位于Server中的prem上。组织物理实现的最佳做法是什么？也就是说，数据仓库是否应该是一个单一的数据库，使用模式来分隔每个数据集市(并且将所有维度都放在自己的模式中，以帮助“驱动”跨市场的重用)？或者，每个数据集市是否应该是自己的数据库(强制所有维度都存在于一个单独的数据库中)？
如果我使用云平台进行数据仓库，比如Azure SQL DB (例如，使用托管实例来允许跨数据库查询)，这个决策是否重要？
浏览 2提问于2022-01-07得票数 1
1回答
OAC = Oracle云自治数据仓库。我们的OAC管理员为我们提供了用于连接的.zip钱包文件，但是DbVisualizer本机不支持这一点。我该怎么连接？
浏览 5提问于2021-03-18得票数 0
2回答
我想使用谷歌云数据仓库。但是，我没有使用GAE。
我还能使用对象化库吗？如果是的话，怎么做？文档中没有提到如何配置它来对Datastore进行验证。
浏览 2提问于2015-05-25得票数 3
回答已采纳
3回答
是python的新手，还不能解决这个问题：
我正在将数据从云数据仓库导入到Python中。这是生成的数据结构：
[('A,B',),
('A',),
('A,B,C',)]
如何将数据转换为以下格式：
[['A','B'],
['A'],
['A','B','C']]
浏览 24提问于2018-08-16得票数 3
1回答
现在，SQL不再受欢迎。我有5GB的数据库。可以使用快速版SQL部署VM并处理报告，在生产中仍然使用旧的SQL数据库？需要复制吗？或者Reporting可能在另一个服务器上运行？谢谢!
浏览 6提问于2014-10-13得票数 0
回答已采纳
1回答
我的要求:以csv文件格式将SQL查询输出(接收数据)保存到本地驱动器。
我的操作系统: Windows 10 64位与代码1.67.1:我安装了以下扩展来连接雪花数据仓库：
用于SQL Tools的ToolsSnowflake 驱动程序
我已经成功地连接了雪花(云)数据仓库，并在VS代码中接收到了数据。
我想要的是将(导出)输出(接收到的数据)保存到本地文件(例如D:\result\result.csv)。
我怎样才能做到这一点？
图片附呈供您参考。
谢谢大家。pmk
浏览 2提问于2022-05-29得票数 0
1回答
亲爱的，
我是新的AWS云平台，并试图探索。我了解了AWS EC2和AWS红移。它们之间有什么关系吗？不需要在我的AWS帐户上创建EC2实例，就可以使用Redshift数据仓库吗？
浏览 3提问于2018-12-31得票数 0
1回答
我对kafka活页夹做了一些测试，看起来春云流生产者不参与春季管理的交易。
给定的代码，如
@RequestMapping(method = RequestMethod.POST)
@Transactional
public Customer insertCustomer(@RequestBody Customer customer) {
customerDao.insertCustomer(customer);
source.output().send(MessageBuilder.withPayload(CustomerEventHelper
浏览 2提问于2016-06-10得票数 3
回答已采纳
2回答
云主机如何通过内网连接云数据库？
、、、、
我在同一个账号下，在广州三区买了云主机，在广州四区买了云数据库，但是我云主机却无法通过云数据库内网IP访问（报2013错误）。请问我要如何操作？
[附加信息]
浏览 1276提问于2018-11-03
1.小程序.云开发是否可以做出一套pc端管理系统来获取小程序数据访问量等信息？
2.小程序.云开发官方提供的数据库和云存储空间是否可以扩展？
3.小程序.云开发上传的图片可以上传到非腾讯云服务器吗
浏览 350提问于2018-10-10
1回答
我的任务是使用Azure SQL数据仓库实例中的数据。
数据必须由only机器使用，它不能直接访问internet，只能通过HTTP代理访问internet资源，而HTTP代理只允许HTTP/HTTPS流量。
据我所知，Azure SQL DWH不公开HTTP，只为DB管理目的(启动/停止服务等)。
是否有任何软件/服务可用于通过HTTP代理从on计算机查询Azure表？
非常感谢
PS:到目前为止，我已经找到了两个候选解决方案：
，一个开源软件： (用于对符合JDBC的数据库进行调用的原始REST Api包装器)，一个云服务： (Restify Azure SQL数据仓库数据)
浏览 2提问于2019-10-25得票数 0
我正在使用Google Data Flow来实现一个ETL数据仓库解决方案。
看看谷歌的云服务，DataProc似乎也可以做同样的事情。
而且看起来DataProc比DataFlow便宜一点。
有没有人知道相对于DataProc，DataFlow的优缺点
为什么谷歌同时提供这两种服务？
浏览 1提问于2017-09-27得票数 66
云服务器-AMD SA1超惠专区 标准入门型 服务器，购买之后，是否就可以像阿里云虚拟主机一样使用，部署放置网站程序，解析域名、正常打开访问。流量有没有限制，或者是需要其他的付费购买后，才能正常使用？
[附加信息]
浏览 475提问于2018-12-27
1回答
我对Google平台非常陌生，我正在做一个POC，用于将一个蜂窝应用程序(表和作业)移动到Google。这些数据已经转移到了谷歌云存储系统。
是否有一种内置的方法来批量创建数据仓库中的所有表，而不是使用蜂箱提示符逐个创建表？
浏览 2提问于2021-01-12得票数 2
回答已采纳
3回答
数据仓库创建
、、
在这片土地上，我相当生气勃勃。我现在是一家小医院的数据分析师8个月了，我在一个新的职业领域获得了2年的学位。
情况
我们有一个Cobol“数据库”(我轻轻地使用了数据库这个词.)。这是一个专有的分层数据库。我们有一个辅助软件解决方案，在其之上提供ODBC层，以便通过标准的‘ish接口进行外部访问。它得到了我认为是符合SQL 99的命令。
COBOL数据库到SQL还有很多需要改进的地方。指数是一成不变的。因此，如果我想对索引的一个或两个字段(Index =病人编号)进行任何没有键键的查询。所以如果我想问一下录取/解职日期..。forgetaboutit)。是狗慢点。联接将5分钟的查询转换为45分
浏览 0提问于2011-02-14得票数 7
回答已采纳
我们有一个基本的BI解决方案使用SQL Server分析服务(SSAS)之上的Server数据库更新的标准‘业务线’系统。
桌面Excel用于连接数据立方体和数据透视表功能，用于创建报表、运行临时查询等。
问:是否有办法将此部分或全部移至Azure？什么是最好的建筑？例如：
应用程序可以像使用本地数据库一样使用基于天蓝色的Server数据库吗？
这些数据能不能使用SSIS在云中的所有SSAS中进行ETL？
用户可以通过桌面Excel访问这些基于云的数据立方体，也可以通过Excel 365或其他类似的方式访问这些数据立方体(MS似乎有一些名为Power的产品，可能涉及到这些产品)。
浏览 2提问于2014-11-05得票数 2
2回答
我们公司曾经有onpremiere和云ERP系统，他们最终想要从每个ERP系统中提取数据到我们数据仓库中的临时数据库。这两个系统在表结构和模式方面是相同的，但是，我们需要合并几个表来创建唯一的表。例如，来自ERP1的dbo.Product和来自ERP2系统的dbp.Product具有重叠的productId。在不破坏数据完整性的情况下合并这两个表的理想情况是什么
示例: ERP1.Product( ProductId int，ProductName varchar(90)，Product varchar(MAX) )
ProductName 2.乘积( Product，ERP2.VARCHAR
浏览 2提问于2018-04-18得票数 0
我到处寻找，希望能找到一个教程，告诉我如何使用云9来构建Node.js应用程序。有人知道有什么好的资源吗？
浏览 0提问于2011-11-16得票数 14
回答已采纳
我需要将一些数据从AWS上的Databricks推送到SAP云，并且鼓励我使用python ()。我能找到的唯一的文档是pypi中的，这是相当稀少的。我可以看到一个如何将各个行推送到sql表的示例，但我没有发现如何将保存到SAP数据仓库云中的表的示例。
文件示例：
sql = 'INSERT INTO T1 (ID, C2) VALUES (:id, :c2)'
cursor = conn.cursor()
id = 3
c2 = "goodbye"
cursor.execute(sql, {"id": id, "c2": c2}
浏览 14提问于2022-10-24得票数 0
2回答
有单聊功能的小程序开发问题？
、、、、
您好,想通过腾讯的小程序云开发+云通信专业版+php后台实现一套带有单聊功能的一个房地产中介小程序,小程序第一次开发,聊天没有做过,对于聊天的开发流程很是迷茫,如果想通过小程序云开发加上腾讯云的云通信实现这个项目,我应该连接哪些接口.十分希望能回答我这个问题,万分感谢
浏览 617提问于2019-01-10
在数据仓库项目中，为什么我们需要在数据集市(使用Kimball方法)从登陆/分期区域数据库中传输数据之前使用DataVault建模？我们为什么不能使用Kimball方法直接将数据从着陆/分期区域数据库传输到最终的数据集市？
这样做是必须的吗？
浏览 6提问于2017-08-28得票数 0
3回答
来自3NF的星型模式设计
、、、、
我是数据仓库的新手，我一直在阅读关于数据仓库原理的文章和视频，但我对如何将下面的设计转换为星型模式感到有点困惑。
在我看到的所有示例中，事实表都引用了dim表，所以我假设questionId和responseId应该是事实表的一部分？任何建议都将不胜感激。
浏览 1提问于2016-07-25得票数 1
1回答
云数据仓库最近非常流行，我想知道它们的架构方式是否存在内在的矛盾：
Terradata、Greenplum等需要“无共享”架构才能很好地执行(根据供应商的文档)，但是云的本质是大多数事情都是共享的。
当您在任何供应商的云中拆分VM时，您总是要使用共享存储(这就是虚拟化的本质)。
这肯定打开了存储数组和/或SAN争用的可能性？有谁能帮我理解：
任何供应商如何在不造成配置瓶颈的情况下可靠地确保存储吞吐量(这对于DW性能至关重要)？
当每个云供应商都使用虚拟化并因此使用共享存储时，我们为什么还要谈论“共享什么”呢？
浏览 0提问于2016-04-05得票数 -1
1回答
这两个概念最近使我很困惑。
雪花数据库更多地提到数据服务及其网站地址如下：
这更像是云上提供SQL引擎功能的数据平台或数据仓库。
另一方面，雪花模式更像是一个设计数据库模式的算法。
他们是完全不同的两件事，只是有着相同的名字巧合？
浏览 3提问于2020-07-13得票数 6
回答已采纳
我开始在电信领域开发数据仓库。我熟悉Kimball的方法(将我的DW建模为星型模式)。我预计许多事实表，最大的可能是数百亿行。我无法想象几年后数据仓库将再次运行的所有类型的查询。
现代db方法指出，计算能力应与存储(即Azure Synapse Analytics、Redshift谱、Presto等)分离。而格林梅利或红移等数据库则总是运行PostgreSQL服务器来存储数据。
与“解耦”相比，更喜欢基于RDBMs的数据仓库的原因是什么？
虽然我完全喜欢解耦方法，但我的混淆是基于这样一个事实:我完全不知道在S3/ADLS和RDBMs中分析数据对性能的影响：
如果您选择没有能力暂停集群(并使
浏览 4提问于2020-01-01得票数 1
考虑构建一个小型数据仓库，因此不需要太多的扩展-只需要灵活性和构建ETL管道的简单性和最少的维护。
目前我们正在考虑一个相对简单的架构，由Google App Engine将ETL处理成BigQuery，但我想知道RedShift + EC2是否更容易学习？我们还没有作为一个团队使用过这两个云。
浏览 1提问于2018-12-14得票数 0
1回答
我目前正在开发一个允许数据仓库ETL工作运行的私有脚本。我要把我的秘密保存在云库里。当脚本运行并从私有google表中提取信息时，问题就出现了，这需要从G Cloud上的项目中生成一个令牌，然而，令牌的寿命似乎有限，是否有一种方法可以获得不过期的perma令牌？(不公布项目)
谢谢
浏览 6提问于2022-02-01得票数 1
回答已采纳
请描述您的问题
标题：重装系统 - 云服务器 - 文档首页 - 腾讯云文档平台 - 腾讯云
地址：https://cloud.tencent.com/document/product/213/4933
浏览 378提问于2018-03-15
3回答
我阅读了用于数据分析和集群结构的文档，但是我不明白用例有什么不同。
Amazon 是一个流行的开源搜索和分析引擎，用于日志分析、实时应用程序监视和点击流分析等。。
Amazon 是一种完全管理的、千兆级的云数据仓库服务。您可以从几百千兆字节的数据开始，并将其扩展到一个千兆字节或更多。
浏览 5提问于2016-05-22得票数 12
回答已采纳
1回答
我们有大量的数据无法放入内存。因此，我们将它们分布在磁盘上的许多文件中，我们打开一个文件，并通过向前移动指针按顺序读取记录。一旦指针到达EOF，我们就打开下一个文件。
在加载数据后，我们现在进行过滤。如果我们能像在数据库中一样运行一个查询来进行过滤，那就太好了。我们希望从数据库而不是文件中读取所有数据，但我们不能一次性将所有数据放入内存中，我们该如何着手呢？我们可以使用块来获取数据，但在网络上可能需要更多时间。有没有更快的方法来解决这个问题？使用像Redis或MemSQL这样的替代数据仓库会有帮助吗？
浏览 1提问于2015-06-01得票数 0
我有三个与Azure机器学习服务有关的问题。如果你能给我一些指示或相关的参考资料，我将不胜感激。
(1)对于机器学习的计算结果，能否将其导出到Azure的SQL数据仓库？格式是什么？是否可以将结果与SQL中的现有表连接起来？确切的过程是什么？
我搜索过部署Web的相关信息，并发现了类似的问题.然而，对于web服务和Azure SQL数据仓库之间的关系，我们只是有点困惑。
(2)如果我需要从外部来源(例如:从外部LPO服务)获得机器学习的结果，我如何从外部源连接它？
(3)如果需要从外部源连接到Azure SQL数据仓库，是否只需设置防火墙并提供服务器地址、ID和PD，然后可以从外部源连接？
浏览 2提问于2016-05-25得票数 2
回答已采纳
1回答
在IIS中，你可以在站点上创建应用程序，所以现在我想尝试在Azure云服务上完成相同的操作：
tenant.mysite.com - One云服务
tenant.mysite.com/api -另一种云服务
我希望这样做的原因是因为这是一个多租户站点，需要使用租户URL调用api。
有没有什么办法可以用Azure做到这一点呢？我是不是看错了整个解决方案，或者我必须考虑做一些代理？
浏览 2提问于2015-05-22得票数 0
我正在尝试学习使用bigquery API从google数据库中获取数据并将其导入到另一个sql数据库中。我正在使用eclipse java，我应该设置什么应用程序项目？我应该安装什么插件?有谁有经验吗？
我更喜欢C#，我以前用过windows app form，不知道用java怎么做。有人能给点建议吗？谢谢!
更具体地说，我只是想创建一个ETL来将bigquery数据放到我们的数据仓库中，它不一定是一个UI，我只需要它在后端运行。我安装了google plugin4.3
哪个项目对我来说最容易使用？有没有成功的代码将数据从bigquery servlet转移到其他地方？我不知道如何插入
浏览 0提问于2016-02-25得票数 0
请描述您的问题
标题：年底大酬宾-腾讯云
地址：https://cloud.tencent.com/act/bargin?utm_source=portal&utm_medium=banner&utm_campaign=bargin&utm_term=1204
浏览器信息
Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36
浏览 2444提问于2017-12-12
2回答
请描述您的问题
标题：腾讯云新春采购节——多买多优惠，续费升级礼包领不停！
地址：https://cloud.tencent.com/act/season?utm_source=portal&utm_medium=rightbanner&utm_campaign=season&utm_term=0308
浏览器信息
Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36
浏览 193提问于2018-03-11
我在一个使用Oracle ODI 10g作为ETL工具的数据仓库(Oracle数据库10g)上工作。作为数字化转型的一部分，我们正在将所有应用程序和数据库迁移到云。这将导致ODI接口中的所有源表和目标表都发生更改。这些表将保持不变，但它们的连接字符串将发生变化，因为整个数据仓库将移动到云中。 我想知道如何在不以任何方式影响现有ODI接口和包的情况下更新ODI中所有源表和目标表的连接详细信息。 有没有一种简单的方法可以从oracle ODI的拓扑管理器中更新/更改所有表的连接详细信息？我不想重新创建所有的接口，因为这不是一个可行的方法。
浏览 17提问于2019-09-03得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
