基于搭建的数据仓库
基于搭建的数据仓库是一种数据存储和分析的方法，它可以帮助企业从大量的数据中提取有价值的信息，以支持决策和优化业务。数据仓库通常包含来自不同来源的数据，这些数据被整合、清洗、转换和存储，以便进行分析和报告。
数据仓库的主要优势包括：
- 提供快速、准确的数据分析：数据仓库可以快速地处理大量数据，并提供准确的分析结果，帮助企业做出更好的决策。
- 支持数据挖掘和预测：数据仓库可以帮助企业发现隐藏的数据模式和趋势，并进行预测和规划。
- 提高数据可访问性：数据仓库可以集中存储和管理数据，提高数据的可访问性和可用性。
- 支持数据分析和报告：数据仓库可以帮助企业生成报告和分析，以便更好地理解业务和市场趋势。
数据仓库的应用场景包括：
- 销售和市场分析：通过分析销售数据，企业可以了解销售趋势、客户行为和市场竞争情况。
- 库存管理和供应链管理：通过分析库存和供应链数据，企业可以优化库存管理和供应链管理，提高效率和降低成本。
- 财务报表和分析：通过分析财务数据，企业可以生成财务报表和分析，以便更好地管理财务和预测未来的财务状况。
- 产品和服务开发：通过分析产品和服务数据，企业可以了解客户需求和市场趋势，以便更好地开发产品和服务。
推荐的腾讯云相关产品和产品介绍链接地址：
- 腾讯云数据仓库：https://cloud.tencent.com/product/dw
- 腾讯云数据分析：https://cloud.tencent.com/product/dana
- 腾讯云数据集成：https://cloud.tencent.com/product/dt
- 腾讯云数据报表：https://cloud.tencent.com/product/dtr
- 腾讯云数据湖：https://cloud.tencent.com/product/dl
请注意，这些产品可能会随着时间的推移而发生变化，因此建议您在使用前查看最新的产品介绍。
相关·内容
在Azure数据仓库中创建存储过程时，我在"Cursor“和"FOR XML”上遇到了一些错误。所以我想知道Azure数据仓库是否支持它们。如果不是，那么有什么替代方案。
带有错误消息图片的示例代码附在这里。
浏览 10提问于2021-05-14得票数 1
1回答
在这个MDN页面上：
请读者注意使用数据属性：
而且，与将这些数据存储在JS数据仓库中相比，很差。
什么是"JS数据仓库“？
基于上面引用的文本中链接到的jsPerf测试用例，“仓库”只是一个JavaScript对象。
MDN页面引用文本的来源似乎是这篇博客文章：
浏览 0提问于2018-05-08得票数 1
回答已采纳
我想从google仪表板获取数据，并使用azure数据工厂将其加载到azure数据仓库。我有什么方法可以使用azure数据工厂将数据加载到数据仓库中吗？
浏览 16提问于2019-12-20得票数 0
在数据仓库中，ForeignKey是否具有数据完整性以外的其他优点？
对于正在进行的DW更新，我们必须启用和禁用FKs，这会导致锁，有时还会导致对select查询的死锁。
能否给出一些fks使用的好方案，以及如何处理对Datawarehouse的更新/插入？
浏览 0提问于2017-09-12得票数 1
我已经搭建了一个基于ITHitWebDAVServerEngine的WebDAV服务器，你能告诉我如何获取并发传输任务的数量吗？并限制并发上传的最大数量？谢谢
浏览 1提问于2013-04-03得票数 1
在数据仓库的世界中，代理主键与自然主键之间是否存在普遍的争论？要清楚的是--不管怎样，自然的钥匙都会在那里。对于代理键，我指的是源系统中不存在的键，但它们是作为数据仓库的ETL的一部分创建的。
是依赖于源系统的自然键作为主键，还是将代理键指定为ETL的一部分？
我一直(有限的)理解是，在操作系统中-它可以根据情况/人的不同而不同，但在数据仓库设置中-代理键是主键的无争议规范。
准确，还是更具争议性？
浏览 6提问于2019-12-04得票数 1
1回答
数据仓库的列存储索引
、、、
列存储表现在是供应商的默认方法的Kimball数据仓库表与Dim和事实为前提？
我知道在云中，微软自动推荐Azure数据仓库使用列存储。前提怎么样？这是供应商的解决方案，还是应该进行基于行的测试？
我们有SQL 2016，50个核心，200 of内存。数据库每年消耗500。
浏览 0提问于2019-02-05得票数 -1
回答已采纳
我正试图在Microsoft数据仓库之上构建一个实时报告服务。目前，我有一个拥有大约5TB数据的SQL服务器。我想将数据流到数据仓库，并使用Azure DW的计算能力生成基于数据的实时报告。是否已经准备好使用/最佳实践来做到这一点？
我正在考虑的一种方法是将数据加载到Kafka中，然后通过Spark流将其流到Azure DW中。然而，这种方法比实时方法更接近实时.是否有任何方法利用Server更改数据捕获来将数据流到数据仓库中？
浏览 6提问于2017-10-23得票数 2
回答已采纳
我正在尝试理解Essbase和传统数据仓库之间的关系。我认为它只是一种基于特定数据类型的数据仓库的替代方案。这是真的吗？它只是另一个可以用来补充或替换传统数据仓库的源吗?使用Essbase而不是数据仓库的示例是什么？需要两个源的示例是什么？谢谢大家。 -LM
浏览 70提问于2019-02-01得票数 0
回答已采纳
我可以成功交付新的Azure SQL数据仓库数据库。
如果我尝试连接到SQL数据仓库数据库，我会收到以下错误消息：
“第1行，第5列的分析错误：‘ANSI_NULLS’附近的语法不正确”。
这发生在VS 2013和VS 2015中！使用BCP将数据加载到SQL数据仓库数据库的过程成功！
谢谢，赫伯特
浏览 2提问于2015-09-05得票数 2
1回答
这个用例中的数据仓库是什么？
、、、、
我试图找出数据仓库、集群数据处理和用于查询数据仓库的工具/基础结构之间的区别(工具/服务/程序)
因此，假设我有下面的设置来为某个用例执行一些数据处理
Hadoop Cluster for Distributed Data processing
Hive for providing infrastructure and Functions for querying data from a data warehouse
My data sitting in an RDBMS or a NoSQL database
在上面的例子中，数据仓库到底是什么？我天真的头脑认为这是关系数据库或NoSQL数据
浏览 1提问于2014-01-27得票数 0
回答已采纳
1回答
我一直在琢磨如何在Microsoft上部署一个数据仓库生态系统。据我理解，当前的SQL产品中没有一个允许您运行SSIS包(SQL，)。
看起来，我需要拆分一个VM才能使用SQL安装媒体附带的Integration执行SSIS包。
但这是它变得昂贵和繁琐的地方。据我所见，我的生态系统需要：
1) SQL Azure数据仓库来存储我的事实和维度
2)一个SQL标准SQL数据库来存储我的暂存区
3)安装了Integration的VM来执行我的SSIS包
这样，我就可以购买Azure数据仓库、一个SQL Azure数据库、一个VM，而且我还必须购买一个预置版的Server，以授权SSIS的执行人员。
浏览 5提问于2016-06-14得票数 1
回答已采纳
2回答
嗨，我是数据仓库的新手，作业问我实现逻辑设计，物理和implementation.How，你能在数据仓库中建模吗：
我希望设计一个数据仓库，给出与棒球联盟有关的统计数据的答案
供玩家使用
进攻性的：
·有多少次需要击球。
·得分是多少分。
·多少次命中，双击和三次命中。
·本垒打有多少次。
·许多RBI。
·许多基于球的基础
防御性的：
▪多少出局，双打要多少？
▪有多少次助攻
▪多少个错误导致或投手：
▪多少个游戏输了？
▪赢了很多游戏
▪多少拯救小游戏
▪多少个完整游戏领先？
▪有多少游戏已经开始很多次了，它已经漂白了
▪多少次命中，双击收到，收到三次命中，收到本垒打
至于球员的数据，
浏览 0提问于2011-05-30得票数 0
回答已采纳
1回答
同一实体具有不同业务密钥的维度。
、、、、
我们有一个维度建模场景，如下所示。
如何创建产品维度，如果产品来自不同的来源和不同的业务密钥为相同的 product.Any数据仓库专家，请分享您的想法
浏览 2提问于2014-02-24得票数 0
回答已采纳
1回答
如果在MOLAP模式下的SSAS存储数据，那么SSIS的应用是什么?为什么我们需要一个数据仓库和SSIS的ETL过程？
我有一个Server数据库。我使用SSIS将我的SQL Server数据从OLTP数据库传输到包含事实表和维度表的数据仓库数据库。
之后，我想使用SSAS表单数据仓库数据创建多维数据集。
我知道MOLAP存储数据。我需要任何有事实和维度表的数据仓库吗？
避免直接从OLTP数据库创建数据仓库和创建多维数据集不是更好吗？
浏览 5提问于2014-07-07得票数 2
回答已采纳
我们将使用JHipster搭建一个spring boot应用程序。如果我想通过连接到jhipster生成的REST API，我应该选择哪种身份验证类型？
浏览 6提问于2015-11-01得票数 1
我研究过和，但我认为它们只用于调度某些作业。
数据仓库通常需要大量的作业来调度，有没有一个好的框架？
浏览 0提问于2015-04-23得票数 0
2回答
哪些NewSQL发行版适合处理数据仓库和空间查询？(MemSQL，VoltDB，NuoDB，什么？以及原因)
浏览 1提问于2018-11-27得票数 0
购买了腾讯云服务器后，发现腾讯云跟新浪云和百度云不同，没有现成的开发环境图片看到说需要自己搭建镜像，但在网上几乎找不到资料，求高手指导！
浏览 355提问于2016-01-06
我曾经认为Hive只是一种类似SQL的编程语言，用于使编写MapReduce类型的作业变得更容易(即，类似于SQL的Pig/Pig拉丁语版本)。不过，我现在正在阅读更多关于它的文章，显然它实际上是一个完整的数据仓库基础设施。
这些用例中有没有更常见的？也就是说，它主要用于它提供的数据仓库基础设施，还是更多地用于类似SQL的接口？或者这两个方面都具有同等的效用和重要性？
(我之所以问这个问题，是因为我想弄清楚我应该专注于学习Hive的哪些部分。)
浏览 0提问于2011-06-19得票数 1
回答已采纳
200GB的档案，需要存放在腾讯云产品上，供第三方下载，第三方在200家左右。需要有WEB登录界面，账号权限分配，看了一下对象存储，流量收费有点贵。
除了对象存储，只能租用主机自己搭建FTP吗？还有其他方案吗？
如果自己租用主机搭建环境，对于200家下载需要选择多少的带宽能保障他们的下载速度呢？
浏览 753提问于2017-08-29
我爱我的朋友。然而，最近我一直在做一些研究来了解主键标识的实际利弊，我发现了，它很好地总结了它。
作者在文章中指出：
对数据仓库非常有用；
是使用身份而不是GUID的优点之一。
我的理解是，对于特别大的数据库，如数据仓库，大小确实很重要--不过，文章似乎没有解释其他原因。所以我问：
为什么GUID对于数据仓库来说是个坏主意？
浏览 3提问于2012-06-14得票数 3
回答已采纳
1回答
关联维性能问题
、、、、
我正在使用2个星型模式数据仓库，每个数据仓库包含一个事实表，维度表位于单独的数据库中(两个数据仓库都使用一个数据库)。
我为每个数据仓库创建了一个多维分析项目：
在第一个项目中，我定义了维度并部署了Analysis数据库，并且我能够从Management浏览多维数据集，没有任何问题。
在第二个项目中，我定义了链接维度，并使用了第一个分析数据库中部署的维度。
当尝试浏览第二个多维数据集时，一切正常，但当我尝试浏览维度或在浏览多维数据集时添加筛选器时，管理工作室没有响应。多小时后，它返回以下错误消息：
检索子节点时发生错误:行中的消息元素(命名空间urn:schemas-micr
浏览 0提问于2019-03-18得票数 6
回答已采纳
我们一直在审查微软的现代数据仓库架构，其中提到了使用Azure Data Factory将结构化和非结构化数据拉入Azure Data Lake。我也参加了很多关于这个主题的演讲，但大多数人对data Lake是否是结构化数据的好去处意见不一。我想确定的是，如果我们要利用的唯一来源是本地SQL Server数据库，那么将数据导入到数据湖中是否是一个好策略？那么，该策略的优点/缺点是什么？
就背景而言，我们正在寻找一个单一的消费窗格-无论是使用Power BI的最终用户报告，还是Azure数据仓库/本地数据仓库的素材。我们想要一个容器，它是所有这些系统的源，而不是源OLTP系统(即OLTP数据库
浏览 3提问于2020-02-06得票数 0
我有一个规范化的事务性数据库。我正在设置一个用于报告目的的数据仓库。有没有什么工具可以自动给出反规范化建议？或者以这种方式自动化数据库更改的东西？
浏览 0提问于2009-06-08得票数 1
回答已采纳
1回答
我们每天都有数据仓库加载(使用SSIS、SQL Server 2005)。
报告是通过业务对象(XI 3.1 WebI)完成的。
我们目前没有遇到任何问题，但是，在同一时间从同一数据库进行报告的日内数据仓库加载的最佳实践是什么？
谢谢你，安穆立特
浏览 4提问于2011-03-03得票数 0
回答已采纳
我需要在我的本地机器上安装RTC和Rational Insight，但是我不知道是否应该首先为它安装数据库。甚至我都不知道哪个数据库适合Insight & RTC。
我不知道如何设置数据仓库？
浏览 4提问于2012-10-08得票数 0
注意:这是针对Core 3.0的
我正在创建一个使用现有DB的项目，所有交互都是通过现有存储过程进行的。因此，我不需要生成实体模型。
我知道如何为所有的表和特定的表搭建和创建实体模型，但是我找不到任何关于表的文档。
这个是可能的吗？
浏览 24提问于2019-11-22得票数 0
我们一直在为银行业务使用简单的数据仓库，它每晚在系统关闭时加载批量数据，并通过管理工具连接到Obiee。到目前为止，它工作得很好。 最近，我们一直在讨论为我们的数据仓库迁移到OLAP，因为从定义上看，OLAP似乎最适合数据检索，尽管它需要更多的步骤来开发分析工作区中的维度和度量事实。一些消息来源说，当使用OLAP时，查询将花费更多的时间来返回结果。如果有一些开发人员从通常的dwh开发切换到在其中实现OLAP，您会推荐它吗？
浏览 16提问于2021-04-20得票数 0
回答已采纳
3回答
我是一个数据仓库开发人员，目前正在研究如何使用Azure平台来托管一个新的数据仓库。
我的经验是使用驻留标准SQL Server数据库的前提服务器，一个用于暂存数据库，一个用于数据仓库。通常，我会为ETL使用SSIS和存储过程的组合，它们运行在调度的SQL服务器代理作业中。
如何在Azure中复制这种设置？存储大小将小于1TB，所以我可以只使用Azure SQL Server数据库而不是Azure SQL数据仓库吗？如果是这样的话，我是否需要使用弹性池选项来分阶段和数据仓库？我将加载到阶段的数据都是在前提条件下的。SSIS是否仍然适合加载到Azure，还是Azure数据工厂更适合？
任何帮助都
浏览 8提问于2020-05-13得票数 1
回答已采纳
[图片]
请描述您遇到的问题
问题所在页面
标题：搭建 Git 服务器 - 腾讯云实验室
地址：https://cloud.tencent.com/developer/labs/lab/10045/console
页面截图
浏览器信息
Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.104 Safari/537.36 Core/1.53.3357.400 QQBrowser/9.6.11858.400
浏览 3075提问于2017-09-05
1回答
我有spring引导应用程序，使用jdbctemplate，我可以用这个url显示我的数据。
http://localhost:8080/query
结果是这样的
[{"id_data":1,"id_user":1,"time":"Thursday, April 09, 2015 18:09:26","ecgvalue":3.3871,"inputtime":"2015-04-09 18:11:25.0"},{"id_data":2,"id_user"
浏览 1提问于2016-06-27得票数 0
1回答
我们有一个数据仓库(DB: PostgreSQL)，用于数据可视化目的，使用chartio .Can，任何人都建议使用一些好的数据可视化软件，最好是开源的，或者价格更低，适合于电子商务公司。
我们有一个关于Magento的网站。
提前感谢
浏览 0提问于2019-11-01得票数 1
1回答
我有一个模板数据库。此数据工厂可以访问(并使用) Azure密钥库。当我复制这个数据库时，我必须让新的数据库访问这个密钥库。
复制是通过创建一个新的github存储库来完成的，将属于“模板工厂”的存储库的内容复制到新创建的github存储库中。完成此操作后，将设置一个新的数据仓库，并将其连接到新创建的存储库。瞧！一份副本！
我想要完成的是，这个ADF副本可以自动访问密钥库。我在想:我能不能把这个模板数据库放到一个安全组中，这个组可以访问密钥库？所以，如果我复制了一个数据仓库，这个副本会自动拥有同一个组，并且可以访问密钥库？
或者我能告诉钥匙库我所有的工厂都能进入金库吗？
浏览 3提问于2020-09-03得票数 0
回答已采纳
这与和有关。可悲的是，这些都与蚂蚁搭建的平台有关。
我想了解如何在Maven构建的应用程序中做到这一点。我打赌有一种方法可以添加自定义层文件。
有什么想法吗？
浏览 3提问于2014-07-18得票数 0
回答已采纳
2回答
我知道，在ETL中，我们转换数据并在数据仓库中加载。
在ELT中，我们将数据加载到数据仓库中，然后进行转换。
除了上述两行外，它们究竟有何不同？
一个比另一个有什么优势？
在ELT的中，我看到人们在诉说，我们利用数据仓库的力量来进行转换。为什么仓库提供转换优势？
在我的用例中，我在源ADLS (源层)中有源数据，当它使用azure Databricks时，我再次将数据摄取到我的ADLS (原始层)中，然后获取原始层数据并使用azure databricks转换数据，然后再存储在ADLS (最后一层)中。现在，将最终层数据从ADLS复制到azure sql server db，如下所示。
源AD
浏览 4提问于2022-10-10得票数 3
我们正在开发和部署一个基于Oracle11gEE的数据仓库，为客户端在RHEL5 64位上进行分区。
所需的总存储量约为4TB可用空间。
我一直在阅读关于数据仓库的平衡硬件配置的文章，存储吞吐量对于数据仓库的性能是必不可少的；存储应该指定为顺序吞吐量，而不是容量，条带和镜像一切。
我们的客户非常热衷于使用他们的SAN (NetApp)，原因有很多:例如，集中管理和备份，而且他们已经在这方面花费了很多钱。
在我看来，即使是数量相对较少的本地磁盘也可能比SAN具有更好的吞吐量。
使用RAID-10的16 x 10 k RPM 600 GB SFF磁盘= 9600 GB raw = 4800 GB可
浏览 0提问于2011-06-16得票数 1
回答已采纳
1回答
我正在我现有的数据仓库上测试SSAS表格。我读到，在内存中压缩数据将是非常棒的，最高可达10倍。仓库重约600MB，分析模型约有60个度量(主要是行计数和基本计算)。在sql server management studio中，我检查了分析数据库的仿真大小：~1000MB。不是我所期望的(最多希望是100MB )。
我使用一个简单的资源监视器检查msmdsrv.exe进程的内存使用情况。令我惊讶的是，在完全处理数据库之后，msmdsrv进程的内存消耗从200MB跃升到1600MB。我部署了连接到相同源的同一模型的第二个实例，它增长到超过2500MB。所以估计的大小实际上是正确的。
数据仓库是非
浏览 1提问于2020-09-17得票数 2
1回答
我在一个数据仓库表上有一个聚集索引和几个非聚集索引，大约有18M行170列-大约18 on大小。这个表来自遗留系统，我不能改变它的结构。
该表每天都会被截断和加载。
为了获得最佳性能，加载数据和创建索引的顺序是什么？
另外，我该如何处理这个庞大的表，以便为索引做好准备？
浏览 2提问于2011-12-13得票数 0
我的应用程序中有一个User类
public class User
{
[Required, MinLength(3), MaxLength(10)]
public string FirstName { get; set; }
[MinLength(3), MaxLength(10)]
public string MiddleName { get; set; }
[Required, MinLength(3), MaxLength(10)]
public string LastN
浏览 1提问于2020-05-30得票数 1
1回答
我想问一下，我们可以在Hadoop数据仓库中存储各种类型的数据吗？像RDBMS，JSON Doc，Cassandra Keyspace，txt，CSV等数据？它们是否都存储在HDFS中？
浏览 29提问于2021-07-16得票数 1
回答已采纳
我们有一份数据仓库的工作要在一夜之间进行。今天早上，我们开始收到以下错误
S15：(8f3433d5b073b96f)：工作流失败。原因：(8f3433d5b073b09c)：BigQuery导入作业“*”失败。原因：(8f3433d5b073b7c9)：项目“*”中的BigQuery作业“*”以错误结束:作业错误:不能在单独的位置处理数据，错误:不能在不同的位置处理数据
有找到更多关于这个错误的细节吗？我们正在运行GA 1.0.0
浏览 4提问于2015-08-21得票数 2
回答已采纳
我现在的云服务器已经搭建好环境（并且搭建好网站了），但是我现在想挂载一个云盘上去，请问该怎么做呢？是必须重新搭建环境将系统盘格式化？
浏览 296提问于2016-11-30
我正在为我们的网站建立一些报告材料(一个相当大的网站，每天有几百万的页面浏览量)，我想知道有没有什么好的免费/开源数据仓库系统。
具体地说，我只想找一些东西来存储数据--我计划为它构建一个自定义的前端/UI，这样它就可以显示我们关心的信息。然而，我不想为此构建一个定制的数据库，虽然我非常确定SQL数据库在这里不能工作，但我不确定到底要使用什么。任何有帮助的文章的指针也将不胜感激。
编辑:我应该提一下--我曾经简要介绍过的一个数据库是MongoDB。它看起来可能行得通，但他们的“用例”特别提到数据仓库“不太适合”：。而且，它似乎并不是专门针对数据仓库的。
浏览 5提问于2009-10-24得票数 4
回答已采纳
2回答
这与其说是一个技术问题，不如说是一个架构问题。
我目前正在构建一个商业网站/社交网络，它需要存储大量数据，并使用这些数据来进行分析(消费者行为)。
我使用的是Django和一个PostgreSQL数据库。
现在我的问题是:我想扩展这个体系结构以包括一个数据仓库。理想的情况是:操作DB应该是当前的Django PostgreSQL数据库，而数据仓库应该是额外的东西，最好是多维模型。
我们还处于非常早期的阶段，我们将对50个用户进行测试，所以一些原始的东西就足够了，比如用于启动器的单列表。
我想知道是否有人在这种情况下有经验，可以向我推荐一个框架来创建数据仓库，同时使用Django模型管理操作数据
浏览 0提问于2012-04-10得票数 5
回答已采纳
1回答
将数据仓库中的数据转换为大数据结构所需的阶段是什么？是否有任何支持它的工具和方法？如何使用模式进行这种转换，如何处理不同的数据类型，例如事实和维度。数据分离为机器、索引或唯一键的标准是什么？
浏览 0提问于2016-09-13得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
