腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
从
数据
湖
中
检索
数据
到分析系统
、
、
我们在Hadoop文件系统
中
创建了一个新的
数据
湖
。
数据
以ORC的形式存储。目前分析系统直接连接到
数据
湖
来读取这些ORC文件。 有没有办法在
数据
湖
和分析系统之间创建一个中间层来服务
数据
?
浏览 16
提问于2018-10-04
得票数 0
7
回答
Hadoop Vs
数据
湖
、
、
我听说了
数据
湖
这个新名词。我在谷歌上查到了
数据
湖
是一个大规模的存储库和处理引擎.
数据
池提供“任何类型的
数据
的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语
数据
湖
通常与面向Hadoop的对象存储相关联。在这种情况下,组织的
数据
首先加载到Hadoop平台,然后将业务分析和
数据
挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的
数据
。我对Hadoop和
数据
<
浏览 8
提问于2016-03-14
得票数 16
2
回答
如何处理
数据
湖
vs
数据
仓库
中
的历史化
数据
?
、
在传统
数据
仓库
中
实现
数据
历史化是可能的(甚至是核心功能)。随着时间的推移,
数据
将被添加到
数据
仓库
中
,并且可以在
数据
中
及时移动。 如果我只想使用
数据
湖
,并为业务用户提供
数据
历史化,这可能吗?
浏览 36
提问于2020-11-30
得票数 0
回答已采纳
2
回答
Azure web应用程序与
数据
湖
的集成
、
、
我正在创建一个python作业,它运行脚本将存储在
数据
湖
中
的excel
数据
转换为csv。'adl://DLstorename.azuredatalakestore.net/filename.xlsx‘:OSError: Errno 22无效参数 有人能建议我应该如何将我的网络工作与
数据
湖
连接起来
浏览 0
提问于2018-04-12
得票数 1
回答已采纳
3
回答
AWS S3
数据
湖
交叉帐户的使用
、
、
我们有以下场景: Account (应用程序)将
数据
从应用程序写入帐户B(
数据
湖
)拥有的S3桶。account C (reporting)
中
的分析人员希望处理
数据
,并在其之上
构建
报告和仪表板。帐户A可以用--acl bucket-owner-full-control将
数据
写入
数据
湖
以
允许帐户B进行访问。但是帐户C仍然不能查看和处理
数据
。一种(在我们看来不好的)解决方案是将
数据
复制到
浏览 1
提问于2018-03-12
得票数 1
回答已采纳
2
回答
如果我删除Azure
数据
湖
分析帐户,它会删除它的默认
数据
源吗?
、
我对Azure相当陌生,我只是尝试Azure
数据
湖
分析。为了测试目的,我创建了一个新的Azure帐户,并且希望现在就删除它,但是在安装过程
中
,我使用了一个现有的Azure
数据
湖
存储(ADLS)帐户作为默认的存储帐户。我现在知道我可能应该添加现有的ADLS作为关联的
数据
存储。
浏览 3
提问于2017-08-18
得票数 0
2
回答
将
数据
池与已删除的记录同步
、
、
、
、
我正在建设的
数据
湖
,
以
集成多个
数据
源的高级分析。 在开始时,我选择HDFS作为
数据
湖
存储。但是我有一个更新和删除
数据
源的要求,我必须与
数据
湖
同步。要理解Data的不可变性质,我将考虑
数据
源
中
的LastModifiedDate,
以
检测该记录是否已更新,并将该记录插入
数据
湖
中
具有当前日期。这样做的目的是用最大值(日期)选择记录。但是
浏览 2
提问于2018-04-06
得票数 1
1
回答
使用Kimball的星型模式和
数据
集市的
数据
湖
、
、
、
、
目标问题 我是否应该基于业务/报告子域(多个
数据
集
浏览 0
提问于2020-09-15
得票数 1
回答已采纳
2
回答
使用
数据
湖
分析复制
数据
- U-SQL
、
、
我需要从ADLS(Azure
数据
湖
存储)源复制到接收器ADLS,但只复制最新的文件。每小时,到达源的一个.csv文件,这个文件必须被复制到宿
数据
湖
。任务:复制file_01.csv
以
接收
数据
湖
。event: Hour2 - file_02.csv到达源。任务:复制file_02.csv
以
接收
数据
湖
。诸若此类。选择最新的文件,并将该文件复制到接收器
数据
湖
中
。如何使用
浏览 2
提问于2018-04-23
得票数 0
3
回答
AWS
湖
形成: s3://abc/的
湖
形成许可不足
、
、
我正在尝试从AWS
湖
编队控制
台
设置一个
数据
集。我按照下面的资源进行同样的操作:对s3的
湖
形成许可不足: 有人能帮上忙吗
浏览 0
提问于2020-09-15
得票数 10
1
回答
能否在Azure database
中
创建链接服务到Synapse
数据
库
、
嗨,有人能让我知道是否有可能在Azure
数据
工厂
中
创建链接到湖泊
数据
库的服务吗?
浏览 2
提问于2022-06-20
得票数 0
回答已采纳
1
回答
将Azure应用程序Insight日志文件导出到Azure
数据
湖
存储
、
、
我可以通过azure应用程序洞察力跟踪我的应用程序日志文件,并导出xls工作表( ),但是为了备份跟踪目的,我需要将所有日志文件存储到蔚蓝
数据
湖
存储
中
。我需要在我的应用程序上调试这个问题,当我面对issues.but时,我得到了和继续导出sql,blob存储的链接,我不想要不必要的存储来将我的
数据
存储在蔚蓝资源
中
。因此,如果有任何方式连接应用程序洞察力到Azure
数据
湖
通过连接器或plugins.IF,its,请您分享我的链接。 谢谢。。
浏览 2
提问于2017-05-30
得票数 5
2
回答
Azure应用程序无法访问
数据
湖
存储中新创建的文件
、
、
我编写了控制
台
应用程序来监控/分析Azure
数据
湖
存储
中
的文件。我在Azure活动目录
中
创建了一个应用程序来访问azure资源。我遵循了给出的所有步骤,让能够访问蔚蓝
数据
湖
存储上的应用程序。我提供了对父目录和
数据
湖
存储的所有幼童文件夹/文件的访问权限。 现在,我可以通过我的代码访问文件。我正在使用微软提供的.NET API进行
数据
湖
分析和
数据
湖
浏览 1
提问于2018-01-30
得票数 0
1
回答
如何使用azure
数据
工厂下载blobs
、
我正在使用
数据
工厂来创建我的管道,我面临着一些挑战。
浏览 2
提问于2021-12-10
得票数 0
回答已采纳
2
回答
从头开始建
数据
湖
、
、
我正试图从零开始
构建
一个“
数据
湖
”。我理解
数据
湖
是如何工作的,以及它的用途;它遍布互联网。但是,当问题出现时,如何从头开始建立一个,就没有来源了。我想知道如果: 我知道如何运行Hadoop并将
数据
导入Hadoop。我想在前提
数据
湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1
提问于2019-02-27
得票数 2
回答已采纳
1
回答
ADLS格式Excel文件SSIS
中
的连接管理器
、
、
、
场景:我已经在ADLS中格式化了Excel文件,我希望在SSIS包
中
访问它们,并执行简单的转换并将它们加载到SQL
中
。哪些连接管理器用于获取Excel文件,因为这些不是CSV文件。
浏览 3
提问于2022-01-10
得票数 1
回答已采纳
1
回答
QlikView和Hadoop与Kerberos在同一服务器上
、
、
在同一
台
服务器上,我运行了一些qlikview的加载器和hadoop
中
的一个
数据
湖
。我的qlikview加载器使用impala连接器(您可以在qlikmarkt中找到的连接器)查询
数据
湖
的一些“表”,但我们将在
数据
湖
中使用kerberos安全性。
浏览 0
提问于2016-04-07
得票数 1
2
回答
在我的用例
中
需要
数据
吗?
我的web应用程序存储使用
数据
,例如:执行的任务等等,我需要显示仪表板和报告的使用和性能趋势,例如:平均任务执行时间是多少?
数据
来自具有特定
数据
模型的关系
数据
库。 有人要求我创建一个
数据
记录,只是给他我所有的原始
数据
。我不明白这张照片里有什么
数据
。没有模型和关系,我的
数据
是无用的。而且,我没有事件流:我在关系
数据
库中有表。例如,“任务”表
中
的一行将
浏览 0
提问于2018-11-04
得票数 1
4
回答
什么是
数据
湖
?
我熟悉“大
数据
”的概念,但“
数据
湖
”与“大
数据
”有何不同?它是从大
数据
衍生出来的吗?请解释一下。
浏览 0
提问于2019-04-24
得票数 1
回答已采纳
1
回答
AZ synapse链接
数据
平均表在AZ
数据
湖
Gen2
中
消失
、
、
、
我已经使用azure synapse link将我的dataverse表同步到az Data lake。我验证了表确实出现了。一段时间后,当我检查时,那里没有表。不知道为什么。需要帮助。
浏览 3
提问于2021-07-07
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
精品PPT | “数据湖”构建汽车集团数据中台
辨析BI、数据仓库、数据湖和数据中台内涵及差异点
企业级数据湖构建探索
数据湖中的数据格式?
DDD领域模型设计数据中台落地——苏宁供应链域数据中台构建实践
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券