7回答
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我们有
浏览 8提问于2016-03-14得票数 16
1回答
带脉的雾计算
、、、、
对于omnet++项目，fog计算可以与静脉和inet一起使用吗？我想要构建一个omnet++项目，在这个项目中，我可以在OBUs和RSU之间发送和接收消息，但是在网络的其他雾区的雾区域中使用RSU作为雾节点。
浏览 8提问于2022-02-20得票数 0
1回答
沿射线的数值积分雾体积
、、、、
以下是我正在努力做的事情，以及到目前为止我能够研究和思考的事情：
我已经在我的引擎中实现了体积光渲染，你现在给大气效果的方式要么是一个恒定的全球雾(参数化为光学长度)，一个是全局高度雾(与https://iquilezles.org/articles/fog/差不多)，要么是一个使用AABB和密度(它将光学长度模块)参数化的局部体积，以及以与高度雾相同的方式进行下降的能力(如此指数地，朝着用户的方向)这是来自https://iquile
浏览 0提问于2023-05-01得票数 1
根据Wiki页面的定义，分布式云计算是“云计算也可以由运行在不同位置的一组分布式机器提供，同时仍然连接到单个网络或集线器服务。”
这与雾计算有什么不同？根据wiki的定义，雾计算或雾网络是一种使用一个或多个协作的最终用户客户端或近用户边缘设备来执行大量存储(而不是主要存储在云数据中心中)、通信(而不是在互联网骨干网上路由)以及控制、配置、测量和管理(而不是主要由诸如
浏览 0提问于2015-02-03得票数 2
1回答
Kukreja在“Apache、Delta湖和Lakehouse的数据工程”中说，Kappa体系结构没有数据湖。微软在 (见图)中提到了一家“长期商店”，但没有透露它的实际情况。它使用这些数据来“重新计算”。对我来说，这是一个数据湖。
浏览 10提问于2022-07-21得票数 0
回答已采纳
4回答
我计划使用Azure Data Factory作为项目中数据湖分析作业的触发器。数据湖作业将根据传感器输入数据计算关键数字，这些数据由StreamAnalytics处理并存储在数据湖中。这些作业应该每隔5分钟计算一次这些值。
根据Microsoft文档，无法配置小于15分钟的间隔/频率。
浏览 3提问于2017-05-16得票数 0
1回答
我想将雾添加到场景中。但是，不是根据碎片颜色到相机的距离将雾添加到碎片颜色中，我想遵循一种更现实的方法。我想计算距离，从眼睛到碎片的矢量通过一层雾“行进”。
计算实际上非常简单。然而，麻烦的是，我必须添加一些逻辑来弄清楚相机和碎片是如何相对于雾定位的。此外，我还必须确保向量实际上<em
浏览 1提问于2014-05-11得票数 2
1回答
我已经成功地在Databricks中挂载了带有服务主体的ADLS，并且能够对数据进行必要的转换。
现在，我正在使用用户分配的托管身份来避免在代码中保留秘密。
浏览 6提问于2022-03-08得票数 0
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
1回答
我有一个要求分类的PII和非PII数据从Azure数据湖发电1文件。由于我不想复制数据湖中的物理文件创建，我们是否可以在数据湖中创建逻辑视图，最好与物化视图相比较。更好的技术-天青同步分析/数据库/ VM与火花过程，.告诉我可能性。
浏览 4提问于2020-09-11得票数 0
回答已采纳
2回答
像烟雾、雾或云这样的体积效应是如何被射线示踪剂渲染出来的？与固体物体不同的是，它们没有一个定义良好的曲面来计算与之交集。
浏览 0提问于2015-08-13得票数 14
回答已采纳
2回答
我有每秒从传感器到Azure IoT集线器的JSON数据。数据是由15个变量组成的时间序列。我想使用c#应用程序实时处理此数据，该应用程序相当复杂，并将输出事件发送到其他服务(可以是存储或PowerBI)。您认为最好的架构方法是什么?1.尝试使用c#代码处理流分析中的数据，我知道.Net支持天青流分析，但我认为还为时过早？有这种方法的经验吗? azure流分析是否支持复杂的c#算法?2.将数据存储到azure数据湖并使用数据湖分析来处
浏览 0提问于2017-07-05得票数 0
1回答
最近我发现了数据湖世界，我计划用ADL建立一个数据湖。我不确定的一件事是数据湖应该如何跟踪随时间变化/处理与源不同版本的更改。我遇到过这样的站点，声称数据湖按原样提供数据，其他状态是数据应该是时间戳，或者文件夹结构应该反映时间戳。干杯!
浏览 0提问于2019-07-24得票数 0
回答已采纳
我正在从事一个数据湖项目，我使用(编写pyspark代码)用于ETL，使用Azure DevOps用于CICD和源代码管理。我注意到了Devops中的测试计划:我的查询是，我可以使用测试计划进行数据湖测试吗？我浏览过与网络浏览相关的测试计划，但没有发现任何与数据湖、数据库或数据仓库相关的计划。
浏览 3提问于2020-01-19得票数 0
我在Azure ML Studio上的数据湖文件夹中创建了一个文件数据集，此时我可以使用以下代码将数据集下载到计算实例： subscription_id = 'xxx'
resource_group但是将数据从数据湖复制到计算实例效率不高，我如何在虚拟机中装载数据湖目录，而不是每次都复制数据？
浏览 16提问于2021-08-26得票数 1
回答已采纳
Azure数据湖是否存储公共数据集以与Azure数据湖分析一起使用？Google BigQuery提供了类似于此的公共数据集，这样就可以很容易地创建表。
浏览 5提问于2017-12-06得票数 1
回答已采纳
2回答
我一直在为客户建立数据湖，在那里我们将数据从onprem或任何其他来源加载到S3 (一个数据湖)中。我们将在这些原始数据上创建一个AWS Glue目录来创建模式。下一步是使用EMR或AWS Glue进行数据清理，将转换后的数据加载到RDS / REDSHIFT / S3中作为最终目标。分析人员、其他用户将使用IAM服务提供所需的数据/ S3桶访问，用于Quicksight可视化或使用雅典娜、data等进行
浏览 0提问于2019-08-20得票数 3
1回答
数据湖如何存储数据和格式？
、、、、
我听说数据湖可以存储任何类型的数据:关系型，NoSql，图片/图像，Adobe，Excel。如何以无SQL格式或二叉树存储数据？还是把它像普通硬盘一样保存？如果是这样的话，他们为什么不直接称之为存储，而不是数据湖呢？我正在试图找到“数据湖”的确切存储机制。
浏览 0提问于2018-09-09得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
