1回答
我试图建立一个大的数据平台，在Hadoop中接收和存储大量的异构数据，如文档、视频、图像、传感器数据等，然后实现分类过程。那么，由于我目前使用的是VMware VSphere EXSi Hadoop，什么样的体系结构可以帮助我
Habse XAMPP所有这些都很好，但是我不知道如何接收大量数据和如何存储数据，因为我发现Hbase是一个面向列的数据库，而不是数据仓库。
浏览 1提问于2015-10-05得票数 0
回答已采纳
2回答
我正在做一个包含大量非结构化数据的项目。是否有适用于非结构化数据的数据库软件或工具？如果没有工具或其他软件，如果mysql或sql server是我唯一的选择，我会使用什么数据库设计？
浏览 3提问于2011-12-10得票数 3
我正在切割我的牙齿进入Hadoop生态系统，并对MR，纱线和HDFS相当了解。
我正在探索生态系统的其他部分。我相信HiveQL可以以类似于SQL的方式在HBase上运行，而且几乎是实时的。如果是这样的话，我认为有必要将HDFS上的非结构化数据转换为结构化数据，以便在HQL中运行相对较快的查询。这是否意味着数据以非结构化形式以HDFS形式存在，然后以结构化形式复制到HDFS上供HBase和HQL使用？
此外，HiveQL是否可以以批处理模式(小时)直接运行在HDFS上的非结构化数据上。类似于Java运行的时间与job先生相似)？
浏览 1提问于2015-08-30得票数 0
我混淆了csv是结构化数据还是半结构化数据。就像RDBMS一样，它是一个有关系的结构化数据，但是csv没有关系。我找不到确切的答案。
浏览 4提问于2017-09-21得票数 7
当我查看结构化数据示例以获得丰富的结果(不管类型如何)时，我注意到不同的网站对“属性”有不同的优先级。
在确定SERP位置时，我的结构化数据属性的顺序重要吗？
作为一个例子，这里有两个食谱丰富的结果来自两个不同的网站。这两个示例都适用于相同的@类型(食谱)(草莓短饼)。
目标urls:
所有配方结果：https://www.allrecipes.com/recipe/8201/strawberry-shortcake/
食物网络结果：https://www.foodnetwork.com/recipes/strawberry-shortcake-recipe3-1938695
谷歌查询：htt
浏览 0提问于2019-11-15得票数 2
回答已采纳
去噪自动编码器能用于结构化数据的异常检测吗？
我知道我可以用去噪自动编码器来检测图像上的异常，但我不知道他们是否也能对结构化数据进行去噪？如果没有，为什么？
浏览 0提问于2019-04-29得票数 2
1回答
试图理解未标记数据和非结构化数据之间的区别。它们是同义词吗？ 据我所知，未标记的数据是突出显示目标变量的数据。非结构化数据只是原始数据。
浏览 27提问于2020-02-02得票数 1
回答已采纳
1回答
Hadoop主要用于处理非结构化或半结构化数据。我想使用Hadoop来处理大量的结构化数据。
虽然hadoop能够从数据库读取(通过DBInputFormat)，但它不被认为是一种可伸缩的方法，因为数据库连接的数量将是有限的。
有人使用hadoop从RDBMS读取数据吗？表演是什么？它可以支持多少个节点？
谢谢
浏览 3提问于2011-12-01得票数 1
回答已采纳
1回答
我们有一个需求，即结构化数据和非结构化数据都进入系统。我们需要对两者都进行索引，然后启用搜索功能。我们在Hadoop平台上使用SolrCloud。对于结构化数据，我们计划将数据放入HBase中，而非结构化数据则直接放入HDFS中。
我的问题是如何在单个Solr核心下索引这些源？这是否可能在SolrCloud中将结构化和非结构化数据都索引到单个核心/集合中，然后启用该索引上的搜索功能？
提前谢谢。
浏览 8提问于2015-03-29得票数 0
回答已采纳
假设我有一个数据仓库( datawarehouse，DWH)，现在我想添加许多其他大数据源，其中大多数不是结构化的。我仍然保持DWH没有任何建筑变化。我所做的唯一的事情就是使用连接来丰富数据驻留在DWH中的大数据。在这种情况下，DWH可以定义为datalake吗？
浏览 0提问于2016-11-01得票数 2
回答已采纳
我刚安装完Hadoop。我正在从互联网上下载数据样本。
我可以把什么类型的数据放入HDFS？例如，我可以放Excel表格吗？
谢谢
浏览 7提问于2014-07-03得票数 0
回答已采纳
我读到rdbms和nosql数据库的一个区别是存储非结构化数据，我知道每个nosql数据库都有自己的架构和算法，但我想知道为什么rdbms不能存储非结构化数据？
为什么nosql数据库可以做到这一点，如果你给我一个简单的例子，让我理解nosql数据库是如何做到这一点的，以及是什么使rdbms无法存储非结构化数据，我将非常感谢。
浏览 1提问于2013-09-10得票数 3
1回答
像Spark、apache这样的数据处理引擎是如何将结构化、半结构化和非结构化数据集成在一起并影响计算的？
浏览 2提问于2015-04-12得票数 0
回答已采纳
2回答
从头开始建数据湖
、、
我正试图从零开始构建一个“数据湖”。我理解数据湖是如何工作的，以及它的用途；它遍布互联网。但是，当问题出现时，如何从头开始建立一个，就没有来源了。我想知道如果：
数据仓库+ Hadoop =数据湖
我知道如何运行Hadoop并将数据导入Hadoop。我想在前提数据湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1提问于2019-02-27得票数 2
回答已采纳
1回答
让我们考虑一个类似XML的半结构化数据模型和一个类似于众所周知的关系数据模型的结构化数据模型。
什么时候更好地将数据存储在XML数据库中而不是关系dbms ?？
这显然取决于我们想要管理的数据类型，但是是否有一种特定类型的数据可以更好地使用XML数据库？
我在XML中看到的唯一优点是，如果有大量空值的实体只对属性'type‘的值进行更改，则可以节省内存。在XML文件中，我们根本不将空属性存储在关系表中。
在我看来，还有很多事情要做，但我毫无头绪。
浏览 2提问于2012-12-30得票数 0
1回答
关于数据挖掘，结构化文本和非结构化文本有什么区别？在选择/开发数据挖掘方法来分析这些不同的文本时，主要考虑因素是什么？
浏览 109提问于2011-05-04得票数 0
回答已采纳
1回答
能实现什么？
、、
我正在阅读Hadoop教程，并得出以下浅显的理解。有人能帮我确认一下我的理解是否正确吗？
Mapreduce是一种聚合数据的方法
在分布式环境中
使用非常大的文件中的非结构化数据。
使用Java、Python等。
生成类似于使用SQL聚合函数在RDBMS中可以执行的操作的结果。
select count, sum, max, min, avg, k2
from input_file
group by k2
map()方法基本上是将从输入文件到垂直行的一行的水平数据v1枢轴，每一行都有一个字符串键和一个数值。
分组将发生在数据流的洗牌和分区阶段。
减()方
浏览 3提问于2015-11-12得票数 0
回答已采纳
1回答
不规则间隔数据到三维网格的插值
、、、、
我正在处理一些仪器数据，这些数据记录了特定纬度、经度和压力(高度)坐标下的温度。我需要从这个仪器数据创建一个3d网格，然后我可以使用它来获取插值网格数据的垂直横截面。我已经查看了几乎所有我能找到的插值函数/库，但我仍然无法理解如何做到这一点。
我不喜欢使用Mayavi，因为它似乎在我学校的服务器上出了问题，而且我不想现在就去解决它。
数据目前在4个独立的一维数组中，我用这些数组模拟了一些我想要得到的散点图。
以下是我的仪器数据点的结构：
这就是我想要创建的：
最终，我想从这些点创建一些3d轮廓，我可以对其进行切片。每个绘制的点都有一个对应的温度，这就是我认为在尺寸和诸如此类的方面让
浏览 0提问于2016-04-21得票数 0
1回答
我们正在手动更新结构化数据到每天创建的文章的100多个。我们能以任何方式使这一过程自动化吗？
另外，另一个担忧是当前的结构化数据显示了许多错误。这些错误是否影响SEO。
浏览 0提问于2019-03-17得票数 0
1回答
我正在尝试使用结构化数据记录消息。但它对结构化数据显示为空值。我正在使用rsyslog 8.9.0。有没有人能告诉我，我需要加载一些模块或修改源代码，以便在记录的消息中获得结构数据SD- in。
模板：
<%PRI%>%TIMESTAMP:::daterfc3339%%HOSTNAME%%syslogtag%%APPNAME%%PROCID%%MSGID% %msg% %STRUCTURED-DATA%\n
获取消息格式如下：
<142> 2015-01-29T06:43:53.081641-05:00 localhost login[2116]: login 211
浏览 0提问于2015-03-05得票数 2
1回答
在使用SQL数据库时，有不同的方法来显示系统的流程。在银行中，您可以使用ER来显示其属性。对于它的操作，使用UML类的关系图。
如果有我可以使用的图表，那么还有什么更好的方法来为最终用户表示NoSQL数据库。
浏览 0提问于2018-07-08得票数 3
回答已采纳
在使用GTM时，是否可以在加载窗口事件之后生成有效的架构？
所谓有效，我指的是一个模式，它将使用在DOM就绪事件之后创建的数据层变量，并在Google生成SERPs时被“考虑”(不知道这是否是正确的术语)。
目前，标记在Page中生成一个模式，但它大多是空的，因为数据层变量尚未创建。
该网站是一个单一的网页网站。
浏览 0提问于2019-11-18得票数 1
1回答
我正在努力确保我的个人投资组合网站上的结构化数据是最好的设置，以鼓励我的名字谷歌知识图表人面板。虽然我知道单靠结构化数据是不够的，但我知道它会有所帮助。
现在，我写了一些Person json-ld，其中包含了很多关于我自己的信息，比如name、jobTitle、alumniOf、address (仅限于国家/地区)和sameAs，其中列出了我的社交媒体简介。
根据谷歌的指南，他们希望结构化数据中的信息也是用户可见的，然而，在我的Person结构化数据块中引用的信息并不都在同一个页面上，而是分布在我的网站上。我的职位和位置在我的/contact/页面上，我的母校在我的/resume/页面上，我
浏览 0提问于2020-04-14得票数 2
回答已采纳
关于NoSQL数据库更适合非结构化数据，因为它们的无模式性，这种说法随处可见。坦白说我不明白。人类的语音记录常常被用作非结构化数据的一个例子。我可以用数据类型BLOB将其存储在关系数据库中，并将其存储在定义良好的模式中。有人能解释一下吗？
浏览 0提问于2018-01-22得票数 2
回答已采纳
1回答
存储异构元素
、、
我希望生成输出文件，以便随后在Paraview中可视化。我将拥有：
多边形(具有标量属性)
行(带有标量属性)
结构化网格上的数据
在Paraview中，我想同时可视化它们。对于每个类(例如多边形、线条)，颜色代码将表示单个属性值。
问:我是否必须为每个类生成一个文件，即多边形及其属性的一个文件、线条及其属性的一个文件、网格数据的一个文件，并在Paraview中手动组装“全貌”？
还是有办法将所有内容存储在一个文件中？
浏览 1提问于2014-10-19得票数 0
回答已采纳
1回答
我用的是火花2.4。
我正在将星火流应用程序迁移到结构化流。
我正在为每个批处理进行生成度量，并且我希望控制每个微批的统计数据。我对每个processingDelay、schedulingDelay和totalDelay指标以及在结构化流中找到它们的位置很感兴趣。
我尝试了以下方法，但它不生成任何统计数据。
val recentBatchInfos = new StatsReportListener(60).batchInfos
val numberOfRecords = recentBatchInfos.map(_.numRecords).sum
有人能告诉我们如何使用，拥有对统计数据的控制
浏览 0提问于2018-11-16得票数 4
回答已采纳
1回答
我目前正在与一组开发人员一起工作，他们正在将CosmosDB作为后端存储来实现，我对如何使用它有一些疑问。
我知道这些文档应该是平面结构的，但这到底意味着什么呢？
如果数据是真正的关系型的，并且彼此之间非常依赖，那么这种设计是否正确，或者SQL数据库是否更适合？
RetailProduct
{
"RetailProductId": "123",
"FriendlyName": "TestRetailProduct",
"WholeSaleProductId": "100"
}
浏览 1提问于2018-09-10得票数 5
回答已采纳
我想知道如何创建包含将包含结构化数据的列的SQL表，如下所示：
CREATE TABLE mytable(
username VARCHAR(20) NOT NULL,
user_structured_data "here the type for structured data"
);
有什么办法吗？谢谢。
浏览 1提问于2014-04-19得票数 0
回答已采纳
1回答
有人能解释一下为什么XML是一种半结构化数据吗？为什么它不能是结构化数据？如果是半结构化数据，你能给我解释一下下面的XML例子吗，这样会很有帮助。
<Node>
<FirstName>VITTHAL</FirstName>
<LastName>MUGULI</LastName>
</Node>
浏览 3提问于2015-06-18得票数 1
2回答
如何将非结构化数据用于预测目的？(所谓非结构化，我指的是数据库意义上的非结构化)。
我有一个预测系统，它使用历史数据和一组额外的解释功能来预测需求。就数据库而言，这是数据所能得到的结构。
我在几个地方听说过，大数据和非结构化数据可以用来改善需求预测。
但是当我深入研究细节时，它们似乎总是首先将非结构化数据减少为某种结构化格式，然后将其提供给他们所使用的任何预测方法。他们没有使用“真正的非结构化数据”。
如何在预测算法中使用真正的非结构化数据？有什么出版物和参考资料吗？
浏览 0提问于2016-06-03得票数 0
我正在编写一个web应用程序，它需要一个数据库，其中包含用户、朋友等实体。因为Cloud 服务不是免费的，所以我正在寻找替代方案。Amazon 是一种选择，因为他们有一个免费的层，可以在短期内满足我的需求，但在我进入之前，我想了解更多关于know商店的信息。
使用such存储这类信息是理想的吗？有这样的问题：
如何将读/写延迟与传统数据库进行比较？
如果我从blobstore开始，然后我想要迁移到关系数据库，那么我可能面临哪些问题呢？
最重要的是，如果在我的场景中使用blobstore是理想的话。
在查看了google站点上的文档之后，我发现like商店被用来存储大/中型文
浏览 3提问于2012-09-11得票数 0
回答已采纳
1回答
按名称访问列数据时出错
、、、
我很难通过列名从结构化的numpy数组获取数据。最后是我的相关代码。我认为它很简单，很短，可以全部发布(这是一个很简单的)。
如果test.out文件不存在，可以将数据生成为简单的数据。我总是从文件中加载数据，只是为了测试目的。这在这里不重要(我想)。然后，如果文件中的数据是同质的，我将强制使用结构化数组。我想通过像data['f3']这样的列名来访问数据，但是我得到了一些奇怪的形状。我得到了一个单元素列表。例如：
shape: (10, 1), data['f3']:
[[ 0.50308252]
[ 0.16259077]
[ 0.5448315 ]
浏览 2提问于2014-01-13得票数 1
回答已采纳
在学习分布式存储系统时，我遇到了一个基本的问题:结构化非结构化数据和半结构化数据的区别是什么?我已经知道了它们之间的简单区别，我想知道的是它们之间的区别。
浏览 2提问于2018-05-18得票数 0
回答已采纳
我和一个队友在讨论我们的工作经验，他说他在一个叫做Informatica的工具中工作。他的工作包括从EDI文件中提取所需的信息并进行转换，然后将它们加载到数据库中。他说，EDI文件具有非结构化数据，而不是像.CSV和.SQL这样的格式，而在EDI文件中，列由“\”符号分隔。
在我看来，EDI和CSV没有任何区别，只有CSV是'，‘分离’和EDI是‘\’分开的，那么为什么EDI文件会被归类为非结构化数据呢？
浏览 5提问于2015-09-01得票数 1
回答已采纳
2回答
我对NoSQL还比较陌生，但我已经对关系数据库做了相当多的尝试。
我们正在评估Cassandra，以便在我们的数据模型可能需要相当积极地发展的环境中使用。我看到它写了多个地方卡桑德拉可以存储“结构化，半结构化和非结构化”数据。
我理解结构化的主张。很明显:表定义了列。
我想我理解半结构化的说法。行不需要填充所有列。
但我不清楚非结构化的说法。当然，您可以将所有内容存储为键值blob，但是您无法通过值(有效)进行搜索。
我没有在网络上找到任何描述使用Cassandra非结构化数据的最佳实践的资源。理想情况下，对于我们的应用程序来说，半结构化数据就足够了；但是，如果它能够为我们增加价值的话，我想了
浏览 7提问于2014-07-17得票数 6
回答已采纳
1回答
我正在研究REST体系结构，阅读本文：
但我对此有些怀疑：
我知道REST并不直接依赖于HTTP，但是HTTP是实现REST的一种聪明方法。
我还了解到，REST的重点是资源概念，它类似于管理数据、状态、执行处理的编程元素，资源由URL表示。例如，如下所示：可以是代表家庭银行帐户的资源。
此外，我知道，通过REST，资源可以通过URL在Web上访问，我们可以使用预定义的方法集与其交互，如果REST是基于HTTP的，则这组方法是HTTP协议(GET、PUT、POST、DELETE)提供的方法。
我觉得这一切对我来说都很清楚。
我所怀疑的是REST 提供了一组交换表示的资源的概念。我认为我理解资源
浏览 1提问于2015-02-15得票数 0
1回答
我想问一下，我们可以在Hadoop数据仓库中存储各种类型的数据吗？像RDBMS，JSON Doc，Cassandra Keyspace，txt，CSV等数据？它们是否都存储在HDFS中？
浏览 29提问于2021-07-16得票数 1
回答已采纳
1回答
多个数据库或一个数据库
、、、
我已经在这个问题上看到了一些答案，但没有什么真正适用于我的特殊情况。
我将构建一个移动应用程序，主要是手机、平板电脑等。我可能会使用，我计划拥有大量的用户数据，比如统计数据、图像等等。
所以，我很好奇，什么样的数据在扩展性更好，查询效率更高，将所有不同类型的数据分离到数据库中，或者只有一个大的数据库。按照我现在的想法，如果我分开处理，我会有大约3个基于云的数据库。
如对此有任何意见，谢谢。
浏览 0提问于2017-01-15得票数 4
回答已采纳
1回答
我正在为一个庞大的用户社区(200万以上)构建一个数字产品，使用Express + GraphQL作为API服务器，使用React +阿波罗作为web应用程序。然后，当web部件完成后，我将使用Reacti原住民构建移动应用程序。
现在，我正在思考如何开发这个部分，以便为平台中的用户生成内容收集所有统计数据。为了简化事情，比方说，我必须记录：
每篇文章的唯一用户视图
每一篇文章的浏览总数
访问每个用户配置文件
我有几个问题要问那些在开发这类系统以收集数据方面有经验的人。
如何记录原始数据？是否应该在数据库中创建一种日志，然后根据需要使用它生成聚合数据？
类似于(文章视图示例
浏览 1提问于2018-11-14得票数 0
1回答
谷歌招聘公告中的官方内容指南提到，hiringOrganization是必需的，“您必须将结构化数据显示在搜索结果中所需的属性包括在内。任何缺少所需字段的职务公告都不会考虑增强搜索结果。”
但是，同一文档页还声明"如果雇主不被披露， hiringOrganization属性必须为空“。(见“内容指南”一节中的“有效例子”)
此外，在谷歌的官方结构化数据测试工具中，如果hiringOrganization留空(使用空JSON对象"hiringOrganization": {}或空字符串"hiringOrganization": "")，则会
浏览 0提问于2018-05-17得票数 5
我不是数据科学领域的人，我需要对我的数据进行一些统计分析，但我不知道我应该使用哪种分析工具。
变量数-6
自变量3 -(一个是标量(例如，2, 4，6,8,10)，另两个是标称变量(例如，A、B、C和Lote 1、Lote 2、Lote 3、Lote 4、Lote 5)
因变量-3(所有标量变量和所有三个自变量的相依性，它们基本上是性能指标)
我想回答的一个问题是，考虑到名义变量，当标量自变量增加时，因变量是如何运行的。下图显示了我的数据样本。
📷
浏览 0提问于2020-08-22得票数 0
1回答
我正在开发一个带有Asp.net核心web的颤振应用程序，该应用程序连接到Server数据库。
除了存储图像部分，一切都很正常。
我以前有过使用sql server varbinary(max)数据类型的经验，但问题在于，我使用了image_picker：^0.8.5+3包来选择多个图像，我试图使用dart的Uint8List将其转换为二进制数据--看起来如下所示: 255、216、255、225我把它存储成字符串，这就是图像表的设计。
我遇到的问题是字符串长度太大，有时达到40000，所以我认为这不是存储数据的最佳方法。
因此，我所需要的只是一种有效的方法来根据我前面提到的需求和约
浏览 4提问于2022-10-18得票数 0
我正在我们的电子商务评论网站上实现Schema.org结构化数据。
在产品评审页面上可以看到许多评论(这些评论都是用结构化数据注释的)。但这些评论也出现在头版的“最近的评论”专栏，我不确定我是应该标记所有的东西，还是仅仅是网站的关键部分。
实现结构化数据会改变搜索引擎将我们的数据视为“重复”的方式吗？或者，不管是哪种方式，他们都认为它是重复的。
浏览 0提问于2017-12-20得票数 5
回答已采纳
2回答
我目前正在一个网站工作，销售昂贵但非常利基的产品，必须指定到特定的规格，然后才能下单。我们永远不会向公众出售这些产品，我们希望购买这些产品的人知道他们在寻找什么。
在这种情况下，使用结构化数据有什么意义吗？
浏览 0提问于2018-01-30得票数 1
回答已采纳
我有一个网站，我是工作的搜索引擎优化。根据我的知识，我已经把所有必需的结构化数据都放进去了，并且还用Google网站管理员的结构化数据测试工具测试了它，它可以很好地检测所有的东西，并且所有的要求都满足了。
但回到网站管理员工具中，当我转到:搜索外观>结构化数据时，它说：
We do not detect any structured data on your site.
Structured data helps Google understand the content on your site, which can be used to display rich snippets i
浏览 0提问于2013-09-27得票数 8
回答已采纳
2回答
NaNs上的填充和插值
、、、、
我一直难以解决如何使用scipy.interpolate函数( LinearNDInterpolator、网格数据或最好是NearestNDInterpolator)。
网上有一些教程，但我很困惑我的数据需要以什么形式出现。nearestND的在线文档非常糟糕。
该职能要求：
x : (Npoints, Ndims) ndarray of floats
Data point coordinates.
y : (Npoints,) ndarray of float or complex
Data point values.
我有表格中的数据:
浏览 2提问于2018-07-25得票数 1
回答已采纳
我用Weebly来建立我的网站。我的网站是“在”谷歌，但GWT说它不能检测到任何结构化数据。
我该怎么做？我明白这是什么，但不知道该怎么做。
浏览 0提问于2012-11-28得票数 1
我是第一次接触numpy，我正在尝试从CSV文件生成一个数组。我被告知.genfromtxt方法在生成数组以及自动检测和分配数据类型方面工作得很好。在我检查数组的形状之前，这个公式看起来没有任何缺陷。 import numpy as np
taxi = np.genfromtxt("nyc_taxis.csv", delimiter=",", dtype = None, names = True)
taxi.shape
[out]: (89560,) 我相信这表明我的数据集现在是一个一维数组。我在课堂上学习的教程的最终结果是taxi.shape as (8
浏览 19提问于2020-04-27得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
