1回答
在讨论大数据时，有时会提到，数据建模可以通过使用map reduce这样的工具来完成，而数据处理则可以由apache来完成。数据建模任务和数据处理任务之间有什么区别？提前感谢
浏览 0提问于2022-09-17得票数 0
回答已采纳
我使用Google cloud中的GSUTIL命令行工具将文件从一个GCS文件夹复制到另一个GCS文件夹，然后进行一些数据处理。最近我在最终目标(BQ表)中发现了一些数据丢失，当我深入挖掘发现问题与文件复制有关时，当我复制大量文件时，3K~5K e，例如，似乎有些文件没有及时复制到目标文件夹，数据处理开始，这些文件最终被复制，但对于数据处理来说为时已晚在GSUTIL命令行工具中有任何标志/配置来确保复制完全完成吗？我一直使用的命令是: gsutil -m cp gs://fo
浏览 0提问于2015-05-20得票数 1
假设我有一个数据处理二进制文件，它接收作为输入文件名的数据，从一个指定文件读取数据，然后输出到另一个文件。还有其他选择/想法吗？
浏览 2提问于2015-04-22得票数 1
回答已采纳
我将如何以Windows服务的形式运行数据处理程序？最好使用免费工具，如。
有人有这样做的实际经验吗？
浏览 3提问于2017-10-31得票数 0
回答已采纳
我尝试使用C#使用SOAP服务(Agile PLM webservice)，但SOAP服务使用“数据处理程序”类型，这似乎是特定于Java的语言(据我所知使用Apache Axis库)。当我尝试使用wsdl.exe工具创建代理类时，由于没有此数据处理程序的类型而失败。有人可以建议如何(干净、有效地)使用此SOAP服务，而不必手动编写代理类或手动处理C#中的SOAP消息吗？
浏览 4提问于2011-11-05得票数 2
回答已采纳
1回答
因此，我们有各种工具从不同的来源加载数据、清理数据、处理数据、基于用户交互的标记数据等等。基本上，处理数据操作的各种流程和工具。我们的数据处理也广泛地处理用户输入。我正在寻找一个术语，我可以用来命名或描述我们的过程。
浏览 0提问于2015-08-06得票数 1
回答已采纳
我想知道的是:我应该选择哪个工具进行地理空间大数据处理、分析和可视化？哪个工具(ESRI和BigQuery)更适合用于什么？请注意，我刚刚开始了对地理空间大数据处理的研究，我想在这些替代工具之间做出选择。
任何帮助都是非常感谢的！
浏览 5提问于2019-10-28得票数 0
回答已采纳
1回答
你好，我想处理10亿行，23列的大量数据。但在熊猫身上，我甚至无法读取数据。那么，如何在我的Dell XPS 9570计算机上处理这些数据呢？我能用spark来做这个吗？有什么建议可以在我的电脑上处理吗？
浏览 11提问于2019-10-23得票数 0
1回答
这个用例中的数据仓库是什么？
、、、、
我试图找出数据仓库、集群数据处理和用于查询数据仓库的工具/基础结构之间的区别(工具/服务/程序)Hadoop Cluster for Distributed
浏览 1提问于2014-01-27得票数 0
回答已采纳
2回答
数据流
、
我是大数据处理的新手，我正在阅读有关流处理和构建数据管道的工具。我找到了Apache和Spring数据流。我想知道它们的主要区别和利弊。有人能帮我吗？
浏览 3提问于2018-07-21得票数 8
回答已采纳
1回答
我们希望使用Ganglia、Graphite、Dr.Elephant等监控工具来检查作业性能。
要设置其中任何一个，都需要修改每个节点中的配置。我想知道，数据处理程序本身是否支持任何这样的性能监控工具？
浏览 0提问于2016-06-13得票数 0
我的波束/数据流管道涉及一些数据处理，它使用Linux CLI工具(具体地说，osmium-tool版本>= 1.9.1)，该工具仅适用于一些较新的Ubuntu发行版(cosmic或disco)。
浏览 26提问于2019-10-10得票数 0
回答已采纳
1回答
我使用Azure权限进行数据治理和数据沿袭。我们在数据体系结构中使用Databricks，但是不存在任何本机支持来捕获Databricks的数据沿袭。
浏览 5提问于2022-05-11得票数 0
我们在以前的版本中使用过约定智能Datamart工具，但这与最新版本不兼容。请您提出一些方法来导出分析数据，以便与另一种报告工具一起使用，比如Power。
浏览 3提问于2016-11-23得票数 1
回答已采纳
我们希望将所有表迁移到cassandra进行数据处理。
这一迁移的可用工具是什么，您会建议什么？
浏览 0提问于2015-10-06得票数 1
回答已采纳
iv'e为我的控件设计了一个样式，使用一个数据工具，我检查了它的绑定，并使用常规属性设置器为BorderThickness属性尝试了它，以确保数据工具工作。(确实如此)
如何应用我的数据处理程序来附加一个事件处理程序，如果使用事件设置器满足了数据处理程序的条件，那么我就可以使用常规的属性设置器了？
浏览 5提问于2012-03-12得票数 10
回答已采纳
1回答
我即将开始处理大小约为500 GB的数据。我希望能够使用Python在任何给定时间访问数据的小部分。我正在考虑将PyTables或MongoDB与PyMongo (或者Hadoop -谢谢)一起使用。是否有其他我应该考虑的文件结构/DB？干杯
浏览 5提问于2012-10-08得票数 3
回答已采纳
我们有一个运行HDFS的日志收集代理，即该代理(如Flume)不断从一些应用程序收集日志，然后将其写入HDFS。读写过程不间断地运行，导致HDFS的目标文件不断增加。FileInputFormat.addInputPath(job, new Path("hdfs://namenode:9000/data/collect"));
浏览 2提问于2015-06-29得票数 1
我有一个使用django框架构建的网站，它在一个输入csv文件夹中进行一些数据处理。我想使用html文本框作为控制台日志，让用户知道数据处理正在进行中。数据处理是使用python函数完成的。如果我的问题不够具体，很抱歉，我还在学习如何使用这些工具！ 'job_id': job_id})
实际上，我的主
浏览 4提问于2018-05-24得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
