我有一个带有逗号的csv文件，我试图将这些文件数据插入到cosmos数据库中。
这是我的表达式生成器：- @(A=A，B=B，C=C，D=D，E=E，F=F，G=G，H=H，I=I，J=J，K=K，L=L，M=M，N=N，O=O，P=P，Q=Q，P=P，)当我使用最多15次时，它的工作意思是最多使用I使用所有值--它不是正在无限地运行--我已经检查到4小时仍在运行的管道只包含一行。
浏览 5提问于2022-07-09得票数 0
我有一些关于Apache光束Python SDK定义的数据流的问题。如果我单步执行我的代码，它会到达pipeline.run()步骤，我认为这意味着成功地定义了执行图。然而，该作业从未在数据流监控工具上注册，这让我认为它永远不会到达管道验证步骤。
我想更多地了解这两个步骤之间发生了什么，以帮助调试问题。
浏览 3提问于2018-04-28得票数 1
然后使用GCP数据流将数据流式传输到BigQuery中。我正在使用Java进行数据流。
我想尝试一下DataFlow中给出的模板。但是数据流中的模板只接受JSON消息。python库不允许我发布JSON消息。有没有人能给我一个建议，把JSON消息发布到PubSub，这样我就可以使用数据流模板来完成这项工作。
浏览 18提问于2018-02-21得票数 0
如何使用Azure数据工厂活动统计JSON文件中的所有列数？如何使用Azure数据工厂活动展平JSON文件中的完整对象(所有列)？
浏览 29提问于2021-08-13得票数 0
数据流无法读取存储在blob存储中的API响应json文件，如果该文件被手动放置在相同的位置，则工作正常，但是对于json api响应数据流显示损坏的文件？在dataset中，我可以预览文件，但在数据流中，它不起作用。
浏览 0提问于2020-12-04得票数 0
我想发送一个数据流到一个webservice，然后该服务将根据数据流的内容进行响应。因此，它可能会响应一个JSON，该JSON表示{“错误”：“无”}或{“错误”：‘5’}。然后，如果没有发现错误，我希望使用这些信息继续处理原始数据流，或者如果发现任何错误，则记录这些信息。我的问题是，如何根据JSON响应中的值进行路由？
浏览 2提问于2019-11-15得票数 0
回答已采纳
Power BI能够使用1.0.15版的通用数据模型清单文件。但是，每当我将data Factory中的数据汇聚到CDM内联数据集时，它就会将其设置为不受支持的版本号1.1.0。我认为Power BI不理解根位置和globpattern的概念。 有问题吗？在Data Factory中，如何更改内联CDM数据集的模式版本？ ?
浏览 13提问于2021-08-31得票数 0
2回答
内存ADF中的集成运行时
、、、
我使用数据流活动将MongoDB数据转换为SQL。到目前为止，还不支持MongoDB/Atlas作为数据流的源。我正在将MongoDB数据转换为AzureBlob存储中的JSON文件，然后在数据流中使用该json文件作为源。对于大小在/大于4Gb的json源文件，每当我试图导入投影时，Azure Integration就会抛出以下错误。我已经将核心大小更改为16+16，将集群类型更改为内存优化。
浏览 16提问于2021-12-15得票数 0
回答已采纳
1回答
我必须通过从datalake读取manifest.cdm.json文件来进行一些数据工程。添加管道、运行id列并推送到sql数据库。我有一个json list file，它需要参数来读取数据流源中的CDM json file。但是使用带有for each的数据流成本太高了。那么，从当前审批中获
浏览 5提问于2022-06-19得票数 0
目前，我们从第三方供应商收到了一些JSON文件形式的元数据信息。
JSON文件包含一些需要通过ADF加载到SQL中的表的定义。，并通过ADF数据流在目标数据库中创建所需的表。我们最初设计了包含查找活动的管道，它加载JSON文件，然后将输出传递给foreach循环。当我们只有一个小的JSON文件时，这个操作非常好，但是当我们开始使用实际数据时，JSON文件超过了4MB的限制，导致查找活动抛出一个错误。然后，我们尝试使用映射数据流，方法是加载JSON作为源
浏览 6提问于2022-10-17得票数 0
Azure Data中有两个独立的数据流，我想将它们合并成一个数据流。然而，这并不适用于源阶段或水槽阶段。脚本元素不包含源或Sink连接到的数据集，如果您试图复制它们，设计器窗口将关闭，数据流将被破坏。细节在JSON中，但我尝试过复制和粘贴到JSON中，这也不起作用-源出现在画布上，但无法使用。
浏览 2提问于2021-03-09得票数 0
回答已采纳
我正在使用ADF从源系统向目标系统传输数据。其中一列是“备注”列。有时用户会在笔记栏中写下他们的生活故事。当文本长度超过1000个字符时，我们会得到一个错误。 ? 我只想传输Note列的前1,000个字符。用TSQL我可以写一些像LEFT([Note],1000)这样的东西，但是我不确定如何在ADF中做到这一点。 如何限制使用Azure Data Factory传输的字符数？
浏览 24提问于2020-11-11得票数 0
回答已采纳
在下面的JSON字符串中，如何访问"datastreams“数组中的"at”和"current_value“属性的值？在这段代码中，json包含从我调用的服务返回的<
浏览 1提问于2012-05-24得票数 1
回答已采纳
1回答
SBJson流解析器
、、、
我决定使用SBJson来解析来自我们服务器的数据流。我已经验证了我正在从服务器接收有效的JSON响应。我的问题与SBJsonStreamParser和SBJsonParser类背后的设计有关。在SBJsonParser中，方法"objectWithData“接受从JSON响应接收的数据，并使用SBJsonStreamParserAccumulator将数据流附加到单个JSON文档中。一旦数据流被收集到一个对象中，它就会被SBJsonStreamParser中的"par
浏览 1提问于2012-09-27得票数 0
回答已采纳
我目前正在创建一个流数据流作业，它只在我的数据的"Ring“列中有增量的情况下才执行计算。我的数据流代码 | "Parse Json" >> beam.Map(json.loads)
| "ParDo Divisors" >> ParDo(UpdateDelayT
浏览 6提问于2021-03-31得票数 0
回答已采纳
我有一个ADF管道，将原始日志数据作为JSON文件加载到data 2容器中。最后，Azure是否能够解析嵌套数组JSON？
浏览 0提问于2021-02-17得票数 3
回答已采纳
我有来自SQL的Source，其中数据存储为JSON。请参见下面的图像，其中记录列包含JSON。record列包含如下所示的JSON数据。我试图将JSON列扁平化，以便JSON中的每一项都以表格形式出现。在Azure Data中可以这样做吗？
浏览 1提问于2020-12-22得票数 0
回答已采纳
似乎从db读取数据并将行数据转换为JSON对象。然后，我们需要将JSON对象转换回数组并执行csv导出。
是否有一种方法可以将流特性配置为直接将行作为数组返回以提高性能(并避免无用的JSON转换)？
浏览 0提问于2019-06-11得票数 1
回答已采纳
在我之前的文章中，我被建议使用一种“适当的方法”来构建json字符串，该字符串将被插入到Server表中，以便进行日志记录。在前面的文章中，我使用字符串连接来构建一个json字符串。在Data管道中构建json的适当工具/函数是什么？我已经查看了json()和string()函数，但是它们仍然依赖于连接。澄清:我正在尝试生成如下所示的日志记录消息:现在，我正在使用字符串连接来生成日志记录json。有没有一种更好、更优雅(但更轻量级)的方法来生成json数据？
浏览 4提问于2019-11-06得票数 0
回答已采纳
在我的管道中，我有一个小的数据流活动，它从我想要在主流中使用的JSON文件中读取一个值。
通过数据流，我想用这个值设置一个变量，但是我还没有找到这样的方法。那么，如何从“数据流”中设置具有新值的变量呢？
浏览 4提问于2020-05-06得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
