我们正在使用从Databricks到bulk的bulk库,将它们写入CosmosDB容器。
当前吞吐量设置在容器(5个容器)级别(例如:10000 RUs)。有时,给定容器油门上的几个写入操作(如RUs消耗的)是100%,但在重试之后完成。加载到容器中的是并行。如果我们将吞吐量更改为数据库级别(例如:50000 RUs -在容器中平均分布)并在s
我学习了如何使用spark-cosmosdb连接器使用来自CosmosDB的数据创建DataFrame,所以现在我想用DataFrame做一些事情。一切都很好,直到我对小的数据集合进行操作(或者我在读取配置中添加了额外的custom_query以缩小数据范围)。但是当我尝试执行df.count()或%%sql select * from c order by name desc时,收到的错误提示是:Request rate is large ()。我考