如何限制上传到ElasticSearch的数据量
限制上传到ElasticSearch的数据量可以通过以下几种方式实现：
- 通过索引设置：在ElasticSearch中，数据是以索引的形式存储的。可以通过设置索引的最大文档数或者最大存储大小来限制数据量。当达到设定的阈值时，ElasticSearch会自动拒绝新的写入请求。
- 通过文档过期策略：ElasticSearch支持设置文档的过期时间，可以根据需求设置文档的生命周期。当文档过期后，ElasticSearch会自动删除该文档，从而限制数据量的增长。
- 通过分片和副本设置：ElasticSearch将数据分片存储在不同的节点上，可以通过设置分片和副本的数量来限制数据量的增长。当达到设定的分片和副本数量时，ElasticSearch会自动拒绝新的写入请求。
- 通过索引别名和滚动索引：可以使用索引别名和滚动索引的方式来限制数据量。通过定期创建新的索引，并将别名指向最新的索引，旧的索引可以进行归档或删除，从而限制数据量的增长。
- 通过数据清理和压缩：可以定期清理不再需要的数据，例如删除过期的文档或者归档旧的索引。此外，还可以使用压缩算法对数据进行压缩，减少存储空间的占用。
需要注意的是，以上方法都是通过ElasticSearch本身的功能来限制数据量，具体的实施方式和参数设置可以根据实际需求和场景进行调整。另外，腾讯云提供了ElasticSearch服务，可以通过腾讯云的ElasticSearch产品来实现上述功能。详情请参考腾讯云ElasticSearch产品介绍：https://cloud.tencent.com/product/es
相关·内容
我们正在探索云扳手作为Elasticsearch集群的替代品，目前正在布局我们的数据库模式。
我们想知道我们是否应该使用一个包含大量空列的大表，还是应该使用一个带有大量一对一子表的精益基表。对于较大的表，我们将有大约250亿到1000亿个条目(一些表可能更多)，因此大规模的连接/聚合可能是一个问题。
列中的空值是否需要与定义的列类型的实际值相同的存储空间？
云扳手是否存在像Elasticsearch这样的稀疏值文档的问题？
云扳手如何处理超过10亿个父-子文档的连接/聚合？
浏览 1提问于2017-10-05得票数 1
回答已采纳
我试着在Centos 8上运行麋鹿与码头-合成：
我的docker-compose.yml
version: '3.1'
services:
elasticsearch:
image: docker.elastic.co/elasticsearch/elasticsearch:6.2.4
container_name: elasticsearch
hostname: elasticsearch
ports:
- "9200:9200"
expose:
- "9200"
volumes:
浏览 3提问于2020-03-03得票数 0
1回答
我最近超过了我的防火墙存储，因此，它停止工作。为了解决这个问题，我删除了存储中的所有文件，完全删除了当单击控制台中的存储按钮时出现的第一个文件夹。令人惊讶的是，当试图再次从我的应用程序加载视频文件时，它不再起作用，而是显示下面的错误。我怀疑这与找不到参考资料有关。我的问题是我怎么解决这个问题。我是我的应用程序，我是直接上传到Storage.storage().reference()使用.putFile。如果这不是正确的引用，我如何创建一个新的？
这就是我试图把视频上传到我的存储空间的方式：
let USER_STORAGE = Storage.storage().reference()
//
浏览 1提问于2018-01-20得票数 0
我正在使用filerob7.x收集日志数据，但我面临的问题是日志大小太大(每天100 so )。
现在，我正在考虑如何从源文件中收集错误级别日志。做这件事最好的方法是什么？
我正在使用file节拍发送日志到elasticsearch，它在Kubernetes集群中，我在这里关注的是，我应该使用kafka和logstash来定义规则吗？
请在文件节拍配置文件下面找到使用的文件：
{
"filebeat.yml": "filebeat.inputs:
- type: container
paths:
- /
浏览 2提问于2020-06-13得票数 0
回答已采纳
1回答
对于现有的大型ElasticSearch 5索引，我想添加一个date字段，其中包含每个文档的索引日期。然后，我想查询这个索引，以返回在最后一分钟创建的所有文档。
在中提到，为日、月和/或年添加额外的过滤器可以显著提高性能。较新版本的指南不再这样说。
我可以通过添加额外的日期过滤器在ElasticSearch 5中获得性能吗？
浏览 2提问于2017-07-11得票数 5
2回答
我需要使用html5画布创建一个组件，该组件提供用户可以在其上绘制的图像，并直接(通过一种保存按钮)将其自定义版本上传到服务器上。
我可以使用html canvas吗？有什么建议吗？
提前进行thx
浏览 1提问于2010-09-10得票数 7
1回答
我将使用RabbitMQ集成一些应用程序。现在我面对的是设计问题。现在，我有一个产生消息的应用程序，一个应用程序正在使用它(将来可能有更多的消息)。这两个应用程序都可以访问某些数据库。应用程序A是一种在接收到注册请求时向rabitmq发送消息的注册应用程序。现在，应用程序b接收到此消息，其任务是将注册数据加载到elasticsearch服务器。现在我有了一些选择
使用者将从q读取消息和id并加载数据，并将其发送到弹性搜索服务器的最快吞吐量。因为事情会以异步的方式进行。其他可能在单独服务器上运行的进程将加载数据并发送到弹性服务器。
使用者将从Q读取消息和id，然后调用rest服务来加载公
浏览 2提问于2015-05-13得票数 1
回答已采纳
我的团队正在使用Google平台开发数据平台。我们将公司的数据上传到上，并尝试在Bigquery上创建数据集市。但是，为了节省GCP的使用成本，我们考虑将所有数据从gcs加载到bigquery，或者在bigquery上创建外部表。
哪种方式更符合成本效益？
浏览 6提问于2022-02-25得票数 1
回答已采纳
1回答
优化Fargate任务
、、、、
当我试图开发一种策略来优化我的一些应用程序在Fargate上的性能时，我遇到了一些复杂性。虽然应用程序已经部署，但仍有一些重大滞后。
所以这些图像被上传到ECR并部署在Fargate上。为容器间通信启用了服务发现。在这些容器中，有四个spring引导apis与各种Oracle RDS连接，还有一些容器化的角度应用程序正在消耗这些apis，并通过REST调用获取所有这些数据。
我不想进入设置jvm堆大小之类的问题。首先，我需要知道对UI和apis的标准mem和cpu使用的大致估计。通常，用于UI的ecr中的映像都在50-60MB左右，apis范围在200-260mb之间。
对于如何尝试apis和
浏览 7提问于2022-02-02得票数 -1
回答已采纳
我们计划在我们的一个项目中使用ElasticSearch。目前，我们正在用我们的数据测试ElasticSearch 5.0.1。我们面临的一个问题是，当我们从我们的MySQL表进行批量上传到elasticsearch时，我们会收到以下错误。
java.lang.IllegalArgumentException: Limit of total fields [1000] in index [shopfront] has been exceeded
at org.elasticsearch.index.mapper.MapperService.checkTotalFieldsLimit(Mappe
浏览 4提问于2016-11-29得票数 4
回答已采纳
我所处的情况是，我已经为ElasticSearch结果申请了限制，但这并不适用于我。我已经通过了下面的代码：
module Invoices
class RestaurantBuilder < Base
def query(options = {})
buckets = {}
aggregations = {
orders_count: { sum: { field: :orders_count } },
orders_tip: { sum: { field: :orders_tip }
浏览 2提问于2018-04-27得票数 0
我们使用的是jhipster，应用程序托管在AWS上。现在我们使用默认的嵌入式elasticsearch服务器，索引存储在目标文件夹中，但我想知道使用elasticsearch进行生产的正确方式是什么？我们是应该设置一个在端口9300上运行的单独实例，还是应该使用Amazon Elasticsearch Service？感谢您的建议。
浏览 20提问于2017-03-09得票数 3
回答已采纳
2回答
我的应用程序目前需要将大量数据上传到数据库服务器(SQL Server)和本地SQLite数据库(本地缓存)上。
为了提高速度，我在向数据库插入数据时总是使用事务。但现在，我正在处理每个插入批处理20k行或更多行的内容，我担心事务可能会导致问题。基本上，我不知道的是，事务是否对您可以在其下插入的数据量有限制。
在数据库中插入大量行的事务的正确使用方式是什么？例如，您是否每1000行开始/提交一次？
浏览 0提问于2010-07-02得票数 2
回答已采纳
我需要维护SVF2版本的Inventor模型，以便与大型模型查看器一起使用，作为基于web的商店应用程序的一部分。这些是相当大的Inventor程序集，我预计最终我们将把几百GB的Inventor数据转换为SVF2。我将本地模型上传到Forge桶并执行转换任务。
随着时间的推移，我对此所需的存储量感到担忧。根据对这篇文章的答复：
看来SVF2会有自己的骨灰盒，所以我可以安全地删除模型。包括数据库在内的整个清单是否会继续可用？
浏览 6提问于2022-10-20得票数 0
回答已采纳
我使用elasticsearch作为DB存储大量日志数据。我知道有两种方法可以分页：
使用大小和来自API
使用滚动API
现在我从前端和后端使用' from‘来执行pagination.Get页面和大小参数(Java)
searchSourceBuilder.size(size);
searchSourceBuilder.from(page * size);
但是，如果page*size > 10000，则从ES引发异常。
我可以使用滚动API进行分页吗？
我知道，如果我使用滚动API，searchResponse对象将返回一个_scroll_id，它看起来像一
浏览 2提问于2017-11-14得票数 8
当我从命令行运行elasticsearch时，我得到这样一个进程：
asdf 71356 0.0 1.9 3828644 160064 s004 S 11:34PM 1:16.39 /usr/bin/java -Xms256m -Xmx1g -Xss256k -Djava.awt.headless=true -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:CMSInitiatingOccupancyFraction=75 -XX:+UseCMSInitiatingOccupancyOnly -XX:+HeapDumpOnOutOfM
浏览 0提问于2014-02-25得票数 0
回答已采纳
1回答
EC2，内存崩溃
、、
我无法插入到我的ec2实例中，不得不重新启动。
日志显示以下消息(journalctl -b -2 -e)
Jan 12 02:08:03 ip-172-31-20-233 kernel: oom-kill:constraint=CONSTRAINT_NONE,nodemask=(null),cpuset=/,mems_allowed=0,global_oom,task_memcg=/docker/654b69f95e8c8fc9dde5cf1b6554dfa2ebbd6554bee760c6de410186a3bdfe3d\
,task=java,pid=27444,uid=1000
Jan
浏览 13提问于2022-01-12得票数 1
回答已采纳
我们在AWS上使用ElasticSearch服务，我们希望使用连字符分解器令牌过滤器()。
这个筛选器需要一些文件(hyphenation_patterns_path和word_list_path，后者可以是内联的，但包含成千上万的单词，看起来不像是一个智能解决方案)，需要在ElasticSearch服务器上显示。因为在ElasticSearch服务中，我们不控制服务器，所以似乎没有记录在案的方式将文件上传到服务器。我们如何才能仍然使用这个令牌过滤器？
浏览 0提问于2019-06-17得票数 2
我目前正在实现直接上传到azure存储容器的ajax浏览器。首先，我需要一个签名的url，它允许我在不与浏览器共享私钥的情况下做到这一点(我在之前的ajax调用中向服务器请求这个签名的URL )。
我的服务器端代码看起来像这样；
public string GetSignature(string fileName, int contentLength)
{
CloudBlobContainer blobContainer = this.BlobClient.GetContainerReference("demo");
CloudBlockBlob blob =
浏览 0提问于2016-02-01得票数 1
复制步骤:启动应用程序，转到设备设置-> iCloud ->存储和备份->管理存储->设备名，在应用程序列表中查找Disney，并观察应用程序的大小
观察结果:应用程序将数据上传到iCloud。预期结果:如果不打算支持iCloud，应用程序不应该将任何数据上传到它。
浏览 4提问于2014-07-31得票数 0
回答已采纳
如何限制上传到Elasticsearch的数据量？我的旧笔记本电脑不能处理像我正在使用的那样的大型数据集。 我使用了以下代码来“限制”要上传的数据 from elasticsearch import helpers, Elasticsearch
import csv
import itertools
with open('my_data.csv', encoding="utf8") as f:
reader = csv.DictReader(f)
for row in itertools.islice(reader, 1000): #limi
浏览 29提问于2021-02-04得票数 0
回答已采纳
我有一个带有两个节点的Elasticsearch 1.1.1集群。每个配置的堆为18G。(每个节点上的RAM是32G)我们总共有6个碎片，每个碎片有一个副本。ES运行在Ubuntu框上的64位JVM上。
我们的集群中只有一个索引。集群健康看起来是绿色的。每个节点的文档计数接近2亿。在每个集群节点上使用的数据大约为150 is。没有未分配的碎片。
系统遇到了OOM问题(java.lang.OutOfMemoryError: Java堆空间)。
含量elasticsearch.yml
bootstrap.mlockall: true
transport.tcp.compress: true
i
浏览 9提问于2017-03-16得票数 0
回答已采纳
我下面的链接是“使用亚马逊S3存储单个亚马逊Elasticsearch服务索引”
我成功地将索引从AWS Elasticseach上传到S3存储桶，但也注意到S3存储桶上的文件夹名称已更改。
ElasticSearch上的文件夹名称：
S3存储桶上的文件夹名称：
浏览 2提问于2018-08-21得票数 0
我正在尝试使用logstash (6.3.1)将文档批量上传到elasticsearch(6.3)。文档中输入日期的字段之一。下面是我的映射类型`
{
"mappings": {
"users" : {
"properties" : {
"name" : { "type" : "text" },
"location" : { "type" : "geo_point"},
浏览 4提问于2018-08-24得票数 1
回答已采纳
2回答
我正在尝试将食谱上传到chef服务器上，我正在使用elasticsearch，并编写了我的包装器食谱my-elasticsearch，但我收到以下错误：
iMac:chef-repo abc$ knife cookbook upload elasticsearch --cookbook-path cookbooks/
Uploading elasticsearch [0.3.13]
Uploaded 1 cookbook.
iMac:chef-repo abc$ knife cookbook upload my-elasticsearch
Uploading magnetic-elk [
浏览 1提问于2015-02-25得票数 0
我已经将一些大型表上传到BigQuery，并可以在它们上运行查询。通过只扫描特定的所需列而不是SELECT *，我已经成功地降低了水平成本。
是否有任何方法来限制数据扫描垂直以及。我可以看到使用LIMIT
将限制子句应用于SELECT *查询不会影响读取的数据量。您是因为读取整个表中的所有字节而被计费的。
是否有其他方法可以减少给定查询的BigQuery扫描记录的数量？可能是通过上传(并正确命名)许多较小的表而不是一个大表，还是通过特定的BigQuery SQL？
如果它是相关的，我的文件是以拼花格式。
浏览 1提问于2019-11-11得票数 0
回答已采纳
1回答
我有一条管道: Webserver+rsyslog->Kafka->Logstash->ElasticSearch->Kibana
我找到了这些工具来帮助测试管道：
通过使用EC2旋压实例来生成with服务器负载
在Kafka上生成负载并使用帮助图形吞吐量
我想知道是否有人对测试组件或端到端测试有其他建议？谢谢。
浏览 0提问于2016-05-12得票数 1
回答已采纳
我对elasticsearch数据库非常陌生。
我正在开发一个文档存储库应用程序，其中上传到该应用程序的所有文档都将转到S3。根据S3文件键( S3存储桶中的文件路径)，我生成了一个Base64编码的字符串，我们将其用作Elasticsearch中的文档Id。
Elasticsearch文档包含与上传的文件相关的数据，比如从文件中提取的一些用于搜索的内容，以及一些与文件相关的附加元数据。
现在我的问题是:在elasticsearch中使用Base64编码的字符串作为文档Id在性能和安全性方面是否安全。
浏览 1提问于2021-05-24得票数 0
我们正在开发一个JAVA项目，它处理大量数据，但必须提供全文搜索选项(匈牙利语)。因此，我们开始考虑什么样的体系结构可以满足我们的需求。我的想法如下：
使用ElasticSearch作为数据库是一种反模式，因此必须仅用于索引和搜索。
MongoDB符合我们的期望，因此它似乎是一个很好的数据库选择。
问题是，如何用MongoDB索引ElasticSearch数据？我用1300万份文件创建了一个POC。我反复遍历文档，每次迭代时都将它们保存到MongoDB中(它给出了每个文档的ID )，然后我将文档放入ElasticSearch中，但只存储了MongoDB。文档索引非常快，平均每个文档4,8 ms
浏览 0提问于2016-01-06得票数 0
回答已采纳
我们正在围绕Elasticsearch设计一个大型框架，并正在研究一些选项。
对于一些复杂的分析作业，我们正在寻找一种从当前连接的Elasticsearch节点检索数据的方法，即仅从我通过客户端连接到的节点上的主碎片中检索数据，或者如果该节点上没有主碎片，则没有结果？
这是否可以通过一些搜索属性或通过更专门的设置？
当然，我们希望尽可能多地使用普通的Elasticsearch功能，但有时可能会有需要这种访问的查询，这是否适用于Elasticsearch？
浏览 4提问于2015-09-17得票数 0
回答已采纳
因此，我在一台服务器上运行了一个相当简单的Node.js应用程序，使用mongoDB作为主数据库，使用elasticsearch作为“复制集”，只在ES中索引与搜索相关的字段。我需要升级，因为旧版本与以下划线开头的字段冲突(例如。"_id")。
有没有一种方法可以在没有停机的情况下升级elasticsearch --而不掉回mongoDB呢？另外，在这个场景中备份elasticsearch的正确方法是什么？如果出现问题，恢复备份的步骤是什么？
TLDR:在这些版本之间备份和升级的正确方法是什么？
浏览 2提问于2015-10-20得票数 0
回答已采纳
1回答
我已经根据安装指南设置了Elasticsearch、Kibana和X-pack，并确保它按预期工作。现在我想用X包中的守望者发送一份Kibana报告。我遵循设置了安全报告，但是在将观察者信任库添加到elasticsarch.yml之后，当我尝试启动弹性操作时，我会得到以下错误消息：
[2016-11-22T12:19:57,111][INFO ][o.e.e.NodeEnvironment ] [CBeNcdh] using [1] data paths, mounts [[OS (c:)]], net usable_space [72.3gb], net total_space [22
浏览 4提问于2016-11-22得票数 4
回答已采纳
我目前正在做一个项目，正如标题所暗示的那样，我想要做的是能够从HTML中搜索已经上传到elasticsearch上的集群，并在HTML中预览结果。
我想过使用Logstash将搜索输入从HTML发送到elasticsearch，但我想不出在HTML中查看这些结果的方法。一般来说，我想要做的是能够像kibana那样使用elasticsearch，但要从网站进行。
感谢任何可能的帮助:)
浏览 1提问于2018-01-18得票数 0
我在linux虚拟机上有弹性搜索索引。我遇到下面的错误，请告诉我如何解决。索引工作得很好，因为某些原因，服务器离线了，而客户端应用程序将数据推送到了elastic。
我有一个托管的appsearch服务与此连接。下面是错误跟踪，任何帮助都是非常感谢的。如果我手动删除索引，elastic服务将停止并返回错误。它不只是一个索引，很少有索引有问题，我使用的弹性版本是“数字”："7.5.2"，
Caused by: java.nio.file.FileSystemException: /datadrive/data/nodes/0/indices/1x33jEA9SfavBaZavN2
浏览 69提问于2020-05-05得票数 0
1回答
如何设置与每个查询相关的数据限制。
在一次查询运行中，不能扫描超过10 In的数据。
我一直在跟踪这个链接，并获得了如何设置限制在用户和项目级别的信息。，但未能找到每个查询的配额限制。
浏览 5提问于2022-11-27得票数 0
1回答
我问了两个问题。第一个看起来像这样(它简单地列出了所有数据)：
# listing 1
from elasticsearch import Elasticsearch
from elasticsearch_dsl import Search, Q, F
....
.... connection etc
s = Search(using=db,index="reestr")
rows = s.execute()
for r in rows:
print(r)
listing 1从数据库中打印出所有文档。奇怪的是，当我试图限制这样的文档数量时：
# listing 2
fr
浏览 4提问于2015-06-17得票数 0
回答已采纳
1回答
主页上的文档说每个数据库只有200,000。 但是它是什么呢？他们会收我多少钱。同时发生100,000个连接？没有提到计算器上的同时连接。
浏览 41提问于2020-06-20得票数 0
我有一个亚马逊网络服务管理的Elasticsearch集群，需要更新http.max_content_length。 接口地址：https://www.elastic.co/guide/en/elasticsearch/reference/current/modules-http.html#_settings_2 我见过的唯一方法是通过SSH进入一个实例，将http.max_content_length="1000mb"添加到/etc/elasticsearch/elasticsearch.yml配置中，然后重新启动Elasticsearch服务器。 然而，我不确定这对于AW
浏览 209提问于2019-04-06得票数 2
我有一个通用的iOS应用程序，它使用ShareKit共享图像和一行文本：
SHKItem *item = [SHKItem image:imageToShare title: shareTitle];
if (destination == K_FACEBOOK) {
[SHKFacebook shareItem: item];
}
图像是一个不超过512x512的UIImage，文本行小于200个字符，因此总有效负载为~50k。当我分享到电子邮件或twitter时，它几乎是瞬间的，但当我分享到Facebook时，它可能会花费20-30秒。
在我的Facebook分享器配置中，我禁用了Fac
浏览 3提问于2012-08-16得票数 1
我以这种方式安装了elasticsearch :在windows上检索tar.gz，提取它并将它放到一个zip上，将zip上传到服务器上的ssh上，然后使用“unzip文件”解压缩它。
我修改了elasticsearch文件，使其具有以下行
export JAVA_HOME = "/home/xxx/project1/jdk1.8.0_73_linux64"
就在下面
#!/bin/sh
现在，当我进入/home/xxx/project1 1/elasticsearch/bin并键入
./elasticsearch
我得到了
-bash: ./elasticsearch: Pe
浏览 1提问于2016-03-07得票数 1
回答已采纳
这个解释了如何使用REST上传附件。
但我想把附件上传到java客户端..。
我假设下列课程是相关的(尽管我可能错了).
org.elasticsearch.ingest.IngestService
org.elasticsearch.ingest.PipelineStore
我意识到我可以回到REST接口，但我宁愿先尝试使用本地客户端.
浏览 7提问于2017-02-17得票数 1
回答已采纳
我没有找到这样的指南或文章，如何为托管在Windows上的ElasticSearch这样做。
我有EC2 amazon实例，它在端口9200上运行ElasticSearch服务器，但无法通过服务器外的_ec2_ip_adress:9200实现。
我完全确信所有TCP端口都是在amazon安全组规则中打开的，我也关闭了服务器上的防火墙。
这就是ElasticSearch吐露的问题所在。有人能帮我吗？
浏览 1提问于2017-01-11得票数 0
回答已采纳
我正在做一个D3可视化的工作，幸运的是取得了一些进展。然而，我遇到了一个问题...老实说，我不确定这是MongoDB的问题，还是D3的问题。您可以看到，我正在尝试从一组传感器点(我的JSON对象包含时间戳、光线、温度、湿度和运动检测级别或每个数据点)绘制一系列图形。但是，我的传感器每隔8秒就会将数据上传到我的MongoDB数据库。因此，如果我只查询MongoDB数据库中一天的数据...我得到了10,800个数据点。更糟糕的是，如果我请求一个月的数据，我将被324,000个数据点淹没。我的问题是，当处理超过1000个点时，我的d3可视化变得缓慢(我在四个不同的图形上可视化数据，每个图形都使用一个
浏览 0提问于2013-04-06得票数 0
我正在为SonarQube管理写一本内部手册，但是在将ElasticSearch engine放入产品之后，我还没有能够结束这个圈子。在此之前，DB备份和复制一些文件夹足以保存SQ状态，但我现在应该如何处理ElasticSearch？
我是否应该简单地再使用ES的一个节点，以便拥有一个活动的索引副本？我是否应该复制新的节点分片并将其保留为备份？如果需要，如何恢复SQ状态？
浏览 0提问于2017-02-20得票数 0
5回答
我正在研究Sonarqube 5.1。它以前工作得很好，后来我在设备error.So上没有空间了，我删除了一些不需要的文件，重新启动了服务。现在我可以看到服务状态正在运行，但是我无法访问网页(因为没有启动声呐webservice )，我已经检查了日志，并发现了下面的错误。
2015.08.03 10:58:56 INFO es[o.elasticsearch.node] [sonar-1438592314778] started
2015.08.03 10:59:03 INFO es[o.e.gateway] [sonar-1438592314778] recovered [6]
浏览 8提问于2015-08-03得票数 10
回答已采纳
1回答
在当前的体系结构中，Power BI数据集通过网关连接到oracle数据库，并且服务上的数据集按计划进行刷新。
然而，由于oracle的巨大代码和表中的巨大数据导致的不一致，cline正在寻求将整个体系结构更改为Kafka和Cassandra数据库，这将是实时数据。因此，客户在power BI上寻找实时数据，那么，如何实现连接到Cassandra数据库的流式数据集并将实时数据推送到仪表板。
谢谢!
浏览 2提问于2021-03-05得票数 0
我使用here描述的机器学习方法将CSV数据上传到elasticsearch。 这创建了一个索引和一个带有csv预处理器的管道。导入成功。 假设索引名为iislog，管道名为iislog-pipeline，那么将CSV数据上传到elasticsearch的对应curl命令行是什么
浏览 21提问于2020-10-23得票数 1
回答已采纳
1回答
我刚开始了解elasticsearch，我想知道它是否适合我的情况：
考虑公司(有多名员工)可以注册和管理客户并向客户发送文档的系统。
现在，我想让公司能够搜索他们的文件--但只有他们的，而不是其他公司的文件。换句话说:如何将这些公司的数据分离出来进行搜索？如何用elasticsearch实现这一点？
这种分离是由elasticsearch自己处理的吗？也就是说，在我的系统中的公司和elasticsearch的相关用户之间有一些映射。还是由我的系统后端来处理？即后端以某种方式决定(如何决定？)仅显示该特定公司的搜索结果。所以只有一个用户，即我系统的后端，可以访问和过滤elasticsearch
浏览 2提问于2017-03-02得票数 2
回答已采纳
如果我有一个用于POST请求的基本http处理程序，如果有效负载大于100KB，我如何停止处理？
据我所知，在我的POST Handler中，服务器在幕后传输发布的数据。但如果我尝试访问它，它会阻止正确吗？如果它的大小超过100KB，我想停止处理。
浏览 5提问于2015-11-18得票数 6
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
