腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
保持
Logstash
运行
,
以便
它将
数据
从
我
的
RDBMS
同步
到
ES
?
、
、
我
对麋鹿来说完全是个新手,所以请原谅
我
的
无知。
我
已经能够让
Logstash
将
数据
从
我
的
数据
库发送到Elasticsearch,但一旦完成传输,它就会退出。
我
如何
让它
保持
运行
,使它们
保持
同步
?谢谢
浏览 15
提问于2016-07-28
得票数 0
回答已采纳
1
回答
Logstash
将字段名全部转换为小写
、
、
、
、
我
使用
Logstash
使
我
的
MySql
数据
库和
ES
保持
同步
。
我
希望两个
数据
库中
的
字段名称
保持
相同。但是
logstash
正在将一些大写
的
字段名称转换为小写。
如何
配置
logstash
,使这些大写
的
字段名
保持
不变? 提前感谢!
浏览 43
提问于2017-02-25
得票数 0
回答已采纳
1
回答
不发生通过
Logstash
进行弹性搜索
的
Server
同步
-重新传输
、
、
背景:我们正在对elasticsearch(
ES
)进行
同步
Server错误日志
数据
的
POC操作,
以便
在基班纳引入仪表板。
我
使用
Logstash
和jdbc输入插件将sql服务器表
数据
移动到(
ES
),这是成功
的
。在日志表中,大约有5000条记录,每个记录都被移动到
ES
。问题声明:为了测试,
我
删除了前面由
Logstash
同步
的
浏览 0
提问于2018-09-18
得票数 0
回答已采纳
1
回答
如何
通过Nifi或sqoop使
RDBMS
与Hive
保持
同步
,而不是创建新
的
记录
、
、
、
、
Requirement:需要从
RDBMS
( Server)获取1000 s
的
表,并将其推到Hive中,
以便
几乎实时地
运行
分析和生成报表。现在假设Hive和
Rdbms
表是
同步
的
,它们都有10条记录,现在
我
在
RDBMS
中更新1行,现在Nifi将读取这个新更新
的
记录,并且"PutORC"/"PutHDFS“处理器将新记录放在指定
的
Hdfs目录下
的
浏览 1
提问于2022-07-13
得票数 0
回答已采纳
1
回答
使用在Raspberry Pi上
运行
的
Elasticsearch
、
、
、
我
一直在尝试建立一个低预算
的
麋鹿堆栈。
我
的
目标是让自己熟悉这项技术,而不是拥有一个高负载
的
生产就绪系统。
Logstash
在EC2-micro实例上
运行
,而Elasticsearch在
我
的
本地网络中
的
Raspberry Pi上
运行
。Kibana在
我
的
个人笔记本电脑上
运行
。由于只有几十个文档被索引,RPi需要超过20秒来处理来自Kibana
的
浏览 0
提问于2018-03-07
得票数 0
1
回答
如何
使用
logstash
同步
从
mongodb
到
elasticsearch
的
更改(在mongo中执行crud操作时弹性
的
i.e.reflect变化)
、
、
我
只想用
logstash
将mongodb
的
数据
同步
到
弹性
数据
。它
运行
良好,当任何新记录出现在mongodb中时,
logstash
就会进入弹性状态。但是,当我更新mongodb中
的
任何记录时,它不会更改为elasticsearch。
我
希望在配置文件中进行更改,
以便
在mongo中
的
任何记录更新时,它也应该反映在弹性中。
我
已经尝试过让动作=>“索
浏览 12
提问于2019-11-06
得票数 1
2
回答
从
AWS mysql RDS获取
数据
到
AWS Elasticsearch
的
最简单方法是什么?
、
、
、
我
在AWS RDS中有
数据
,
我
想通过管道将其传输到AWS
ES
实例,最好每小时更新一次,或类似的更新。在
我
的
本地机器上,使用本地mysql
数据
库和Elasticsearch
数据
库,使用
Logstash
可以很容易地设置它。 有没有一种“原生”
的
AWS方式来做同样
的
事情?或者
我
需要设置一个EC2服务器,然后自己在上面安装
Logstash
?
浏览 1
提问于2017-04-29
得票数 13
回答已采纳
1
回答
及时将多个日志
从
filebeat发送到
logstash
、
、
我
有一个服务器,所有的日志都在一个目录中。现在,这些文件按日期分隔。
如何
设置filebeat,
以便
将这些文件中
的
所有日志文件发送到其他服务器上
的
kibana(以及
如何
配置),
以便
在单个文件中以同样及时
的
方式接收日志。例如:在服务器A中:
我
有40个日志文件,用于最近40天
的
日志
我
希望这40个日志及时,
从
最旧
的
到
最新
的
在其他服务器
浏览 27
提问于2019-07-23
得票数 0
3
回答
基班纳:没有索引错误
、
、
、
、
我
成功地安装了
logstash
(1.4.2)、elasticsearch(1.1.1)和kibana(3.0.1),但仍在努力消除错误。同样
的
事情也适用于这个CLI /opt/
logstash
/bin/
logstash
-f </etc/
logstash
/conf.d/10-syslog.conf>。 使用
的
日志存储文件示例如下所示。请让
我
知道,如果还有什么需
浏览 0
提问于2014-11-09
得票数 3
1
回答
使SQL Server
数据
库和Elasticsearch索引
保持
同步
、
、
、
、
我
正在尝试
从
SQL Server
同步
数据
。
我
试着使用下面的链接。 statement => "SELECT TOP 100
浏览 12
提问于2020-02-25
得票数 0
回答已采纳
1
回答
如何
将应用程序日志
从
NodeJS应用程序发送到Kubernetes托管
的
弹性堆栈?
、
、
现在,
我
的
应用程序托管在Kubernetes中,
我
还将Elastic部署
到
同一个GKE集群中。现在
我
对弹性Stack很陌生了。
我
有一个小小
的
想法,我们必须把
数据
发送到
logstash
,然后它会发送给弹性搜索。然后我们就可以在基巴纳想象。
我
尝试了几个教程,但仍然没有一个坚实
的
想法,
如何
做到这一点。将我
的
应用程序连接到堆栈。
到
堆栈中
的</em
浏览 0
提问于2019-11-01
得票数 4
1
回答
当
Logstash
试图写入
数据
时Elasticsearch死亡
、
我
有一个Raspberry Pi 2(2015年4月
的
最新版本)设置,上周在测试网络上同时
运行
ElasticSearch和
Logstash
(不是一个简单
的
设置,但它稳定了一个多星期!)
我
今天重新启动了
我
的
机器,并且一直很难让事情再次
运行
;
ES
和LS都将独立
运行
,但是当我试图将LS输出推到
ES
中时,
ES
实例就会消失而不需要解释。
我
的</e
浏览 0
提问于2015-04-05
得票数 9
1
回答
Logstash
将"yyyy-MM-dd“转换为”yyyy-mm-dd‘T’to :mm:ss.SSSZ“
、
、
我
使用
logstash
-input-jdbc插件将我
的
数据
从
mysql
同步
到
elasiticsearch。但是,当我查看elasticsearch中
的
数据
时,
我
发现所有date类型
的
字段格式都从"yyyy-MM-dd“变成了”yyyy-mm-dd‘T’is :mm:ss.SSSZ“.I有将近200个字段
的
类型是date,所以我想知道
如何
配置
log
浏览 0
提问于2019-01-07
得票数 0
1
回答
如何
将apache日志从一个容器发送到另一个容器中
的
日志存储?
、
、
、
在过去
的
三天里,
我
一直试图
从
我
的
码头
的
集装箱收集所有的日志,并将它们发送到
Logstash
。
我
一直在与麋鹿堆栈(Elasticsearch,
Logstash
和Kibana)合作,
我
使用Logspout作为这个日志
的
路由器。 麋鹿堆栈
的
所有三个实例都
运行
在不同
的
容器中。
我
跟踪了。
我
当前
的
浏览 5
提问于2017-08-25
得票数 1
回答已采纳
3
回答
同步
MongoDb
到
ElasticSearch
、
、
我
正在寻找一种方法,以
同步
在MongoDB与弹性搜索(
ES
)集合。目标是将MongoDB作为主要
数据
源,并使用MongoDB作为全文搜索引擎。(
我
的
项目的业务逻辑用python编写)。Mongo-connectRiver pluginlogstash-input-mongodb (
logstash
插件) Transporter 然而,大多数建议都有几年
的
历史了,
我
找不到任何支持当前版本
ES
(
ES
浏览 19
提问于2019-10-11
得票数 2
回答已采纳
1
回答
OrientDB传送器-只
从
关系
数据
库中提取顶点
的
选定列
、
我
试图
从
Oracle
RDBMS
中提取
数据
,并使用teleporter将其移动到OrientDB。
我
的
关系
数据
库有多个列,并且维护了E关系。
我
有两个问题:
我
的
目标是只获得少数列(拥有独特
的
标识和外键关系),而不是所有庞大
的
列
数据
。是否有任何配置
我
可以这样做。今天,只包括和排除在全DB表级别上
的
工作。另一个目标是
保持
浏览 4
提问于2017-01-05
得票数 0
回答已采纳
7
回答
使用Elasticsearch
的
Logstash
、
我
正在尝试将
Logstash
与Elasticsearch连接起来,但无法使其工作。下面是
我
的
logstash
conf: stdin { } type => "syslog-ng"" }
我
只在<em
浏览 3
提问于2013-06-11
得票数 14
回答已采纳
1
回答
Logstash
Elasticsearch输出批量插入与Elasticsearch筛选器冲突
、
我
遇到了一个问题,
我
的
日志
数据
和工作流似乎与Elasticsearch输出批量插入
的
方式冲突。 if [eventType] == "End" {
浏览 18
提问于2017-08-23
得票数 0
2
回答
使用ELK堆栈将用户信息添加到集中式日志记录中
、
、
、
我
使用ELK堆栈(第一个项目)来集中服务器
的
日志,并使用Kibana可视化一些实时统计
数据
。日志存储在
ES
索引中,
我
有另一个包含用户信息
的
索引(IP、名称、人口统计学)。
我
试图: 解决这些问题<em
浏览 2
提问于2014-12-17
得票数 2
1
回答
如何
从
弹性豆柄连接到AWS ElasticSearch实例?
、
、
、
我
想授权
从
我
的
ElasticBean秸秆( Rails)应用程序访问我
的
AWS ElasticSearch实例。具体来说,
我
试图通过
logstash
-elasticsearch插件来传输日志存储
数据
。
我
考虑过
的
其他选择: 允许访问EC2实例
的
弹性IC地址(
如何
?)授予对
ES
实例<em
浏览 3
提问于2016-12-21
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
震惊,ES与MySQL竟可以这样亲密无间!
在Python中使用Elasticsearch
运维之路-完整的ELK搭建全过程和配置文件
在Linux系统发行版(以CentOS7为例)上部署ElasticSearch集群并启动Kibana和Logstash
昔有打码之辛,今有ELK之便,潸然泪下
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
腾讯会议
活动推荐
运营活动
广告
关闭
领券