腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
SQL
语句
on
Logstash
JDBC
|
如何
只
过滤
今天
插入
的
行
?
在我
的
oracle数据库中,我有一个列insert_date。在elasticsearch上,我只想索引
今天
插入
的
事件。下面是我
的
conf:
jdbc
{
jdbc
_connection_string => "
jdbc
:oracle:thin
jdbc
_user => "xxx"
浏览 6
提问于2020-01-13
得票数 3
回答已采纳
2
回答
将弹性搜索与PostgreSQL相结合,同时使用Sails.js和水平线ORM
、
、
、
我正在尝试将Elasticsearch与Sails.js集成,我
的
数据库不是MongoDB:我使用PostgreSQL,所以这个没有帮助。我已经在我
的
Ubuntu盒上安装了Elasticsearch,现在它正在成功运行。我也在我
的
Sails项目上安装了这个,但是我不能在我现有的模型上创建索引。
如何
在模型上定义索引,
如何
在模型中使用Elasticsearch进行搜索? 我需要在模型内部定义
的
钩子是什么?
浏览 5
提问于2016-06-02
得票数 4
回答已采纳
1
回答
Logstash
:
sql
_last_value显示错误
的
垃圾日期(将6个月
的
旧日期显示为上次运行时)
、
、
、
、
我正在观察非常奇怪
的
问题,我使用
logstash
+
jdbc
将数据从Oracle db加载到下面的Elasticsearch,这是我
的
配置文件
的
样子。metadata][_id]}" password => "<pwd>" codec => dots}
今天
当我为第一次加载时,其all good
浏览 5
提问于2021-03-08
得票数 0
回答已采纳
1
回答
如何
使用
logstash
(不重复)从MySQL动态更新数据?
、
、
、
我已经将
logstash
.conf配置为动态
插入
数据库
的
数据,但问题是:
jdbc
{
jdbc
_connection_string =>"
jdbc
:mysql://loc
浏览 0
提问于2019-01-29
得票数 3
回答已采纳
4
回答
如何
为
Logstash
输入MongoDB类型
、
、
但是我
的
mongodb中有一个集合,我希望它作为输入,这样我就可以在ES中使用它。这个是可能
的
吗?谢谢。
浏览 5
提问于2014-12-01
得票数 7
回答已采纳
1
回答
如何
为redis定义
logstash
配置文件
、
、
我在
Logstash
上工作,并使用Redis作为输入。我是新来
的
。之前,我在MySQL上用
JDBC
实现了配置文件。
jdbc
_password => ""$redis
浏览 0
提问于2020-01-17
得票数 1
1
回答
ELK堆栈配置
、
、
、
一些东西,即文件拍获取数据并将其发送给
logstash
项目No1 -> filebeat ->
logstash
项目No3 ->
logstash
(这里
的</e
浏览 0
提问于2021-02-15
得票数 0
1
回答
Logstash
:同一个管道
的
多个tracking_columns
、
、
我有一个
Logstash
管道,它从MS视图获取数据,它连接到表A和表B,并将去标记
的
数据放入ES中。
jdbc
{ #Program=> "/usr/share/
logs
浏览 0
提问于2021-06-16
得票数 2
回答已采纳
3
回答
我应该
如何
在日志中使用
sql
_last_value?
、
、
、
、
我不太清楚当我这样做
的
时候
sql
_last_value会做什么:我可以稍微理解使用它
的
原因,它不会浏览整个数据库表来更新字段,而
只
更新新添加
的
记录。所以我想要做
的
是,使用
logstash
创建索引:
jdbc
{
jdbc</em
浏览 0
提问于2016-11-02
得票数 6
回答已采纳
1
回答
使用elasticsearch和
logstash
移除输入标签字段
、
、
我正在使用
logstash
发送到elasticsearch,有人知道
如何
删除标签字段吗?我使用这个字段来
过滤
每个
jdbc
输入应该进入
的
位置,下面给出一个例子。我希望该字段不会被
插入
到elasticsearch中,我已经尝试过remove_field,但在使用它时,它不会直接
插入
到elastic中。input {
jdbc
_driver_library => "/
浏览 40
提问于2020-05-20
得票数 1
1
回答
Elasticsearch匹配查询- NEST
、
、
、
、
我基本上有两个字段,我使用soundex分析器进行索引,请参阅下面的配置,但是当我使用类似于索引中存储
的
名称进行搜索时,它不起作用。,因为我已经检查过了,但是基本上,这些查询被传递到一个查询容器列表中,并转换成一个可以传递到bool查询中
的
数组。编辑:[ElasticsearchType(Name = "person", IdProperty = "id")]
浏览 2
提问于2016-12-21
得票数 0
回答已采纳
1
回答
使用
logstash
句柄删除场景
的
增量索引
、
当
插入
或更新新行时,我将使用下面的
Logstash
配置来执行增量索引,我能够从MSSQL服务器获取这些特定
行
,并将其作为elasticsearch中
的
文档
插入
,但挑战在于删除操作。[xxxx] where modified_date >:
sql
_last_value"} mutate { remove_field => ["@version","index => "xxxxx"
浏览 3
提问于2020-01-22
得票数 0
回答已采纳
1
回答
从
SQL
Server到Elasticsearch字符编码问题
的
日志存储
、
、
、
我
的
源表包括土耳其字符(排序规则
SQL
_Latin1_General_CP1_CI_AS)。当
Logstash
将这些字符写入Elasticsearch时,它会将土耳其字符转换为'?'。*之前使用过,没有这个问题)input { {
jdbc
_connection_string => "
jdbc
:sqlserver://my-
sql
-
浏览 6
提问于2022-09-16
得票数 0
回答已采纳
2
回答
Logstash
配置:
如何
从ElasticSearch输出插件调用部分更新API?
、
我试图创建一个数据管道,
Logstash
插件每5分钟通过
SQL
查询获取一些数据,ElasticSearch输出插件将输入插件中
的
数据放入ElasticSearch服务器。我
的
Logstash
配置文件如下所示:
jdbc
{
jdbc
_driver_library => "/Users/hello/
logstash
-2.3.2/lib* FROM checko
浏览 1
提问于2016-07-12
得票数 4
回答已采纳
1
回答
logstash
一直
只
在我
的
索引中放置1个条目
、
我有以下
logstash
conf文件:
jdbc
{
jdbc
_driver_class => "com.microsoft.sqlserver.
浏览 0
提问于2017-11-02
得票数 0
1
回答
在
logstash
中使用用于
sql
_last_value
的
表
的
id?
、
、
、
、
我在MySQL输入中
的
jdbc
插件中有一个这样
的
logstash
语句
。statement => "SELECT * from TEST where id > :
sql
_last_value"我应该只能更新新记录,而不是更新现有记录中
的
现有值更改。为了做到这一点
浏览 10
提问于2016-11-02
得票数 1
回答已采纳
1
回答
如何
在Elasticsearch -
Logstash
- Kibana中
只
添加新
的
SQL
行
?
、
、
、
、
我正在尝试将
SQL
查询中
的
一些数据添加到我
的
Elasticsearch中,它当前作为
Logstash
jdbc
输入运行,如下所示: type => "database_log"
jdbc
_u
浏览 0
提问于2017-09-14
得票数 0
2
回答
只有当
jdbc
中
的
jdbc
同步初始大型数据集时,OutOfMemory才会存储use_prepared_statements=>true
、
、
、
我们正在获得Java OutOfMemory在初始加载一个巨大
的
数据集~70 Mio记录与
Logstash
和
jdbc
到弹性。Java是4GB,但即使是8或16 4GB,情况也是一样
的
。我们已经成功地用use_prepared_statements=>false加载了整个视图,但是为了使它更高效,甚至对于增量负载,我们希望使用准备好
的
语句
。使用准备好
的
语句
在Oracle中很好地工作,我们可以看到,当
Logstash
由于OutOfM
浏览 14
提问于2021-11-05
得票数 0
回答已采纳
1
回答
查询执行完成后,自动更改
logstash
jdbc
查询
、
、
、
我正在尝试使用
logstash
jdbc
输入将所有订单数据导入到elasticsearch中。
sql
查询涉及7个表
的
连接,连接后不可能建立索引,并且表之间存在一对多关系。连接后大约有3M
行
。
如何
在不停止
logstash
和动态配置
SQL
日期参数
的
情况下每天运行导入。这是我当前
的
logstash
作业配置
jdbc
{
jdbc
_connection_
浏览 8
提问于2018-05-10
得票数 2
2
回答
当服务启动时,
Logstash
继续重新启动。
、
、
、
所以我
的
问题和描述
的
完全一样sudo systemctl start
logstash
.service 我
的
任务很简单:将数据从
jdbc
(MySQL)一次性导入Elasticsearch (因此没有调度选项)。因此,与上面的链接一样,我使用
的
是
JDBC
输入筛选器。以及elasticsearch输出
过滤
器。当我通过命令行(
logstash
-f conf
浏览 1
提问于2017-07-07
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
震惊,ES与MySQL竟可以这样亲密无间!
【大数据】Presto(Trino)SQL 语法进阶
Java数据库操作实践:数据插入的简易指南
JDBC(二)通过Statement执行更新操作
Java编程学习知识点总结数据库篇1-5
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券