logstash收集数据库数据
创始人
2024-11-15 03:04:16
0

利用logstash收集mysql数据库表中的数据,logstash支持jdbc插件,可以用来采集数据库中的数据。

jdbc插件官方手册参考:https://www.elastic.co/guide/en/logstash/current/plugins-inputs-jdbc.html

logstash具体配置示例:

input{     jdbc{         jdbc_driver_library => "/data/jdbc/mysql-connector-java-5.1.49.jar"  # mysql驱动存放路径         jdbc_driver_class => "com.mysql.jdbc.Driver"         jdbc_connection_string => "jdbc:mysql://mysql-ip:3306/database-name" # jdbc连接地址         jdbc_user => "username"    # 数据库用户名         jdbc_password => "passwd"  # 数据库密码         use_column_value => true         tracking_column => "id"    # 每次查询基于哪个字段筛选,这个字段必须是自增的(比如这里是字段名是id)         schedule => "*/5 * * * *"  # 采集频率,每5分钟采集一次         statement => "select * from tabname where id > :sql_last_value"   # 查询语句(:sql_last_value是固定的语法)         record_last_run => true 		# 重点在这里,mysql语句中查询的时候必须包含作为偏移量的字段(这里指id字段),如果不包含的话就不更新偏移量文件,然后就会重复的从之前保留的那个偏移量读取数据         last_run_metadata_path => "/data/jdbc/logstash_offset.txt"  # 每次查询执行后,变量字段的值保存的位置,即sql_last_value的值         clean_run => false     } }  output{ 	stdout{} } 

相关内容

热门资讯

透视安卓版!心悦提坑神器软件下... 透视安卓版!心悦提坑神器软件下载,财神十三章辅助软件(开挂)一贯是真的挂(有挂解密)-哔哩哔哩1、操...
不少玩家反映!wepoker私... 不少玩家反映!wepoker私人局辅助器怎么用,wepoker透视方法(透视)步骤脚本(果然真的是有...
透视真的!八闽十三水破解版辅助... 透视真的!八闽十三水破解版辅助,新道游开挂辅助透视(开挂)其实有挂(有挂解密)-哔哩哔哩1、在八闽十...
这一问题亟待解决!aapoke... 这一问题亟待解决!aapoker怎么开辅助器,aa poker透视软件(透视)指南脚本(竟然存在有挂...
透视黑科技!心悦踢坑神器软件下... 透视黑科技!心悦踢坑神器软件下载,卡农大厅辅助(开挂)果然有挂(有挂秘笈)-哔哩哔哩1)心悦踢坑神器...
据目击者称!aapoker怎么... 据目击者称!aapoker怎么选牌,aapoker透视怎么用(透视)窍门脚本(竟然是有挂)-哔哩哔哩...
透视辅助!新玄龙插件,新道游辅... 透视辅助!新玄龙插件,新道游辅助(开挂)确实是真的挂(有挂详情)-哔哩哔哩1、玩家可以在新道游辅助透...
此事引发网友热议!aapoke... 此事引发网友热议!aapoker辅助怎么用,aapoker插件(透视)模板脚本(确实是有挂)-哔哩哔...
在玩家背景下!wepoker免... 在玩家背景下!wepoker免费钻石,wepoker底牌透视脚本(透视)方式脚本(一直是真的挂)-哔...
透视好牌!广西老友玩插件,万能... 透视好牌!广西老友玩插件,万能透视辅助器免费版(开挂)果然真的是有挂(有挂解密)-哔哩哔哩1、玩家可...