logstash收集数据库数据
创始人
2024-11-15 03:04:16
0

利用logstash收集mysql数据库表中的数据,logstash支持jdbc插件,可以用来采集数据库中的数据。

jdbc插件官方手册参考:https://www.elastic.co/guide/en/logstash/current/plugins-inputs-jdbc.html

logstash具体配置示例:

input{     jdbc{         jdbc_driver_library => "/data/jdbc/mysql-connector-java-5.1.49.jar"  # mysql驱动存放路径         jdbc_driver_class => "com.mysql.jdbc.Driver"         jdbc_connection_string => "jdbc:mysql://mysql-ip:3306/database-name" # jdbc连接地址         jdbc_user => "username"    # 数据库用户名         jdbc_password => "passwd"  # 数据库密码         use_column_value => true         tracking_column => "id"    # 每次查询基于哪个字段筛选,这个字段必须是自增的(比如这里是字段名是id)         schedule => "*/5 * * * *"  # 采集频率,每5分钟采集一次         statement => "select * from tabname where id > :sql_last_value"   # 查询语句(:sql_last_value是固定的语法)         record_last_run => true 		# 重点在这里,mysql语句中查询的时候必须包含作为偏移量的字段(这里指id字段),如果不包含的话就不更新偏移量文件,然后就会重复的从之前保留的那个偏移量读取数据         last_run_metadata_path => "/data/jdbc/logstash_offset.txt"  # 每次查询执行后,变量字段的值保存的位置,即sql_last_value的值         clean_run => false     } }  output{ 	stdout{} } 

相关内容

热门资讯

第三分钟辅助"小闲川... 第三分钟辅助"小闲川南宜宾辅助器"先前有透视开挂辅助工具(有挂猫腻)【无需打开直接搜索加薇13670...
举措开挂"微乐福建辅... 举措开挂"微乐福建辅助器"开挂(攻略)辅助平台(有挂解惑)1、下载安装好微乐福建辅助器,进入游戏主界...
关于开挂!wepoker模拟器... 关于开挂!wepoker模拟器哪个好用,阿拉游戏中心辅助工具苹果版,开挂(透视)辅助脚本(存在有挂)...
4分钟辅助"中至抚州... 4分钟辅助"中至抚州数刀辅助器"素来有开挂辅助插件(讲解有挂) 【无需打开直接搜索加薇1367043...
技法开挂"聚友联盟免... 聚友联盟免费辅助器是一款可以让一直输的玩家,快速成为一个“必胜”的ai辅助神器,有需要的用户可以加我...
原来有辅助!wpk有辅助器吗,... 较多好评“微乐万能挂官网”开挂(透视)辅助教程 了解更多开挂安装加(136704302)微信号是一款...
九分钟辅助"开心庄园... 九分钟辅助"开心庄园辅助器免费"一向有开挂辅助软件(竟然有挂);无需打开直接搜索加薇13670430...
学习辅助"都莱大菠萝... 较多好评“微乐万能挂官网”开挂(透视)辅助教程 了解更多开挂安装加(136704302)微信号是一款...
正品辅助!wepoker模拟器... 较多好评“微乐万能挂官网”开挂(透视)辅助教程 了解更多开挂安装加(136704302)微信号是一款...
举措开挂"点点长牌辅... 举措开挂"点点长牌辅助工具教程"开挂(透视)辅助安装(今日头条)>>您好:软件加薇136704302...