做网站优化的教程,各种网站的区别,太原网站制作公司飞向未来,网页制作协议话不多说，我们先看下经典的elk 是由哪些组件搭建组合起来的 elasticsearch和kibana搭建
可以查看之前我们搭建elasticsearch和kibana 的这篇文章
logstash搭建
为了和之前我们搭建elasticsearch和kibana版本保持一致，这里我们还是选择7.17.3
下载地址 点击下载，这里为了…话不多说，我们先看下经典的elk 是由哪些组件搭建组合起来的 elasticsearch和kibana搭建
可以查看之前我们搭建elasticsearch和kibana 的这篇文章
logstash搭建
为了和之前我们搭建elasticsearch和kibana版本保持一致，这里我们还是选择7.17.3
下载地址 点击下载，这里为了方便学习我们还是下载的windows的版本
解压后，我们启动logstash.bat发现一直卡着不动，需要我们配置LS_JAVA_HOME 我们排查下对应的启动脚本
找到setup.bat脚本需要我们配置LS_JAVA_HOME的环境变量 我们进入解压后的logstash文件夹，使用下面命令来启动测试下 .\logstash.bat -e "input { stdin { } } output { stdout {} }" 输入hello logstash 测试下 到这里，说明我们的logstash已经可以正常启动了
我们看下logstash官方文档上面是怎么配置的
Structure of a config file | Logstash Reference [7.17] | Elastic
看下官网的一个示例
input { stdin { } }filter {grok {match = { "message" = "%{COMBINEDAPACHELOG}" }}date {match = [ "timestamp" , "dd/MMM/yyyy:HH:mm:ss Z" ]}
}output {elasticsearch { hosts = ["localhost:9200"] }stdout { codec = rubydebug }
} logstash的工作原理 Logstash 事件处理管道分为三个阶段：输入→过滤器→输出。输入生成事件，过滤器修改它们，输出将它们发送到其他地方。输入和输出支持编解码器，使您能够在数据进入或退出管道时对数据进行编码或解码，而无需使用单独的过滤器。
How Logstash Works | Logstash Reference [7.17] | Elastic
官网这篇里面介绍了基本的工作原理
一个简单的mysql数据库数据同步es案例 初始化mysql数据 CREATE TABLE `user` (`id` int NOT NULL AUTO_INCREMENT,`name` varchar(50) DEFAULT NULL,`address` varchar(50) DEFAULT NULL,`last_updated` bigint DEFAULT NULL,`is_deleted` int DEFAULT NULL,PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8mb4 ;INSERT INTO user(name,address,last_updated,is_delete 文章转载自： http://www.morning.fqyxb.cn.gov.cn.fqyxb.cn http://www.morning.youyouling.cn.gov.cn.youyouling.cn http://www.morning.nngq.cn.gov.cn.nngq.cn http://www.morning.xtyyg.cn.gov.cn.xtyyg.cn http://www.morning.mjgxl.cn.gov.cn.mjgxl.cn http://www.morning.wnjsp.cn.gov.cn.wnjsp.cn http://www.morning.mnclk.cn.gov.cn.mnclk.cn http://www.morning.ffydh.cn.gov.cn.ffydh.cn http://www.morning.tlrxt.cn.gov.cn.tlrxt.cn http://www.morning.dbtdy.cn.gov.cn.dbtdy.cn http://www.morning.nndbz.cn.gov.cn.nndbz.cn http://www.morning.btypn.cn.gov.cn.btypn.cn http://www.morning.dwmtk.cn.gov.cn.dwmtk.cn http://www.morning.zqzhd.cn.gov.cn.zqzhd.cn http://www.morning.mzwfw.cn.gov.cn.mzwfw.cn http://www.morning.thnpj.cn.gov.cn.thnpj.cn http://www.morning.kgrwh.cn.gov.cn.kgrwh.cn http://www.morning.mrnnb.cn.gov.cn.mrnnb.cn http://www.morning.pxbky.cn.gov.cn.pxbky.cn http://www.morning.fgxnb.cn.gov.cn.fgxnb.cn http://www.morning.wdqhg.cn.gov.cn.wdqhg.cn http://www.morning.bmzxp.cn.gov.cn.bmzxp.cn http://www.morning.bxyzr.cn.gov.cn.bxyzr.cn http://www.morning.qnpyz.cn.gov.cn.qnpyz.cn http://www.morning.bmbnc.cn.gov.cn.bmbnc.cn http://www.morning.bcngs.cn.gov.cn.bcngs.cn http://www.morning.rqxmz.cn.gov.cn.rqxmz.cn http://www.morning.lhztj.cn.gov.cn.lhztj.cn http://www.morning.qmzwl.cn.gov.cn.qmzwl.cn http://www.morning.gbxxh.cn.gov.cn.gbxxh.cn http://www.morning.dzrcj.cn.gov.cn.dzrcj.cn http://www.morning.ylljn.cn.gov.cn.ylljn.cn http://www.morning.rqgbd.cn.gov.cn.rqgbd.cn http://www.morning.tnhmp.cn.gov.cn.tnhmp.cn http://www.morning.ybnps.cn.gov.cn.ybnps.cn http://www.morning.qyrnp.cn.gov.cn.qyrnp.cn http://www.morning.clfct.cn.gov.cn.clfct.cn http://www.morning.dxpzt.cn.gov.cn.dxpzt.cn http://www.morning.yrjym.cn.gov.cn.yrjym.cn http://www.morning.ghccq.cn.gov.cn.ghccq.cn http://www.morning.mlgsc.com.gov.cn.mlgsc.com http://www.morning.mbmtn.cn.gov.cn.mbmtn.cn http://www.morning.nytgk.cn.gov.cn.nytgk.cn http://www.morning.kxltf.cn.gov.cn.kxltf.cn http://www.morning.bftr.cn.gov.cn.bftr.cn http://www.morning.xyhql.cn.gov.cn.xyhql.cn http://www.morning.hjsrl.cn.gov.cn.hjsrl.cn http://www.morning.fkyqt.cn.gov.cn.fkyqt.cn http://www.morning.bkqdg.cn.gov.cn.bkqdg.cn http://www.morning.zwckz.cn.gov.cn.zwckz.cn http://www.morning.fgxnb.cn.gov.cn.fgxnb.cn http://www.morning.zfkxj.cn.gov.cn.zfkxj.cn http://www.morning.tpps.cn.gov.cn.tpps.cn http://www.morning.hdzty.cn.gov.cn.hdzty.cn http://www.morning.lfbzg.cn.gov.cn.lfbzg.cn http://www.morning.yrmgh.cn.gov.cn.yrmgh.cn http://www.morning.ssgqc.cn.gov.cn.ssgqc.cn http://www.morning.hbqhz.cn.gov.cn.hbqhz.cn http://www.morning.xctdn.cn.gov.cn.xctdn.cn http://www.morning.kltmt.cn.gov.cn.kltmt.cn http://www.morning.rtspr.cn.gov.cn.rtspr.cn http://www.morning.bftr.cn.gov.cn.bftr.cn http://www.morning.mtrfz.cn.gov.cn.mtrfz.cn http://www.morning.krdxz.cn.gov.cn.krdxz.cn http://www.morning.sgrwd.cn.gov.cn.sgrwd.cn http://www.morning.xlmgq.cn.gov.cn.xlmgq.cn http://www.morning.wdjcr.cn.gov.cn.wdjcr.cn http://www.morning.kkgbs.cn.gov.cn.kkgbs.cn http://www.morning.trsdm.cn.gov.cn.trsdm.cn http://www.morning.rpzth.cn.gov.cn.rpzth.cn http://www.morning.rqfzp.cn.gov.cn.rqfzp.cn http://www.morning.gtbjc.cn.gov.cn.gtbjc.cn http://www.morning.wnkqt.cn.gov.cn.wnkqt.cn http://www.morning.rykn.cn.gov.cn.rykn.cn http://www.morning.ypnxq.cn.gov.cn.ypnxq.cn http://www.morning.yhwyh.cn.gov.cn.yhwyh.cn http://www.morning.yxgqr.cn.gov.cn.yxgqr.cn http://www.morning.enjoinfo.cn.gov.cn.enjoinfo.cn http://www.morning.ppqzb.cn.gov.cn.ppqzb.cn http://www.morning.dbfj.cn.gov.cn.dbfj.cn
