logstash插件安装

author author     2022-08-12     287

关键词:

官方的安装指令是:

bin/plugin install logstash-output-webhdfs


但是往往安装不成功,一般就是如下情况,然后卡着不动了:

Validating logstash-output-webhdfs 。。。


原因是防火墙挡掉了logstash的默认gem source

cat Gemfile | grep source
# source "https://rubygems.org"


修改 gem source 为国内源:

cd /opt/logstash # 来到logstash安装目录
vim Gemfile

source "https://ruby.taobao.org/"


执行安装指令

bin/plugin install logstash-output-webhdfs


如果又出现如下错误:

Unable to download data from https://ruby.taobao.org/ - bad response Gateway Time-out 504 (https://gems-ruby-china.b0.upaiyun.com/latest_specs.4.8.gz)

ERROR: Installation aborted, verification failed for logstash-output-webhdfs 


那么执行如下安装指令(不验证安装包来源)

bin/logstash-plugin install --no-verify  logstash-output-webhdfs

本文出自 “突破舒适区” 博客,请务必保留此出处http://tchuairen.blog.51cto.com/3848118/1871556

安装ruby和logstash插件(代码片段)

现在的logstash版本,插件都是自带的,所以不需要安装ruby和logstash,如果需要的插件没有在安装安装配置Ruby我的CentOS的版本比较低,是CentOS6.6的,直接通过yum安装的Ruby的版本比较低,导致安装的时候会出现很多问题(网上的很... 查看详情

logstash6.1手动安装插件

...output里没有exec模块所以需要安装1,将源修改为淘宝源vimlogstash-6.1.2/Gemfile追加source"https://ruby.taobao.org/"2,Gemfile添加要安装的模块名vimlogstash-6.1.2/Gemfile追加gem"logstash-output-exec"3,安装 查看详情

安装x-pack插件之后logstash无法连接elasticsearch

参考技术A为了使用X-Pack强大的特性,我分别在Kibana,Logstash和Elasticsearch根目录中安装了X-Pack插件,安装完成重启各软件之后,满心欢喜。可是随后令人蛋痛的事情发生了,Logstash不能正常工作。查看日志文件:/var/log/logstash/logstash... 查看详情

如何使用logstash(代码片段)

目录一、什么是Logstash二、如何安装三、快速使用四、Input输入插件五、codec编码插件六、filter过滤器插件七、output输出插件八、总结一、什么是LogstashLogstash是一个日志收集器,可以理解为一个管道,或者中间件。功能是从定义... 查看详情

企业运维之elk日志分析平台(logstash)(代码片段)

ELK日志分析平台--Logstash数据采集介绍与配置1.Logstash简介2.Logstash组成3.Logstash安装与配置3.1运行logstash3.2file输出插件3.3elasticsearch输出插件3.4Syslog输入插件3.5多行过滤插件3.6grok过滤插件1.Logstash简介Logstash是用于日志的搜集、分析、... 查看详情

logstash使用操作部分

1.logstash的概念及特点。概念:logstash是一个数据采集、加工处理以及传输(输出)的工具。特点:  -所有类型的数据集中处理  -不同模式和格式数据的正常化  -自定义日志格式的迅速扩展  -为自定义数据源轻松添加插件... 查看详情

mysql准实时同步数据到elasticsearch(代码片段)

4.安装JDK8、MySQL5.6驱动以及Logstash-6.0.0ECS中分别安装JDK8、MySQL5.6驱动以及Logstash-6.0.0。如下图:安装Logstashinput、output插件,此案例数据输入是MySQL,输出是ES,so相应的插件应该是logstash-input-jdbc和logstash-output-elasticsearch。安装插件... 查看详情

Logstash + Syslog 输入插件 VS Logstash + 文件输入插件 + Syslog 服务器

】Logstash+Syslog输入插件VSLogstash+文件输入插件+Syslog服务器【英文标题】:Logstash+SyslogInputPluginVSLogstash+FileInputPlugin+Syslogserver【发布时间】:2019-02-1510:30:01【问题描述】:我有一个现有系统,它通过Syslog协议将日志条目发送到我的... 查看详情

如何配置 Logstash IMAP 插件以从 SMTP 服务器获取电子邮件

】如何配置LogstashIMAP插件以从SMTP服务器获取电子邮件【英文标题】:HowtoconfigureLogstashIMAPplugintofetchemailfromSMTPServer【发布时间】:2018-01-0404:20:22【问题描述】:我有一个SMTP服务器(在windowsserver2012上使用虚拟SMTP服务器)和一个Cen... 查看详情

logstash过滤器插件

过滤器插件:grokmutatesplit编码插件:jsonmultiline输出插件:stdoutfile输入插件:stdinfile来自为知笔记(Wiz) 查看详情

logstash语法常用案例解析

摘要简述logstash的常用插件,以及简单的使用案例一:基础运行建议使用supervisor来管理ELK中的各个组件,方便同一管理安装https://www.aolens.cn/?p=809   有讲解提供一个常用的配置:[program:logstash]command=/opt/logstash/bin/logstash&... 查看详情

logstash插件

codec插件  goeip插件input{   file{    path=>["/data/nginx/logs/access.log"]    type=>"type"    start_position=>"end"    codec=>json  }} filter{  goeip{  查看详情

logstash实战input插件syslog

vim/etc/logstash/conf.d/syslog.confinput{syslog{type=>"system-syslog"port=>514}}output{stdout{codec=>rubydebug}}启动/opt/logstash/bin/logstash-f/etc/logstash/conf.d/syslog.conf在开一个窗口可以看到514端口启动 查看详情

eflk-logstash安装配置

参考技术ALogstash是一个开源数据收集引擎,具有实时管道功能。Logstash可以动态地将来自不同数据源的数据统一起来,并将数据标准化到你所选择的目的地。作为ELK中的L,之前采用的是EFK,其中F是Filebeat,比Logstash更加轻量,但... 查看详情

logstash-2-插件配置

配置语法: Logstash必须有一个input和一个output1,处理输入的input 1),从文件录入logstash使用一个名为filewatch的rubygem库来监听文件变化,这个库记录一个.sincedb的数据文件跟踪监听日志文件的当前位置input{file{path=>["/var/log/*.log","... 查看详情

docker安装elk收集springboot日志(方法1)

参考技术A1、logstash中安装json_lines插件并重启logstash2、在SpringBoot项目pom.xml文件中添加logstash-logback-encoder依赖3、logback.xml文件添加配置,让logback的日志输出到logstash4、启动springboot应用5、使用kibana查看日志信息 查看详情

logstash笔记----input插件

...p; 在"hello World" 示例中,我们已经见到并介绍了Logstash 的运行流程和配置的基础语法。 请记住一个原则:Logstash配置一定要有一个input和一个output。在演示过程中,如果没有写明input,默认就会使用"helloworld"里我... 查看详情

logstash笔记----input插件

...p; 在"hello World" 示例中,我们已经见到并介绍了Logstash 的运行流程和配置的基础语法。 请记住一个原则:Logstash配置一定要有一个input和一个output。在演示过程中,如果没有写明input,默认就会使用"helloworld"里我... 查看详情