Splunk系列:Splunk数据接入篇

VSole2021-11-17 06:01:28

一、简单概述

Splunk支持多种多样的数据源,比如它可以直接上传文件,可以监控本地的任何目录或文件,也可以配置通用转发器等方式来完成数据接入。Splunk所有的设置都可以通过Web页面、使用Splunk CLI命令,甚至是直接修改配置文件,以此来完成设置。

那么,如何接入数据呢?我们通过两个比较常见的数据接入场景做个应用示例吧,即收集syslog 日志以及使用通用转发器(Agent)收集数据。


二、应用实例1:收集syslog日志

2.1、Linux rsyslog客户端配置

(1)rsyslog安装

yum install rsyslog

(2)启用TCP进行传输

vim /etc/rsyslog.conf# Provides TCP syslog reception     #若启用TCP进行传输,则取消下面两行的注释$ModLoad imtcp$InputTCPServerRun 514*.* @@192.168.44.130:514

(3)重启rsyslog服务

systemctl restart rsyslog

2.2、Splunk TCP监听配置

(1)依次访问访问首页→ 添加数据 →监视 →TCP/UDP,选择TCP,确认端口,点击下一步。

(2)选择来源类型,确认主机和索引,点击检查。

(3)检查确认后,点击提交。

(4)这里已经完成TCP监听端口的创建,点击开始搜索,可以发现linux客户端传输过来的syslog数据。

三、应用实例2:使用通用转发器收集Windows日志

3.1 配置Splunk接收端口

(1)设置→转发和接收→配置接收,新增接收端口。

3.2 配置Windows通用转发器

(1)双击msi文件进行安装。

(2)将通用转发器配置为部署客户端。

(3)配置接收的服务器端口。

(4)点击install,直到完成安装。

3.3 添加Windows事件日志

()在设置→转发器管理里面,可以看到已上线的客户端。

(2)设置→数据输入,选择Windows事件日志,新建新远程Windows事件日志。

(3)选择来源,选择事件日志。

(4)选择索引,或者新建索引。

(5)检查后提交。

(6)完成数据添加。

(7)点击开始搜索,成功获取到Windows事件日志。

splunkrsyslog
本作品采用《CC 协议》,转载必须注明作者和本文链接
Splunk支持多种多样的数据源,比如它可以直接上传文件,可以监控本地的任何目录或文件,也可以配置通用转发器等方式来完成数据接入。Splunk所有的设置都可以通过Web页面、使用Splunk CLI命令,甚至是直接修改配置文件,以此来完成设置。 那么,如何接入数据呢?我们通过两个比较常见的数据接入场景做个应用示例吧,即收集syslog 日志以及使用通用转发器(Agent)收集数据。
Splunk所有的设置都可以通过Web页面、使用Splunk CLI命令,甚至是直接修改配置文件,以此来完成设置。我们通过两个比较常见的数据接入场景做个应用示例吧,即收集syslog 日志以及使用通用转发器收集数据。点击开始搜索,成功获取到Windows事件日志。
总结常用日志工具的特点。
痛苦的纯文本日志管理日子一去不复返了。虽然纯文本数据在某些情况下仍然很有用,但是在进行扩展分析以收集有洞察力的基础设施数据并改进代码质量时,寻找一个可靠的日志管理解决方案是值得的,该解决方案可以增强业务工作流的能力。 日志不是一件容易处理的事情,但无论如何都是任何生产系统的一个重要方面。当您面临一个困难的问题时,使用日志管理解决方案要比在遍布系统环境的无休止的文本文件循环中穿梭容易得多。
通过简单的SPL语句就可以实现对安全分析场景的描述。
Splunk 是一款功能强大的搜索和分析引擎,而字段是splunk搜索的基础,提取出有效的字段就很重要。 当Spklunk开始执行搜索时,会查找数据中的字段。与预定义提取指定字段不同,Splunk可以通过用户自定义从原始数据中动态提取字段。 这里,我们演示一下如何利用Splunk来提取字段。
Splunk 是机器数据的引擎,提供了日志收集、存储、分析、可视化展示为一体的一整套解决方案。借助Splunk进行调查和取证、威胁监测以及事件响应,以应对各种不同的安全挑战。
9月21日,思科宣布将收购网络安全公司 Splunk,这笔交易价值约 280 亿美元(2047 亿元人民币),收购价格为每股 157 美元。
VSole
网络安全专家