GeryLog2splunkspark大数据日志分析需求文档.docx

****。未经上海复深蓝信息技术有限公司的明确书面许可,任何组织或个人不得以任何目的、任何形式及任何手段复制或传播本文档部分或全部内容。目录1. 引言 . 编写目的 . 项目背景 . 系统现状说明 . 术语和缩略语 42. 项目概述 . 项目目标 . 项目范围 . 业务流程图 53. 功能性需求 . 功能模块列表 . 功能模块 . 核心需求 . 功能模块 7引言编写目的本需求文档为****基于日志分析系统需求参考编写的。为提高****信息化基础建设过程中,日志分析带来提高系统性能的价值依据。********graylog2--1:参考资料列表术语和缩略语缩略语、术语解释消息输入项创建消息输入的一个项目消息流控制消息同类属性的为一个流向Dashboard消息监控报表的视图表1-2:术语和缩略语列表项目概述项目目标提高****信息化建设综合问题的排除能力和分析能力。项目范围收集需要日志分析功能的所有软件系统。业务流程图图2-1:业务流程图功能性需求功能模块列表序号模块需求项编号优先级1日志查找日志查找001高报表显示002高3消息流消息流操作003高ShowMetriceson004低规则配置005高告警配置006高4DashboardsDashboard操作007高组件操作008高5资源资源操作009中6系统输入010高用户011中表3-1:功能模块列表功能模块核心需求核心需求包括三点:报警、日志统计分析、异动检测。功能模块日志统计分析通过根据日志产生的时间相对一个固定的时间查询消息、根据日志产生的时间相对一个绝对的时间查询消息、根据基于特定语法的关键词查询消息。统计出日志结果的总数,在当前时间总数中分时间维度查看报表,当前结果字段可选择显示的方式。Relative(相对的)相对于固定时间。在15分钟之前、30分钟之前、45分钟之前、1小时之前、2小时之前、3小时之前、1天之前、1个月之前、1年之前产生出来的消息记录。或者All所有的记录全部显示Absolute(绝对的)定义开始yyyy-MM-hhHH:mm:-MM-hhHH:mm:(关键字)基于特定搜索的语法的关键字查询表3-2:搜索功能类型表基于对消息Keyword(关键字)搜索,参考表格中“输入查找”的特定语法,得出查找消息的结果参照表格“语法解释”的内容。输入查找语法解译ssh消息中包含ssh的内容sshlogin消息中包含ssh或者login的内容“sshlogin”消息中完全匹配“sshlogin”的内容type:ssh消息中字段类型是ssh的内容type:(sshlogin)消息中字段类型是ssh或者login的内容type:“sshlogin”消息中字段类型完全匹配是“sshlogin”的内容_missing_:type消息中没有字段类型的内容_exists_:type消息中有字段类型的内容表3-3:搜索功能语法表查询的消息记录结果,以报表柱状图的方式查看。以年、季度、月、周、天、小时、分钟七种时间维度进行查看报表。通过柱状图查看当前时间维度消息的总数,同时对应相应的消息总数的用占用的物理容量。对于每条已截获的消息流,可根据该流当中选择所有字段、默认字段、自选字段、不选字段进行查看每条字段当中的实际统计值。在单个字段有可操作的显示方式,其中统计、快速显示值参考以下表格中的内容。生成图表功能有选值查看功能:实际值(Mean)、最大值(Maximum)、最小值(Minimum)、求和(total)、总条数(Count);报表查看类型:面积(Area)、条(Bar)、线(Line)、散点图(scatterplot);分析视图方式:分钟(Minute)、小时(Hour)、天(Day)、周(Week)、月(Month)、季度(Quarter)、年(Year)。统计(Statistics)统计消息总数、有效数、标准偏差、最小数、最大数、求和、方差、平方和AddDashBroad快速显示值(Quickvalues)统计当前字段的内容及重复的个数,所占总个数的百分