买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:天津津航计算技术研究所
摘要:本发明涉及一种基于ELK的CBTC信号系统车载日志分析系统和方法,属于车载日志处理领域。本发明基于ELK的非结构化车载日志的处理方法和流程,实现对非结构化车载日志的分析,分析快速、处理流程便捷;使用ELK技术栈简化日志处理过程,通过倒排索引能够快速、便捷检索到相关车载日志,提供关键日志查询及日志统计分析。结合Elasticsearch检索、模式识别和关联分析,根据结构化和非结构化车载日志综合分析检查轨道交通运营现场出现的运营事件等。本发明提升车载日志分析的时间性能,简化数据处理过程,解决海量数据存储和计算问题、人工分析问题。本发明可以提高维护人员的车载日志的分析能力和水平。
主权项:1.一种基于ELK的CBTC信号系统车载日志分析系统,其特征在于,该车载日志分析系统包括日志采集模块、日志清洗模块、日志存储模块、日志检索模块和日志分析模块,所述车载日志分析系统基于ELK技术栈和Springboot框架;ELK技术栈,包括Elasticsearch、Kibana和Logstach,用于安全可靠的收集任何来源、任何格式的数据,然后实时地对数据进行搜索、分析和可视化;Logstach为日志采集组件,Kibana为数据可视化分析工具,Elasticsearch是一个建立在Lucene基础之上的分布式搜索引擎,基于RESTfulweb接口,用于全文搜索及分析,采用Elasticsearch集群实现;Springboot框架用于简便、快捷的开发应用服务,提供稳定、健壮的接口服务;日志采集模块:定时扫描车载设备上的车载日志数据的文件夹;检测到车载日志有更新时,则创建FTP下载任务从车载设备采集车载日志数据到本地节点,日志采集模块包括Logstach组件,Logstach组件用于日志收集,分布于多台机器,将车载日志进行统一存储、管理;日志清洗模块:将非结构化的车载日志按照对车载日志解析时的关键字段合并规则进行日志数据原有字段的拆分、清洗加工、数据格式转换,将处理后的列车信号系统的车载日志传输到日志存储模块;日志存储模块:基于Elasticsearch服务,用于对日志清洗模块加工处理后的车载日志录入到Elasticsearch分布式集群服务中,创建索引及分配分片,形成索引文档集;日志检索模块:对不同类型的车载日志分别创建倒排索引,并更新维护索引,将不同类型的车载日志存储到不同的索引中;日志分析模块:针对日志检索模块搜索出的日志信息,基于模式识别、关联分析进行列车特定运营事件分析、统计,运营事件包括紧急制动、设备故障、车地无线通信故障。
全文数据:
权利要求:
百度查询: 天津津航计算技术研究所 一种基于ELK的CBTC信号系统车载日志分析系统和方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。