买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：杭州雷数科技有限公司

摘要：本发明公开了一种基于redis实时用户数据采集传输及数据监控的方法，应用于多应用端异构用户实时状态数据的解析和多源存储介质传输，包括：核心引擎实时监控配置中心应用调度配置，同步更新相应的调度任务配置；核心引擎实时监控配置中心应用解析规则变化，进行实时配置同步；核心引擎智能调度实时数据消费引擎，实时数据消费引擎批量解析用户状态数据，写入多源存储介质，实时数据消费引擎解析保存日志信息。本发明解决多应用端异构型用户状态信息数据种类繁多而数据不能共享的问题，优化了解析写入数据缓慢、多应用端用户状态数据异构的问题，同时还提供日志监控，以监控任务在执行过程中的执行情况。

主权项：1.一种基于redis实时用户数据采集传输及数据监控的方法，其特征在于，应用于多应用端异构用户实时状态数据的解析和多源存储介质传输，包括：核心引擎实时监控配置中心应用调度配置，同步更新相应的调度任务配置；核心引擎实时监控配置中心应用解析规则变化，进行实时配置同步；核心引擎智能调度实时数据消费引擎，实时数据消费引擎批量解析用户状态数据，写入多源存储介质，实时数据消费引擎解析保存日志信息；所述核心引擎实时监控配置中心应用调度配置，同步更新相应的调度任务配置，包括：判断核心引擎中的任务调度配置版本和配置中心的调度配置版本是否一致；若不一致，更新核心引擎中的任务调度配置；所述核心引擎实时监控配置中心应用解析规则变化，进行实时配置同步，包括：判断核心引擎中的解析规则版本和配置中心的解析规则版本是否一致；若不一致，同步实时数据收集引擎消费引擎中的规则配置；若不一致，更新核心引擎解析调度版本；所述核心引擎智能调度实时数据消费引擎，包括：判断当前调度是否是全部执行；若是则对所有实时消费引擎进行调度；若否则只针对调度配置中的特定实时消费引擎进行调度；所述实时数据消费引擎批量解析用户状态数据，包括：根据应用端多线程批量从分布式缓存中获取待消费用户状态数据；根据应用端多线程批量映射解析用户状态数据；将消费解析后数据写入多源存储介质，包括：根据应用端解析配置分析其数据源去向；若包含influxdb，固化到时序数据库Influxdb中；若包含redis，固化到缓存redis中；若包含Myql，固化到关系型数据库Mysql中；所述实时数据消费引擎解析保存日志信息，还包括：保存异常解析数据日志；保存解析成功的多维度数据，包含应用端数量，用户状态数据类型数量，成功解析数量。

全文数据：

权利要求：

百度查询： 杭州雷数科技有限公司 一种基于redis实时用户数据采集传输及数据监控的方法