龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：安徽省赛达科技有限责任公司
摘要：本发明公开了一种基于大数据实时计算的湿地监测分析平台，属于大数据技术领域，具体包括：采集结构化数据和非结构化的用户行为数据，通过Maxwell采集关系型数据mysql中的业务数据；将采集的数据进行存储，对于需要实时计算的数据通过消息中间件Kafka进行存储；通过java或sql对数据存储层的数据进行清洗、转化和分析；基于flink将实时计算数据开窗聚合；基于Sparkonhive对离线数据进行计算；通过关系型数据库mysql来存储数据计算层的数据结果，并提供API接口；基于FineReport实现数据可视化；本发明充分利用大数据的优势，以实现湿地资源的可持续利用与发展。
主权项：1.一种基于大数据实时计算的湿地监测分析平台，其特征在于，包括：数据采集层，用于通过dataX批量采集结构化数据，通过filebeat采集非结构化的用户行为数据，通过Maxwell采集关系型数据mysql中的业务数据，并将采集到的数据进行预处理；数据存储层，用于将离线结构化数据存储在HDFS分布式文件系统，将离线非结构化数据存储在HDFS分布式文件系统或对象存储中，对于需要实时计算的数据通过消息中间件Kafka进行存储；数据处理层，用于通过java或sql对数据存储层的数据进行清洗、转化和分析；数据计算层，用于基于flink的水位线、窗口函数和状态编程进行实时计算，将实时计算数据开窗聚合；基于Sparkonhive对离线数据进行计算；数据服务层，用于通过关系型数据库mysql来存储数据计算层的数据结果，并提供API接口；数据展示层，用于基于FineReport实现数据可视化，包括前端页面、用户页面、Web应用页面和移动应用页面。
全文数据：
权利要求：
百度查询： 安徽省赛达科技有限责任公司 一种基于大数据实时计算的湿地监测分析平台
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号