买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:比塔(上海)数据科技有限公司
摘要:本发明公开了基于多源数据信息数字化管理系统及方法,涉及信息数字化管理技术领域,本发明通过自适应数据接口和自动模式提取,实现数据接口的自动化配置和新数据源的快速适应,减少人工干预,提高数据处理的自动化程度和效率;利用自监督学习模型自动识别并清洗数据中的噪声和异常值,并通过预训练模型实现数据的自动标准化处理,显著提升数据质量和处理效率,同时通过自监督学习模型对非结构化数据进行自动标注,并根据标注结果生成数据转换规则,统一不同格式的数据,提高标注和转换的自动化程度,并采用分布式存储技术,并基于全文检索技术建立高效的数据索引和检索机制,显著提高数据存储和检索效率,满足大规模数据管理的需求。
主权项:1.基于多源数据信息数字化管理方法,其特征在于,包括:步骤1.城市项目数据采集,进行数据源识别,识别智能城市中各部门和系统的多源数据,包括交通传感器数据、环境监测数据、能源消耗数据、社交媒体数据;数据接口采用自适应数据接口,自动适应新加入的数据源;采用自监督学习算法,自动识别并清洗数据中的噪声和异常值,并利用智能数据转换工具,根据预训练模型自动进行数据标准化处理;步骤2.数据标注转换,采用自监督学习模型对非结构化数据,包括文本、图像进行自动标注;根据自动标注结果,生成数据转换规则,统一不同格式数据;步骤3.数据存储管理,采用分布式存储技术进行数据储存,并基于全文检索技术建立数据索引和检索机制;步骤4.数据协同分析,搭建联邦学习平台,各机构在本地训练模型,仅共享模型参数,不传输原始数据;中央服务器聚合各机构上传的模型参数,更新全局模型;步骤5.数据质量监控溯源,部署智能合约,进行自动化数据质量检查和审计;在数据生成、传输和处理的每个环节生成哈希值,并记录在区块链中。
全文数据:
权利要求:
百度查询: 比塔(上海)数据科技有限公司 基于多源数据信息数字化管理系统及方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。