买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明提供一种数据采集方法及系统,涉及数据采集技术领域,方法包括:获取第一数据;基于数据类型对所述第一数据进行分类,获得第二数据,通过所述最小数据单元处理第一过程数据,生成第二过程数据;通过通用格式用于处理所述第一结果数据;生成第二结果数据;采用预设的过站数据格式对所述第一过站数据、第二过程数据以及第二结果数据进行封装,获得第三数据;将所述第三数据转换成JSON格式后上传至数据库;通过实现对不同类型、不同结构数据的统一封装和上传;解决了URL字符串长度无法控制、缺乏阅读性以及无法应对数据数量动态变化的问题;通过优化轮询机制、引入综合评分和动态调整策略、提升数据上传与采集的效率和准确性。
主权项:1.一种数据采集方法,其特征在于,所述方法包括:获取第一数据;基于数据类型对所述第一数据进行分类,获得第二数据,其中,第二数据包括第一过程数据、第一结果数据与第一过站数据;定义最小数据单元,通过所述最小数据单元处理第一过程数据,生成第二过程数据;建立通用格式,所述通用格式用于处理所述第一结果数据;生成第二结果数据;采用预设的过站数据格式对所述第一过站数据、第二过程数据以及第二结果数据进行封装,获得第三数据;将所述第三数据转换成JSON格式后上传至数据库。
全文数据:
权利要求:
百度查询: 苏州天脉导热科技股份有限公司 一种数据采集方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。