买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉浪潮卓数大数据产业发展有限公司申请的专利一种数据集的插入方法、装置、设备及介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116069843B 。

龙图腾网通过国家知识产权局官网在2025-12-02发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202310097959.0，技术领域涉及：G06F16/25；该发明授权一种数据集的插入方法、装置、设备及介质是由蒋晓晨;赵海兴;赵子墨;韩纯子设计研发完成，并于2023-02-02向国家知识产权局提交的专利申请。

本一种数据集的插入方法、装置、设备及介质在说明书摘要公布了：本说明书实施例公开了一种数据集的插入方法、装置、设备及介质，包括：在mysql数据库连接信息传参或本地文件传参时，将目标数据集解析成指定格式数据集；通过指定接口输出指定格式数据集，并对指定格式数据集进行预览确认；将预览确认后的指定格式数据集遍历拼接为sql执行语句，并将sql执行语句存入预先设定clickhouse数据库，以实现目标数据集的插入操作。本说明书实施例将不同来源的数据集统一到clickhouse进行管理，可以有效利用clickhouse速度快、功能多等优点，提高数据集管理效率。同时，本说明书实施例通过上述多数据源管理方法，可将来自不同文件的数据集格式化为高度组织和整齐、具有明确关系和结构的数据，使得这些数据运用和管理起来十分方便。

本发明授权一种数据集的插入方法、装置、设备及介质在权利要求书中公布了：1.一种数据集的插入方法，其特征在于，所述方法包括： 在mysql数据库连接信息传参或本地文件传参时，将目标数据集解析成指定格式数据集； 通过指定接口输出所述指定格式数据集，并对所述指定格式数据集进行预览确认； 将预览确认后的所述指定格式数据集遍历拼接为sql执行语句，并将所述sql执行语句存入预先设定clickhouse数据库，以实现所述目标数据集的插入操作； 所述将目标数据集解析成指定格式数据集，包括： 所述目标数据集的来源为本地文件时，确定所述本地文件的扩展名类型； 根据所述本地文件的扩展名类型，确定所述目标数据集的解析方式； 根据所述目标数据集的解析方式，将所述目标数据集解析成指定格式数据集； 所述扩展名类型包括excel文件类型与csv文件类型； 若所述本地文件的扩展名类型为所述excel文件类型，确定所述目标数据集对应的第一解析方式； 若所述本地文件的扩展名类型为所述csv文件类型，确定所述目标数据集对应的第二解析方式； 所述确定所述目标数据集对应的第一解析方式，以及所述根据所述目标数据集的解析方式，将所述目标数据集解析成指定格式数据集，包括： 使用HSSFWorkbook类解析.xls格式文件，XSSFWorkbook类解析.xlsx格式文件，通过传参指定sheet页进行解析，对于sheet页参数传空的文件，默认解析第一个sheet页； 在获得Sheet对象后，通过getRow0方法获取文件的表头列，getPhysicalNumberOfCells方法获取表头总列数对Row对象进行遍历，依次获取每列列名getCellFormatValuerow.getCelli，组装成列名数组； 在获得表头列名数组String[]head之后，根据getLastRowNum的总行数和getPhysicalNumberOfCells的总列数对Sheet对象进行遍历，将每一行读成一个Map，得到所述指定格式数据集； 所述确定所述目标数据集对应的第二解析方式，以及所述根据所述目标数据集的解析方式，将所述目标数据集解析成指定格式数据集，包括： 使用BufferedReader类将文件读入缓冲区，通过bufferedReader.readLine.split","按照逗号分隔读取首行表头信息，获取列名数组； 通过的BufferedReader的readLine方法遍历待解析文件，在读取每个值时使用正则表达式忽略引号中的逗号以避免不必要的解析错误，得到所述指定格式数据集； 所述将预览确认后的所述指定格式数据集遍历拼接为sql执行语句，并将所述sql执行语句存入预先设定clickhouse数据库，以实现所述目标数据集的插入操作，包括： 通过jdbc接口连接用来存储数据表的clickhouse数据库； 在所述clickhouse建表时，指定主键primarykey，获取所述指定格式数据集的预览结果集中的任一map中的key，对是否含有id列进行判断，对没有id列的list进行添加： 获取map中的key进行拼接，并添加id列； 通过connection.createStatement.executeQuerysql语句执行拼接的建表语句，其中，数据集名称传参tableName作为表名，sql="createtable`"+tableName+"`"+col+"Engine=MergeTreeprimarykeyid",并对已经存在库里的表名进行异常捕捉并返回； 遍历所述指定格式数据集，拼接每一条数据对应的值得到values数组，在id列对应的位置通过generateUUIDv4赋值； 通过connection.createStatement.executeQuerysql2执行拼接后的插入语句sql2="insertinto`"+tableName+"`"+"id,"+String.join",",colunminsert+""+"values"+String.join",",values，以实现所述目标数据集的插入操作。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人浪潮卓数大数据产业发展有限公司，其通讯地址为：214002 江苏省无锡市无锡经济开发区金融一街15号1101、1102、1103、1104、1105、1106、1107、1108；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。