针对Sqlserver大数据量插入速度慢或丢失数据的解决方法

发布时间：2020-12-05 02:36:28 所属栏目：MsSql 来源：互联网

导读：这篇文章主要介绍了针对Sqlserver大数据量插入速度慢或丢失数据的解决方法，很有实用价值,需要的朋友可以参考下

我的设备上每秒将2000条数据插入数据库，2个设备总共4000条，当在程序里面直接用insert语句插入时，两个设备同时插入大概总共能插入约2800条左右，数据丢失约1200条左右，测试了很多方法，整理出了两种效果比较明显的解决办法：

1.将数据组合成字串，使用函数将数据插入内存表，后将内存表数据复制到要插入的表。

2.组合成的字符换格式：'111|222|333|456,7894,7458|0|1|2014-01-01 12:15:16;1111|2222|3333|456,7458|0|1|2014-01-01 12:15:16',每行数据中间用“;”隔开，每个字段之间用“|”隔开。

3.编写函数：

4.调用函数语句：

5.结果展示：

大数据量插入第一种操作，使用Bulk将文件数据插入数据库

Sql代码

创建数据库

创建测试表

填充测试数据

开启xp_cmdshell存储过程（开启后有安全隐患）

使用bcp导出格式文件：

使用bcp导出数据文件：

将表中数据清空

使用Bulk Insert语句批量导入数据文件：

使用OPENROWSET(BULK)的例子：

T_Student表必须已存在

使用OPENROWSET(BULK)的例子：

tt表可以不存在

（编辑：商洛站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!