Multiangle's Notepad

原

利用bulk insert指令来将csv文件导入SQL Server

2015年08月13日 23:55:02

阅读数：4244

之前在网上下了许多csv格式的数据。通过数据库导入感觉有点麻烦，于是打算写个脚本来执行。通过搜索，发现用bulk insert指令可以完成这一功能。然而在执行的过程中，MSSQL总是报错称

  大容量加载失败。数据文件中第 1 行的第 46 列太长。请验证是否正确指定了字段终止符和行终止符。
  无法从链接服务器 "(null)" 的 OLE DB 访问接口 "BULK" 获取所需的接口("IID_IColumnsInfo")。1
2

经过多次摸索总算解决了这一问题。

在导入之前，首先需要在自己的数据库下建立一个表，用以存放导入后的数据。在建立表的时候，就需要规定好各列的格式和名字。

create table table_name(
    colname_1 VARCHAR(100),
    colname_2 VARCHAR(100),
    colname_3 VARCHAR(100),
    ...
    ...
    colname_n VARCHAR(100),
) ;1
2
3
4
5
6
7
8

我因为在导入的时候碰到了波折，为了控制变量查错，所以把格式统一设置为了varchar(100)，到时候再改。
如果不想重新建立表，也可以通过

alter table table_name alter column column_name varchar(max)1

其中varchar(max)为想要改的格式。

在建立了表格以后，就需要执行bulk insert指令了。
关于bulk insert指令详细的用法，可以参照http://blog.csdn.net/jackmacro/article/details/5959321这篇文章的内容。

我的csv文件中，
列之间用’,’分割，所以FIELDTERMINATOR属性设为’,’ ；
数据从第二行开始，所以FIRSTROW=2 ；
关于行分隔符，也就是ROWTERMINATOR的值，我看到的所有教程里面都是填’\n’，然而实际使用的时候不知道是什么情况，总是报错，也就是之前提到过的错误。经过多方查找，将行分隔符改为‘0x0a’以后，可以解决这个问题。
所以，此处的sql插入指令如下

bulk insert database_name.datatable_name
from 'file_path'
with(
    FIELDTERMINATOR=',',
    ROWTERMINATOR='0x0a' ,
    FIRSTROW=2
) ;1
2
3
4
5
6
7

执行结果如下可见指令有效

文章标签： sql server

个人分类：数据库相关

相关热词： svn利用 oracle利用 phpx00利用 smb利用 telnet利用

上一篇获取历史和实时股票数据接口

下一篇使用Python将csv文件批量化导入SQL Server

Bulk Insert：将文本数据（csv和txt）导入到数据库中

将文本数据导入到数据库中的方法有很多，将文本格式（csv和txt）导入到SQL Server中，bulk insert是最简单的实现方法 1，bulk insert命令，经过简化如下 BULK...

dz45693

2017-01-07 08:59:18

阅读数：910

sql 向数据库中导入csv，xls文件

如何向数据库中导入csv或xls格式文件数据

u010773333

2015-01-26 13:41:21

阅读数：1745

【SQL Server数据迁移】把csv文件中的数据导入SQL Server的方法

导出格式文件,这个是关键,数据库名称,表名称,用户名和密码,服务器ip和端口 --...csv导入Sqlserver2008错误解决方法问题描述:将客户数据库导出的csv还原到本地时...

2018-6-16

SQLSERVER导入CSV表数据 - CSDN博客

下一篇php支持连接sqlserver数据库 sql server 直接导入excel文件或.csv文件方法网上很多,粘下如何导入.csv 数据源选择“平面文件源”,文件名就是.csv路径,如下...

2018-7-16

CSV文件导入到SQL Server 2005数据库中

首先用查询语句，从tblTask表中查询出所有的数据，然后将其保存为csv格式。在SQL语句窗口，输入如下内容：USE Keii BULK INSERT dbo.tblTask ...

jonathandj

2009-09-27 17:41:00

阅读数：3701

关于csv文件导入到sqlserver - CSDN博客

最近做在项目时,由于某原因,只能得到csv格式的数据,所以把它导入到sqlserver里,在试了用sqlserver里的DTS导入导出工具里的平面文件源进行CSV文件进行导入发现,虽然...

2018-7-18

将CSV格式文件导入SQLSERVER数据库 - CSDN博客

将CSV格式文件导入SQLSERVER数据库2015年02月25日 10:25:07 阅读数:744 /// /// 通过文件流的方式来读取CSV文件 /// /// 文件名称 /// 第一行是否...

2018-6-29

SqlServer中BULK INSERT用法简介，批量插入数据

u012726702

2016-06-24 23:32:04

阅读数：2448

用BULK INSERT命令导入数据详解

zw_2011

2012-04-20 10:12:04

阅读数：2345

如何把 .csv 的文件导入数据库SQL SERVER 中! - CSDN博客

使用SQL Server 自带的数据导入向导,右击击要导入的数据库,任务→导入数据启动向导,数据源选择“平面文件源”,然后浏览打开要导入的csv文件,进行必要的设置:标题行...

2018-7-4

sql server 直接导入excel文件或.csv文件 - CSDN博客

CSV文件导入到SQL Server 2005数据库中首先用查询语句,从tblTask表中查询出所有的数据,然后将其保存为csv格式。在SQL语句窗口,输入如下内容:USE Keii BULK...

2018-7-3

CSV导入数据库-BULK INSERT

BULK INSERT TMP_TableName FROM 'D:\temp.csv' WITH (FORMATFILE = 'D:\csvformat.fmt' , FIRSTROW = 0 ...

neusoft06

2015-02-13 07:34:44

阅读数：813

把CSV文件导入到SQL Server表中 - CSDN博客

数据表导入导出应用

2018-5-22

CSV文件导入数据库的三种方法 - CSDN博客

将.csv数据导入数据库:一、在 MySQL 或者是 SQL Server 中直接编写代码,建立表格,然后导入数据。注意:导入数据的格式要与创建数据库时的格式相同,不然会乱码。...

2018-6-7

sql server 直接导入excel文件或.csv文件

方法网上很多，粘下如何导入.csv 数据源选择“平面文件源”，文件名就是.csv路径，如下图：在高级里面可以设置每列的数据类型和大小，outputcolumnwidth最好大点（文件流截断错误就...

sunho89

2016-03-16 17:46:59

阅读数：5500

行终止符导致的bulk insert 失败

在论坛中回答了一个问题，导入csv 数据，并对导入的数据增加一个新的列date datetime。要求在10s内完成，200w行数据的导入.分享下解决问题的思路和方法...

z10843087

2017-07-24 09:05:19

阅读数：868

sql 向数据库中导入csv,xls文件 - CSDN博客

导入CSV到SQL SERVER 问题 2010年03月18日 568B 下载 CSV文件导入到SQL Server 2005数据库中首先用查询语句,从tblTask表中查询出所有的数据,然后将其保存...

2018-7-16

SQLSERVER导入CSV表数据

BULK INSERT dbo.BPMI_TOKEN FROM 'D:\bpnm_token.txt' WITH( FIELDTERMINATOR = ',', ROWTERMINATOR =...

leiyanglove

2017-07-20 17:37:29

阅读数：402

把CSV文件导入到SQL Server表中

数据表导入导出应用

zhejingyuan

2013-08-22 15:25:50

阅读数：22758

如何把 .csv 的文件导入数据库SQL SERVER 中！

使用SQL Server 自带的数据导入向导，右击击要导入的数据库，任务→导入数据启动向导，数据源选择“平面文件源”，然后浏览打开要导入的csv文件，进行必要的设置：标题行分隔符（默认回车换行，不...

my773962804

2016-07-14 17:41:57

阅读数：629

导入CSV到SQL SERVER 问题

2010年03月18日 568B 下载

将多个CSV批量导入SQL Server表中

jyh_jack

2016-02-18 14:17:16

阅读数：3479

csv文件导入sql server常遇到的错误

1、由于为列"***"指定了多个代码页(936和1252),无法处理此列 . 在SQL Server 2008中将公司数据库中某个表的数据导出到文本文件(UTF-8)中，然后带回家之后通过SS...

fengjun_jlpsbc

2017-01-06 14:19:29

阅读数：3815

利用Bulk Insert将Excel中的大批量数据入库

原创，转载请注明出处。//author:MeBack_黯然消魂小弟摸索了二天，终于搞定，不敢独享。第一次使用微软的SqlBulkCopy，其实它也是调用Bulk insert的，只不过微软封装了它，不...

iAudio

2007-11-01 16:16:00

阅读数：938

利用python简化sql server数据导入导出

前面我们介绍了如何使用sqlserver的BCP命令进行数据的导出和导入。使用这个命令一个不足的地方的是不能对整个数据库进行一次性操作。如果表很多的时候就要一个个命令操作，不可谓不麻烦！　...

kuaileboy1989

2015-01-21 13:40:35

阅读数：1856

使用Python将csv文件批量化导入SQL Server

一开始的时候，是想用bulk insert的方法直接将csv文件导入数据库的，后来发现这一方法在SQL语法上是可行的，但是由于Python需要pymmsql包来与SQL Server交互，而这个包似乎...

u014595019

2015-08-19 12:14:34

阅读数：5034

将CSV格式文件导入SQLSERVER数据库

/// /// 通过文件流的方式来读取CSV文件 /// /// 文件名称 /// 第一行是否为列标题 /// 分隔符 /// ...

T_Tanglei

2015-02-25 10:25:07

阅读数：772

CSV文件导入数据库的三种方法

将.csv数据导入数据库：一、在 MySQL 或者是 SQL Server 中直接编写代码，建立表格，然后导入数据。注意：导入数据的格式要与创建数据库时的格式相同，不然会乱码。 Window...

qq_40304090

2018-02-26 10:23:18

阅读数：1099

【SQL Server数据迁移】把csv文件中的数据导入SQL Server的方法

--修改高级参数 sp_configure 'show advanced options',1 go --允许即席分布式查询 sp_configure 'Ad Hoc Distributed Que...

yupeigu

2013-10-10 17:09:47

阅读数：7407

个人资料

multiangle

关注

原创: 88

粉丝: 1094

喜欢: 363

评论: 278

等级：

访问：: 98万+

积分：: 6277

排名：: 5273

勋章：

博主专栏

深度学习&tensorflow笔记

阅读量：51247313 篇
自然语言处理

阅读量：20228615 篇

个人分类

展开

归档

展开

联系我们

请扫描二维码联系客服

400-660-0108

百度提供支持

写评论
微信 .
微博 .
QQ .

Multiangle's Notepad

利用bulk insert指令来将csv文件导入SQL Server

Bulk Insert：将文本数据（csv和txt）导入到数据库中

sql 向数据库中导入csv，xls文件

【SQL Server数据迁移】把csv文件中的数据导入SQL Server的方法

SQLSERVER导入CSV表数据 - CSDN博客

CSV文件导入到SQL Server 2005数据库中

关于csv文件导入到sqlserver - CSDN博客

将CSV格式文件导入SQLSERVER数据库 - CSDN博客

SqlServer中BULK INSERT用法简介，批量插入数据

用BULK INSERT命令导入数据详解

如何把 .csv 的文件导入数据库SQL SERVER 中! - CSDN博客

sql server 直接导入excel文件或.csv文件 - CSDN博客

CSV导入数据库-BULK INSERT

把CSV文件导入到SQL Server表中 - CSDN博客

CSV文件导入数据库的三种方法 - CSDN博客

sql server 直接导入excel文件或.csv文件

行终止符导致的bulk insert 失败

sql 向数据库中导入csv,xls文件 - CSDN博客

SQLSERVER导入CSV表数据

把CSV文件导入到SQL Server表中

如何把 .csv 的文件导入数据库SQL SERVER 中！

导入CSV到SQL SERVER 问题

将多个CSV批量导入SQL Server表中

csv文件导入sql server常遇到的错误

利用Bulk Insert将Excel中的大批量数据入库

利用python简化sql server数据导入导出

使用Python将csv文件批量化导入SQL Server

将CSV格式文件导入SQLSERVER数据库

CSV文件导入数据库的三种方法

【SQL Server数据迁移】把csv文件中的数据导入SQL Server的方法

个人资料

最新文章

博主专栏

个人分类

归档

热门文章

最新评论

联系我们

请扫描二维码联系客服