bcp of sqlserver

刺骨的言语ヽ痛彻心扉 2022-09-27 14:28 88阅读 0赞

**bcp是SQL Server中负责导入导出数据的一个命令行工具，它是基于DB-Library的，并且能以并行的方式高效地导入导出大批量的数据;bcp可以将数据库的表或视图直接导出，也能通过SELECT FROM语句对表或视图进行过滤后导出;在导入导出数据时，可以使用默认值或是使用一个格式文件将文件中的数据导入到数据库或将数据库中的数据导出到文件中。  
1. bcp的主要参数介绍**    
bcp共有四个动作可以选择:  
(1) 导入    
这个动作使用in命令完成，后面跟需要导入的文件名。

(2) 导出  
这个动作使用out命令完成，后面跟需要导出的文件名。

(3) 使用SQL语句导出    
这个动作使用queryout命令完成，它跟out类似，只是数据源不是表或视图名，而是SQL语句。

(4) 导出格式文件  
这个动作使用format命令完成，后而跟格式文件名。

常用的选项：

\-f format\_file    
format\_file表示格式文件名。这个选项依赖于上述的动作，如果使用的是in或out，format\_file表示已经存在的格式文件，如果使用的是format则表示是要生成的格式文件。

\-x    
这个选项要和-f format\_file配合使用，以便生成xml格式的格式文件。

\-F first\_row    
指定从被导出表的哪一行导出，或从被导入文件的哪一行导入。

\-L last\_row    
指定被导出表要导到哪一行结束，或从被导入文件导数据时，导到哪一行结束。

\-c    
使用char类型做为存储类型，没有前缀且以"/t"做为字段分割符，以"/n"做为行分割符。

\-w    
和-c类似，只是当使用Unicode字符集拷贝数据时使用，且以nchar做为存储类型。

\-t field\_term    
指定字符分割符，默认是"/t"。

\-r row\_term    
指定行分割符，默认是"/n"。

\-S server\_name\[ /instance\_name\]    
指定要连接的SQL Server服务器的实例，如果未指定此选项，bcp连接本机的SQL Server默认实例。如果要连接某台机器上的默认实例，只需要指定机器名即可。

\-U login\_id    
指定连接SQL Sever的用户名。

\-P password    
指定连接SQL Server的用户名密码。

\-T    
指定bcp使用信任连接登录SQL Server。如果未指定-T，必须指定-U和-P。

\-k    
指定空列使用null值插入，而不是这列的默认值。

**2. 如何使用bcp导出数据**    
(1) 使用bcp导出整个表或视图。    
bcp hedy.dbo.NBA out d:/sqlbcp/NBA.txt -c -U"sa" -P"861861"

下面是上述命令执行后的输出结果    
开始复制...

已复制 5 行。  
网络数据包大小(字节): 4096  
总时钟时间(毫秒)     : 1      平均值: (每秒 5000.00 行。)

下面是d:/sqlbcp/NBA.txt的部分内容    
湖人  
火箭  
骑士  
热火  
太阳

在使用密码登录时需要将-U后的用户名和-P后的密码加上双引号。    
注：bcp除了可以在控制台执行外，还可以通过调用SQL Server的一个系统存储过程xp\_cmdshell以SQL语句的方式运行bcp。如上述第一条命令可改写为    
EXEC master..xp\_cmdshell 'bcp hedy.dbo.NBA out d:/sqlbcp/NBA.txt -c -U"sa" -P"861861"'    
执行xp\_cmdshell后，返回信息以表的形式输出,当然更多的是以批处理的方式进行bcp的导入导出.  
(2) 对要导出的表进行过滤。    
bcp不仅可以接受表名或视图名做为参数，也可以接受SQL做为参数。通过SQL语句可以对要导出的表进行过滤，然后导出过滤后的记录。    
EXEC master..xp\_cmdshell 'bcp "SELECT TOP 2 \* FROM hedy.dbo.students" queryout d:/sqlbcp/students.txt -c -U"sa" -P"861861"'  
bcp还可以通过简单地设置选项对导出的行进行限制:  
如下这条命令使用了两个参数-F 2和-L 1000，表示从  
EXEC master..xp\_cmdshell 'bcp "SELECT \* FROM hedy.dbo.students" queryout d:/sqlbcp/students.txt -F 2 -L 1000 -c -U"sa" -P"861861"'    
所查出来的结果中取第2条到1000条记录进行导出。

**3. 如何使用bcp导出格式文件  **  
bcp不仅可以根据表、视图导入导出数据，还可以配合格式文件对导入导出数据进行限制;格式文件以纯文本文件形式存在，分为一般格式和xml格式;用户可以手工编写格式文件，也可以通过bcp命令根据表、视图自动生成格式文件。    
EXEC master..xp\_cmdshell 'bcp hedy.dbo.students format nul -f d:/sqlbcp/students.fmt -c -T'  
上述命令将hedy.dbo.students表的结构生成了一个格式文件d:/sqlbcp/students.fmt，下面是这个格式文件的内容。    
10.0  
6  
1       SQLCHAR             0       12      "/t"     1     id             ""  
2       SQLCHAR             0       12      "/t"     2     sno            ""  
3       SQLCHAR             0       8       "/t"     3     name           Chinese\_PRC\_BIN  
4       SQLCHAR             0       12      "/t"     4     kno            ""  
5       SQLCHAR             0       8       "/t"     5     kname          Chinese\_PRC\_BIN  
6       SQLCHAR             0       21      "/r/n"   6     score          ""

这个格式文件记录了这个表的字段（共6个字段）类型、长度、字符和行分割符和字段名等信息。

bcp还可以通过-x选项生成xml格式的格式文件。    
EXEC master..xp\_cmdshell 'bcp hedy.dbo.students format nul -f d:/sqlbcp/students.fmt -x -c -T'  
xml格式文件所描述的内容和普通格式文件所描述的内容完全一样，只是格式不同:  
<?xml version="1.0"?>  
<BCPFORMAT xmlns="[http://schemas.microsoft.com/sqlserver/2004/bulkload/format][http_schemas.microsoft.com_sqlserver_2004_bulkload_format]" xmlns:xsi="[http://www.w3.org/2001/XMLSchema-instance][http_www.w3.org_2001_XMLSchema-instance]">  
<RECORD>  
<FIELD ID="1" xsi:type="CharTerm" TERMINATOR="/t" MAX\_LENGTH="12"/>  
<FIELD ID="2" xsi:type="CharTerm" TERMINATOR="/t" MAX\_LENGTH="12"/>  
<FIELD ID="3" xsi:type="CharTerm" TERMINATOR="/t" MAX\_LENGTH="8" COLLATION="Chinese\_PRC\_BIN"/>  
<FIELD ID="4" xsi:type="CharTerm" TERMINATOR="/t" MAX\_LENGTH="12"/>  
<FIELD ID="5" xsi:type="CharTerm" TERMINATOR="/t" MAX\_LENGTH="8" COLLATION="Chinese\_PRC\_BIN"/>  
<FIELD ID="6" xsi:type="CharTerm" TERMINATOR="/r/n" MAX\_LENGTH="21"/>  
</RECORD>  
<ROW>  
<COLUMN SOURCE="1" NAME="id" xsi:type="SQLINT"/>  
<COLUMN SOURCE="2" NAME="sno" xsi:type="SQLINT"/>  
<COLUMN SOURCE="3" NAME="name" xsi:type="SQLVARYCHAR"/>  
<COLUMN SOURCE="4" NAME="kno" xsi:type="SQLINT"/>  
<COLUMN SOURCE="5" NAME="kname" xsi:type="SQLVARYCHAR"/>  
<COLUMN SOURCE="6" NAME="score" xsi:type="SQLBIGINT"/>  
</ROW>  
</BCPFORMAT>

**4. 如何使用bcp导入数据**    
bcp可以通过in命令将上面所导出的students.txt再重新导入到数据库中  
EXEC master..xp\_cmdshell 'bcp hedy.dbo.students in d:/sqlbcp/students.txt -c -U"sa" -P"861861"'  
导入数据也同样可以使用-F和-L选项来选择导入数据的记录行。    
EXEC master..xp\_cmdshell 'bcp hedy.dbo.students in d:/sqlbcp/students.txt -F 100 -L 200 -c -U"sa" -P"861861"'    
在导入数据时可以根据已经存在的格式文件将满足条件的记录导入到数据库中，不满足则不导入。  
使用普通的格式文件    
EXEC master..xp\_cmdshell 'bcp hedy.dbo.students in d:/sqlbcp/students.txt -c -f d:/sqlbcp/students.fmt -T'  
使用xml格式的格式文件与普通文件同理.  
**5、一个bcp生成fmt文件的方案举例:**  
DECLARE @sql NVARCHAR(4000);  
DECLARE cur CURSOR FOR  
    SELECT name FROM sys.objects WHERE type = 'U';  
OPEN cur;  
DECLARE @name sysname;  
FETCH NEXT FROM cur INTO @name;  
WHILE @@FETCH\_STATUS = 0  
BEGIN  
      SET @sql=N'bcp [hedy.dbo.'+@name+'][hedy.dbo._name] format nul -f D:/sqlbcp/'+@name+'.fmt -x -c -T'  
      EXEC master..xp\_cmdshell @sql,no\_output  
      FETCH NEXT FROM cur INTO @name;  
END  
CLOSE cur;  
DEALLOCATE cur;  
上面是生成xml格式的fmt文件的，如果是导入、导出、查询导出等，也可以用这个作为参考，提供一种思路。

[http_schemas.microsoft.com_sqlserver_2004_bulkload_format]: http://schemas.microsoft.com/sqlserver/2004/bulkload/format
[http_www.w3.org_2001_XMLSchema-instance]: http://www.w3.org/2001/XMLSchema-instance
[hedy.dbo._name]: mailto:hedy.dbo.%20+@name+