`
happmaoo
  • 浏览: 4503970 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
社区版块
存档分类
最新评论

批量数据的导入与导出

阅读更多

一.(BCP工具的使用)

Q:在sql server中能否用sql语句直接把文本文件倒入数据库成为一张表?

A1:

用bcp 实用工具
bcp 实用工具在 Microsoft® SQL Server™ 2000 实例和数据文件之间以用户指定的格式复制数据。

语法
bcp {[[database_name.][owner].]{table_name | view_name} | "query"}
{in | out | queryout | format} data_file
[-m max_errors] [-f format_file] [-e err_file]
[-F first_row] [-L last_row] [-b batch_size]
[-n] [-c] [-w] [-N] [-V (60 | 65 | 70)] [-6]
[-q] [-C code_page] [-t field_term] [-r row_term]
[-i input_file] [-o output_file] [-a packet_size]
[-S server_name[\instance_name]] [-U login_id] [-P password]
[-T] [-v] [-R] [-k] [-E] [-h "hint [,...n]"]

参数database_name

指定的表或视图所在数据库的名称。如果未指定,则为用户默认数据库。

owner

表或视图所有者的名称。如果执行大容量复制操作的用户拥有指定的表或视图,则 owner 是可选的。如果没有指定 owner 并且执行大容量复制操作的用户不拥有指定的表或视图,则 Microsoft® SQL Server™ 2000 将返回错误信息并取消大容量复制操作。

table_name

是将数据复制到 SQL Server 时 (in) 的目的表名,以及从 SQL Server 复制数据时 (out) 的源表名。

view_name

是将数据复制到 SQL Server 时 (in) 的目的视图名,以及从 SQL Server 复制数据时 (out) 的源视图名。只有其中所有列都引用同一个表的视图才能用作目的视图。有关将数据复制到视图的限制的更多信息,请参见 INSERT。

Query

是返回一个结果集的 Transact-SQL 查询。如果查询返回多个结果集,例如指定 COMPUTE 子句的 SELECT 语句,只有第一个结果集将复制到数据文件,随后的结果集被忽略。使用双引号引起查询语句,使用单引号引起查询语句中嵌入的任何内容。在从查询中大容量复制数据时,还必须指定 queryout。

in | out | queryout | format

指定大容量复制的方向。in 是从文件复制到数据库表或视图,out 是指从数据库表或视图复制到文件。只有从查询中大容量复制数据时,才必须指定 queryout。根据指定的选项(-n、-c、-w、-6 或 -N)以及表或视图分隔符,format 将创建一个格式文件。如果使用 format,则还必须指定 -f 选项。

说明 Microsoft SQL Server 6.5 中的 bcp 实用工具不支持大容量复制到包含 sql_variant 或 bigint 数据类型的表。


data_file

大容量复制表或视图到磁盘(或者从磁盘复制)时所用数据文件的完整路径。当将数据大容量复制到 SQL Server 时,此数据文件包含将复制到指定表或视图的数据。当从 SQL Server 大容量复制数据时,该数据文件包含从表或视图复制的数据。路径可以有 1 到 255 个字符。

-m max_errors

指定在大容量复制操作取消之前可能产生的错误的最大数目。bcp 无法复制的每一行都将被忽略并计为一个错误。如果没有包括该选项,则默认为 10。

-f format_file

指定格式文件的完整路径,该格式文件包含以前在同一个表或视图上使用 bcp 时的存储响应。当使用由 format 选项所创建的格式文件大容量复制入或复制出数据时,使用此选项。格式文件的创建是可选的。在提示几个格式问题之后,bcp 将提示是否在格式文件中保存回答。默认文件名为 Bcp.fmt。大容量复制数据时,bcp 可引用一个格式文件,因此不必重新交互输入以前的回答。如果未使用此选项,也没有指定 –n、-c、-w、-6 或 -N,则 bcp 将提示输入格式信息。

-e err_file

指定错误文件的完整路径,此错误文件用于存储 bcp 无法从文件传输到数据库的所有行。来自 bcp 的错误信息将发送到用户工作站。如果未使用此选项,则不创建错误文件。

-F first_row

指定要大容量复制的第一行的序数。默认值是 1,表示在指定数据文件的第一行。

-L last_row

指定要大容量复制的最后一行的序数。默认值是 0,表示指定数据文件中的最后一行。

-b batch_size

指定所复制的每批数据中的行数。每个批处理作为一个事务复制至服务器。SQL Server 提交或回滚(在失败时)每个批处理的事务。默认情况下,指定的数据文件中的所有数据都作为一批复制。请不要与 -h "ROWS_PER_BATCH = bb" 选项一起使用。

-n

使用数据的本机(数据库)数据类型执行大容量复制操作。此选项不提示输入每一字段,它将使用本机值。

-c

使用字符数据类型执行大容量复制操作。此选项不提示输入每一字段;它使用 char 作为存储类型,不带前缀,\t(制表符)作为字段分隔符,\n(换行符)作为行终止符。

-w

使用 Unicode 字符执行大容量复制操作。此选项不提示输入每一字段;它使用 nchar 作为存储类型,不带前缀,\t(制表符)作为字段分隔符,\n(换行符)作为行终止符。不能在 SQL Server 6.5 版或更早版本中使用。

-N

对非字符数据使用数据的本机(数据库)数据类型和对字符数据使用 Unicode 字符类型执行大容量复制操作。这是可替代 -w 选项的性能更高的选项,其目的是使用数据文件将数据从一个 SQL Server 传输到另一个 SQL Server 中。它不提示输入每一字段。在需要传输包含 ANSI 扩展字符的数据以及想利用本机模式的性能时,可以使用这一选项。不能在 SQL Server 6.5 版或更早版本中使用 -N 选项。

-V (60 | 65 | 70)

使用 SQL Server 早期版本中的数据类型执行大容量复制操作。此选项与字符 (-c) 或本机 (-n) 格式一起使用。此选项并不提示输入每一字段,它使用默认值。例如,若要将 SQL Server 6.5 中的 bcp 实用工具所支持(但 ODBC 不再支持)的日期格式大容量复制到 SQL Server 2000,可使用 -V 65 参数。

重要 将数据从 SQL Server 大容量复制到数据文件时,即使指定了 –V,bcp 实用工具也不会为任何 datetime 或 smalldatetime 数据生成 SQL Server 6.0 或 SQL Server 6.5 的日期格式。日期将始终以 ODBC 格式写入。另外,由于 SQL Server 6.5 版或更早版本不支持可为空的 bit 数据,因此 bit 列中的空值写为值 0。


-6

使用 SQL Server 6.0 或 SQL Server 6.5 数据类型执行大容量复制操作。仅为保持向后兼容性。改为使用 –V 选项。

-q

在 bcp 实用工具和 SQL Server 实例的连接中执行 SET QUOTED_IDENTIFIERS ON 语句。使用该选项指定包含空格或引号的数据库、所有者、表或视图的名称。将由三部分组成的整个表名或视图名引在双引号 (" ") 中。

-C code_page

仅为保持向后兼容性。作为代替,请在格式文件或交互式 bcp 中为每一列指定一个排序规则名。

指定数据文件中的数据代码页。只有当数据中包含字符值大于 127 或小于 32 的 char、varchar 或 text 列时,code_page 才有用。

代码页值 描述
ACP ANSI/Microsoft Windows® (ISO 1252)。
OEM 客户程序使用的默认代码页。如果未指定 -C,则这是 bcp 使用的默认代码页。
RAW 不发生从一个代码页到另一个代码页的转换。因为不发生转换,所以这是最快的选项。
<值> 特定的代码页号码,例如 850。


-t field_term

指定字段终止符。默认的字段终止符是 \t(制表符)。使用此参数替代默认字段终止符。

-r row_term

指定行终止符。默认的行终止符是 \n(换行符)。使用此参数替代默认行终止符。

-i input_file

指定响应文件的名称,使用交互模式(未指定 –n、-c、-w、-6 或 -N)执行大容量复制时,响应文件包含对每一字段命令提示问题的响应。

-o output_file

指定接收 bcp 输出(从命令提示重定向)的文件的名称。

-a packet_size

指定发送到和发送自服务器的每个网络数据包的字节数。可以使用 SQL Server 企业管理器(或 sp_configure 系统存储过程)设置服务器配置选项。但是,使用此选项可以单个地替代服务器配置选项。packet_size 可以设置为 4096 到 65535 字节,默认值为 4096。

数据包大小的增加能够提高大容量复制操作的性能。如果要求一个较大的数据包而得不到,则使用默认设置。bcp 生成的性能统计显示出所使用数据包的大小。

-S server_name[\instance_name]

指定要连接到的 SQL Server 实例。指定 server_name 以连接该服务器上的 SQL Server 默认实例。指定 server_name\instance_name 以连接到该服务器上的 SQL Server 2000 命名实例。如果未指定服务器,则 bcp 连接到本地计算机上的 SQL Server 默认实例。从网络上的远程计算机执行 bcp 时,要求此选项。

-U login_id

指定用于连接到 SQL Server 的登录 ID。

-P password

指定登录 ID 的密码。如果未使用此选项,则 bcp 将提示输入密码。如果不带密码将此选项用于命令提示行末尾,则 bcp 将使用默认密码 (NULL)。

-T

指定 bcp 使用网络用户的安全凭据,通过信任连接连接到 SQL Server。不需要 login_id 和 password。

-v

报告 bcp 实用工具的版本号和版权。

-R

指定使用为客户端计算机的区域设置定义的区域格式,将货币、日期和时间数据大容量复制到 SQL Server 中。默认情况下,将会忽略区域设置。

-k

指定在大容量复制操作中空列应保留一个空值,而不是对插入的列赋予默认值。

-E

指定标识列的值出现在要导入的文件中。如果没有给出 -E,则正导入的数据文件中此列的标识值将被忽略,而且 SQL Server 2000 会根据创建表期间指定的种子值和增量值自动指派唯一的值。如果数据文件的表或视图中不包含标识列的值,则使用格式文件指定导入数据时应跳过表或视图中的标识列;SQL Server 2000 将自动为该列指派唯一值。有关详细信息,请参见 DBCC CHECKIDENT。

-h "hint [,...n]"

指定在大容量复制数据到表或视图时所使用的提示。在大容量复制数据到 SQL Server 6.x 或更早版本时,不能使用此选项。

提示 描述
ORDER (column [ASC | DESC] [,...n]) 数据文件中数据的排序次序。如果要装载的数据已根据表中的聚集索引排序,则会提高大容量复制
A2:

A2:

bcp 可以实现数据的导入导出。
EXEC master..xp_cmdshell 'bcp test.dbo.P_Aspect in c:\temp1.txt -c -q -S"servername" -U"sa" -P""'
//导入

EXEC master..xp_cmdshell 'bcp test.dbo.P_Aspect out c:\temp1.txt -c -q -S"servername" -U"sa" -P""'
//导出

A3.
EXEC master..xp_cmdshell 'bcp pubs.dbo.authors out c:\temp1.txt -c -q -S"172.25.10.66" -U"sa" -P"888"'
A4、.
DECLARE @FileName varchar(50),
@bcpCommand varchar(2000)

SET @FileName = REPLACE('c:\authors_'+CONVERT(char(8),GETDATE(),1)+'.txt','/','-')

SET @bcpCommand = 'bcp "SELECT * FROM pubs.dbo.authors ORDER BY au_lname" queryout "'
SET @bcpCommand = @bcpCommand + @FileName + '" -U sa -P 888 -c'

EXEC master..xp_cmdshell @bcpCommand

二.(BUIK工具的使用)

USE pubs
GO
SELECT * INTO publishers2 FROM publishers
GO

--若要将数据从 Newpubs.dat 大容量复制到 publishers2,可以使用以下命令:

EXEC master..xp_cmdshell 'bcp pubs.dbo.publishers2 out c:\newpubs.dat -c -t , -r \n -S"172.25.10.66" -U"sa" -P"888"'
--另外,也可以在 SQL 查询分析器这样的查询工具中使用 BULK INSERT 语句来大容量复制数据:

BULK INSERT pubs.dbo.publishers2 FROM 'c:\newpubs.dat'
WITH (
DATAFILETYPE = 'char',
FIELDTERMINATOR = ',',
ROWTERMINATOR = '\n'
)

分享到:
评论

相关推荐

    POI批量导入导出

    【标题】:"POI批量导入导出" ...总的来说,Apache POI是一个强大而灵活的工具,能够帮助Java开发者实现对Excel文件的高效批量操作,满足各种企业级应用的需求,尤其是在数据导入导出、报表生成和跨平台协作的场景下。

    excle批量导入导出

    - **合并查询**:可以将多个数据源合并到一起,非常适合进行批量数据整合。 - **加载到Excel**:处理后的数据可以加载到工作簿,作为新的工作表或数据模型。 6. **Power Pivot**: - **数据建模**:Power Pivot...

    照片批量导入导出

    在IT行业中,照片批量导入导出是一项常见的任务,特别是在数据管理、媒体库建设或网站维护等领域。本场景涉及的关键技术主要是数据库操作、图像处理以及批处理能力。以下将详细阐述这些知识点: 1. **Oracle数据库*...

    Hue数据导入导出

    Hue数据导入导出 一套流程的开发使用 旨在帮助大家v e

    phpcms数据导入导出模块

    【phpcms数据导入导出模块】是针对phpcms V9内容管理系统的一个功能扩展,主要用于方便网站管理员进行数据的批量处理。这个模块的核心在于提供了一种高效、灵活的方式来管理和迁移数据,尤其是在大型网站或者需要...

    AD域批量的导入导出账号

    微软默认提供了两个批量导入导出工具,分别是CSVDE(CSV目录交换)和LDIFDE(LDAP数据互换格式目录交换)。我们这里选择CSVDE。 打开cmd,更换目录到C盘根目录,方便我们查找文件。使用命令Csvde –f user.Csv将AD...

    数据导入导出工具

    数据导入导出工具是IT行业中一个非常重要的工具,主要用于在不同的数据库系统、应用程序或文件格式之间传输和转换数据。在日常的数据管理工作中,无论是数据分析、数据迁移还是数据备份,都需要用到这类工具。下面...

    Excel数据批量导入与Excel文件的导出

    5. **API接口**:对于开发者,Excel提供了COM(Component Object Model)接口和现代的API,如Microsoft Graph,可以编程控制Excel的导入导出操作。 总之,Excel的数据批量导入与导出是提高数据处理能力的关键技能。...

    数据导入导出Excel

    在IT行业中,数据导入导出Excel是一项常见的任务,特别是在数据分析、报表生成以及系统间的数据交换等领域。本项目可能提供了一种实用的方法来处理这类需求。下面将详细解释相关的知识点。 首先,我们要理解什么是...

    Moxa MXview 如何批量运行配置导入/导出与固件升级.flv

    Moxa MXview 如何批量运行配置导入/导出与固件升级flv,config_center_job_scheduler该视频着重介绍了MXview配置中心的“批量运行配置导入/导出与固件升级”的功能。MXview允许用户在为一组设备进行部署时,成批地...

    如何实现大批量数据的自动导入和导出1

    为了提高工作效率,确保数据处理过程的稳定性与准确性,自动化批量数据导入与导出变得尤为重要。本文将详细介绍如何使用BCP命令实现大数据的自动导入和导出,并通过具体的例子来说明其应用。 #### 一、BCP命令简介 ...

    Visual C++源代码 132 如何批量导入导出数据库记录信息

    Visual C++源代码 132 如何批量导入导出数据库记录信息Visual C++源代码 132 如何批量导入导出数据库记录信息Visual C++源代码 132 如何批量导入导出数据库记录信息Visual C++源代码 132 如何批量导入导出数据库记录...

    gbase8s 数据库数据的导入和导出.doc

    通过像外部表插入数据或者从外部表查询数据的方式,实现数据导入导出机制。创建外部表的语法如下: Create external table &lt;tabname&gt; Using (datafiles (datafiles), 其中 Column_options 用于定义外部表的字段...

    Excel批量导入导出

    总之,Excel的批量导入导出功能结合数据连接、VBA宏和高级分析工具,使得在Excel中管理大量数据变得简单高效。熟练掌握这些技巧,将极大地提升工作效率,无论是数据分析、报告制作还是数据共享,都能游刃有余。

    头歌 数据导入和导出.rar

    此外,了解数据导入导出还涉及到对文件系统的理解,如文件路径、权限设置以及网络传输中的FTP、SFTP协议等。在大数据场景下,可能涉及到Hadoop、Spark等分布式计算框架的数据导入导出,这需要对这些技术有一定了解。...

    以批量方式导入导出数据库记录

    总的来说,批量导入导出数据库记录是数据库管理中的核心技能,它涉及到了数据库的设计、优化和数据处理策略。掌握这些技巧,不仅能提高工作效率,还能确保数据的完整性和一致性。在具体实践中,应根据实际情况灵活...

    VBA批量导入导出TXT

    在Excel VBA(Visual Basic for...总的来说,VBA批量导入导出TXT文件是一种高效的数据处理方式,尤其适用于需要频繁重复此操作的工作场景。通过熟练掌握VBA,我们可以大大提高工作效率,减轻日常工作中手动操作的压力。

    基于labview与excel之间的数据导入导出

    【基于LabVIEW与Excel之间的数据导入导出】 在测试与测量领域,数据处理是一项关键任务,而LabVIEW(Laboratory Virtual Instrument Engineering Workbench)作为一款强大的图形化编程环境,经常被用于开发复杂的...

    javatools数据导入导出工具

    JavaTools是一款基于Java开发的数据导入导出工具,主要用于数据库管理和数据迁移工作。它提供了一种简单易用的图形用户界面,使得非编程人员也能轻松处理数据的导入与导出任务。在更新后的版本v1.0.5中,开发者对...

    AD域批量导入导出账号

    与LDIFDE(LDAP数据互换格式目录交换)工具相比,CSVDE在创建对象时更为灵活,而LDIFDE更适合修改或删除对象。 导出账号的过程如下: 1. 打开命令提示符,切换到C盘根目录,使用`csvde -f user.csv`命令将AD对象...

Global site tag (gtag.js) - Google Analytics