`
duoerbasilu
  • 浏览: 1541775 次
文章分类
社区版块
存档分类
最新评论

使用批处理和LOAD导入数据到MySQL数据库

 
阅读更多

前一篇文章中说到了LOAD命令,这里就来详细的给自己,顺便也给大家讲解下LOAD命令和批处理的数据导入功能。用的时候感觉MySQL用起来真的比较滋润。。。。

批处理导入文件,从sql文件导入数据到数据库中 ,批处理是一种非交互式运行mysql程序的方法,如同您在mysql中使用的命令一样,你仍然将使用这些命令。

为了实现批处理,您重定向一个文件到mysql程序中,首先我们需要一个文本文件,这个文本文件包含有与我们在mysql中输入的命令相同的文本。

比如我们要插入一些数据,使用包含下面文本的文件(文件名为New_Data.sql,当然我们也可以取名为New_Data.txt及任何其他的合法名字,并不一定要以后缀sql结尾):
USE Meet_A_Geek;
INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, "Block");
INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, "Newton");
INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, "Simmons");

注意上面的这些句子的语法都必须是正确的,并且每个句子以分号结束。 上面的USE命令选择数据库,INSERT命令插入数据。

下面我们要把上面的文件导入到数据库中,导入之前要确认数据库已经在运行,即是mysqld进程(或者说服务,Windows NT下面称为”服务“,unix下面为”进程“)已经在运行。

然后运行下面的命令:
bin/mysql –p < /home/mark/New_Data.sql

接着按提示输入密码,如果上面的文件中的语句没有错误,那么这些数据就被导入到了数据库中。

在命令行中使用LOAD DATA INFILE 从文件中导入数据到数据库:
现在您可能会问自己,"究竟为什么我要输入所有的这些SQL语句到文件中,然后通过程序运行它们呢?” 这样看起来好像需要大量的工作。很好,你这样想很可能就对了。但是假如你有从所有这些命令中产生的log记录呢?现在这样就很棒,嗯,大多数数据库都会自动产生数据库中的事件记录的log。而大部分log都包含有用过的原始的SQL命令。因此,如果您不能从您现在的数据库中导出数据到新的mysql数据库中使用,那么您可以使用log和mysql的批处理特性,来快速且方便地导入您地数据。当然,这样就省去了打字的麻烦。

LOAD DATA INFILE

这是我们要介绍的最后一个导入数据到MySQL数据库中的方法。这个命令与mysqlimport非常相似,但这个方法可以在mysql命令行中使用。也就是说您可以在所有使用API的程序中使用这个命令。使用这种方法,您就可以在应用程序中导入您想要导入的数据。 使用这个命令之前,mysqld进程(服务)必须已经在运行。

启动mysql命令行:
bin/mysql –p

按提示输入密码,成功进入mysql命令行之后,输入下面的命令:
USE Meet_A_Geek;
LOAD DATA INFILE "/home/mark/data.sql" INTO TABLE Orders;

简单的讲,这样将会把文件data.sql中的内容导入到表Orders中,如mysqlimport工具一样,这个命令也有一些可以选择的参数。比如您需要把自己的电脑上的数据导入到远程的数据库服务器中,您可以使用下面的命令:
LOAD DATA LOCAL INFILE "C:/MyDocs/SQL.txt" INTO TABLE Orders;

上面的LOCAL参数表示文件是本地的文件,服务器是您所登陆的服务器。 这样就省去了使用ftp来上传文件到服务器,MySQL替你完成了. 您也可以设置插入语句的优先级,如果您要把它标记为低优先级(LOW_PRIORITY),那么MySQL将会等到没有其他人读这个表的时候,才把插入数据。可以使用如下的命令:
LOAD DATA LOW_PRIORITY INFILE "/home/mark/data.sql" INTO TABLE Orders;

您也可以指定是否在插入数据的时候,取代或者忽略文件与数据表中重复的键值。替代重复的键值的语法:
LOAD DATA LOW_PRIORITY INFILE "/home/mark/data.sql" REPLACE INTO TABLE Orders;
上面的句子看起来有点笨拙,但却把关键字放在了让您的剖析器可以理解的地方。

下面的一对选项描述了文件的记录格式,这些选项也是在mysqlimport工具中可以用的。他们在这里看起来有点不同。首先,要用到FIELDS关键字,如果用到这个关键字,MySQL剖析器希望看到至少有下面的一个选项:
TERMINATED BY character
ENCLOSED BY character
ESCAPED BY character

这些关键字与它们的参数跟mysqlimport中的用法是一样的. The TERMINATED BY 描述字段的分隔符,默认情况下是tab字符(/t)
ENCLOSED BY描述的是字段的括起字符。比方以引号括起每一个字段。
ESCAPED BY 描述的转义字符。默认的是反些杠(backslash:/ ).

下面仍然使用前面的mysqlimport命令的例子,用LOAD DATA INFILE语句把同样的文件导入到数据库中:
LOAD DATA INFILE "/home/mark/Orders.txt" REPLACE INTO TABLE Orders FIELDS TERMINATED BY ',' ENCLOSED BY '"';

LOAD DATA INFILE语句中有一个mysqlimport工具中没有特点:

LOAD DATA INFILE 可以按指定的列把文件导入到数据库中。 当我们要把数据的一部分内容导入的时候,这个特点就很重要。比方说,我们要从Access数据库升级到MySQL数据库的时候,需要加入一些栏目(列/字段/field)到MySQL数据库中,以适应一些额外的需要。

这个时候,我们的Access数据库中的数据仍然是可用的,但是因为这些数据的栏目(field)与MySQL中的不再匹配,因此而无法再使用mysqlimport工具。尽管如此,我们仍然可以使用LOAD DATA INFILE,下面的例子显示了如何向指定的栏目(field)中导入数据:
LOAD DATA INFILE "/home/Order.txt" INTO TABLE Orders(Order_Number, Order_Date, Customer_ID);

如您所见,我们可以指定需要的栏目(fields)。这些指定的字段依然是以括号括起,由逗号分隔的,如果您遗漏了其中任何一个,MySQL将会提醒您^_^

转载自:http://aboutphp.blog.163.com/blog/static/128166613200981931820524/

分享到:
评论

相关推荐

    Java实现把excel表中的数据导入到mysql数据库已有的表中

    ### Java实现Excel数据导入MySQL数据库的关键知识点 #### 1. Excel数据读取与解析 在Java中处理Excel数据,常用库有Apache POI和JXL。题目中的代码片段使用了JXL库,这是一种较为老旧的库,但在当时非常流行。JXL...

    将数据导入到mysql数据库中

    ### 将数据导入MySQL数据库的方法 #### 背景与目的 在进行数据库迁移或备份恢复时,常常需要将外部的数据文件导入到MySQL数据库中。本文主要介绍如何将包括`.frm`、`.myd`(MyISAM数据文件)以及`.myi`(MyISAM索引...

    批处理操作mysql数据库(连接,插入数据语法是导入txt,解耦合),下载即可使用

    综上所述,这个资源包提供了一个实用的批处理解决方案,帮助用户在Windows环境下方便地对MySQL数据库进行连接和数据导入,尤其适用于医院等需要大量数据处理的场景。通过理解上述知识点,用户可以自行定制和扩展...

    数据导入程序(测试用的MySql,其他数据库未测试)

    针对“数据导入程序(测试用的MySql,其他数据库未测试)”这个标题,我们可以了解到这个程序主要用于导入数据到MySQL数据库,但未经过其他类型数据库的测试。这意味着它可能专门优化了对MySQL数据库的支持,而在兼容...

    C#从CSV文件批量导入数据保存到数据库

    在C#编程中,批量导入CSV数据到数据库是一项常见的任务,尤其在数据分析、报表生成或系统集成等场景中。下面将详细阐述这个过程中的关键知识点,包括数据读取、列名映射、数据验证和数据库操作。 首先,我们需要...

    MySQL数据库导出与导入的方法

    这将创建一个名为`Meet_A_Geek_backup.sql`的文件,包含所有表结构和数据,可以随后用作导入源。 6. **mysql命令行客户端导入**: 使用`mysql`命令行客户端,可以直接运行SQL文件中的语句。例如,导入`Meet_A_...

    MySQL数据库迁移快速导出导入大量数据

    在这些情况下,我们需要有效地导出和导入大量数据,以确保服务的连续性和数据的一致性。MySQL提供了多种迁移策略,包括直接导出与导入、使用第三方迁移工具以及直接复制数据文件和库表结构。 首先,直接导出数据并...

    如何用Java实现把excel表中的数据导入到mysql数据库已有的表中.pdf

    Java 实现将 Excel 数据导入 MySQL 数据库涉及到的主要技术点包括:Java 读取 Excel 文件、处理数据匹配与映射、数据库连接与批处理插入。以下是一个详细的步骤介绍: 1. **读取 Excel 文件**: Java 中可以使用...

    文本,Excel导入导出到SQL数据库

    在IT行业中,数据管理和操作是核心任务之一,而将数据从文本文件和Excel表格导入到SQL数据库是一项常见的工作流程。这个过程有助于数据整理、分析和存储,尤其在处理大量结构化数据时。以下是对这个主题的详细阐述:...

    MySql数据导入导出

    在日常维护与管理MySQL数据库的过程中,数据的导入导出是一项基本且重要的操作。本文将详细介绍MySQL数据导入导出的几种常见方式及其应用场景。 #### 二、数据导入导出的重要性 数据导入导出对于数据库管理和迁移...

    mysql导入txt文本

    在实际操作中,我们经常需要将外部数据,如TXT文本文件,导入到MySQL数据库中。这篇博客文章将指导你如何实现这一过程。 首先,我们需要了解TXT文件的格式。TXT文件通常包含纯文本数据,每一行代表一个记录,字段...

    mysql批处理

    【批处理】是一种提高效率的方法,特别是在数据处理和导入到数据库时。MySQL 提供了批处理功能,使得从外部文件(如 Excel 或 TXT 文档)批量导入数据到数据库变得简单高效。 【批处理步骤】: 1. **启动 MySQL ...

    Excel数据导入数据库

    本主题将详细介绍如何使用PHP编程语言将Excel(XLS)文件的数据批量导入到MySQL数据库。 首先,我们需要了解Excel文件的基本结构。Excel文件通常是二进制格式,如.XLS或.XLSX,它们存储了单元格数据、格式信息以及...

    有关数据库导入的问题

    2. **SQL命令**:使用`LOAD DATA INFILE`(MySQL)、`BULK INSERT`(SQL Server)或`COPY`(PostgreSQL)等SQL命令可以快速批量导入数据。这些命令允许直接从文件中读取数据并插入到表中,提高了导入效率。 3. **...

    MySQL文本文件导入及批处理模式应用说明

    MySQL数据库在管理和操作大型数据集时,经常需要进行文本文件导入和批处理操作。这两个功能大大提升了数据库管理的效率,特别是在数据迁移、数据初始化或数据分析等场景中。 **一、文本文件导入** 文本文件导入是...

    计算机软件-编程源码-关于向数据库中导入数据的几种方法.zip

    在计算机编程领域,数据库是存储和管理数据的核心工具。源码是程序员与计算机沟通的语言,通过源码可以实现各种功能,包括向数据库中导入数据。...了解并熟练掌握这些方法,能极大地提升开发效率和数据管理的质量。

    MySQL数据导入导出方法知识.pdf

    MySQL数据库系统提供了多种数据导入导出的方法,这在数据库管理和迁移过程中至关重要。本文主要讨论两种常用的技术:批处理和`LOAD DATA INFILE`命令。 批处理是一种非交互式的MySQL操作方式,适用于执行大量预定义...

    以批量方式导入导出数据库记录

    总的来说,批量导入导出数据库记录是数据库管理中的核心技能,它涉及到了数据库的设计、优化和数据处理策略。掌握这些技巧,不仅能提高工作效率,还能确保数据的完整性和一致性。在具体实践中,应根据实际情况灵活...

    bat方式执行SQL脚本、导入表

    数据导入通常涉及到`INSERT INTO`语句,或者使用`LOAD DATA INFILE`命令(MySQL)、`BULK INSERT`(SQL Server)等。如果SQL脚本包含这些语句,那么批处理文件会自动执行这些导入操作。 4. **错误处理和日志记录**...

    批量导入数据,大数据导入

    2. **使用LOAD DATA INFILE**:MySQL提供的一种快速导入数据的方法,直接从文件中读取数据并插入表中,适用于CSV或TXT格式的数据文件。 ```sql LOAD DATA INFILE 'data.csv' INTO TABLE table_name FIELDS ...

Global site tag (gtag.js) - Google Analytics