开始接触到大数据的问题了，在实验室中遇到一个700多M的SQL文档，之前看似简单的问题和技术手段都已经不能应付实战了。
首先用MYSQL的一个ADMIN工具中的restore功能，发现表结构不对，4。0到5。0都不是TYPE=MyISAM 而是 ENGINE=MyISAM了。
然后想到打开吧，TXT打不开，WORD超500M了，WORD6。0倒是能打开，慢的要死，改就更别提了。后来又想到用4。0的数据库先导进去再说，网上可能有不过找了没找着也就作罢了。又突发其想用压缩软件的分割功能，结果是分开了，可是打不开！
最后又隔了一段时间偶然看到了橘子这款软件，抱着死马当活马依试试呗，其实看到这么小的软件也没报多大希望，因为之前用过一些，自己写都行，不过可能还是数据大了，原来那些实验室和书本方法等都解决不了问题。
其实这款软件也只不过能在内存中驻扎260多M，不过还是够了，因为表结构是在文件开头部分写的，改了表结构，后面INSERT语句就可以直接用原来的大文件导入了，运行的时候ignore错误就行了。
感觉磕磕碰碰的就这么一路走来的，还好算是将就搞掂了吧，最后一个SELECT全表近半分钟不到20万行记录显示在屏幕上的时候还是小激动了一下，另外再感谢一下做这款软件的人或是团队吧，好了，先到这里了。
分享到：
相关推荐
excel规划求解sql实现方法，在m个数据中找出合计值等于特定值的n个数据，执行效率远远大于excel的效率，在excel几个小时无法求解但在ORACLE数据库（其他数据库同样可以）秒级执行完毕。适用多种数据库
由于不能上传大于15M的文件 所以上传aalf.dat 和 能下载的文档 PL SQL DEVELOPER 7.1.5 中文 破解
根据提供的文档内容，我们可以归纳总结出以下几个重要的 SQL 编程知识点： ### 1. 变量声明与赋值 在 T-SQL 中，变量需要首先声明后才能使用，并且需要通过 `SET` 或 `SELECT` 来进行赋值。 #### 示例： ```sql -...
- **说明**: 输入值可以是非整数，但返回结果为不大于输入值的最大整数。 ###### 2.2.3 LN 函数 - **功能**: 计算输入值的自然对数。 - **格式**: `LN(number)` - **例子**: - `LN(254)` 返回 5.5373343 - `LN(10...
使用以下SQL查询语句来找出那些初始扩展和下次扩展大于当前表空间最大空闲空间的对象，以便于对这些对象进行优化或者扩展表空间。 ```sql SELECT segment_name, segment_type, owner, a.tablespace_name ...
2. Word2003文档操作：Word2003允许同时打开多个文档，但打开的文档数量有限制，并非无限；可以将当前文档另存为纯文本文件；可以一次性关闭多个打开的文档；同时可以打开Word文档和纯文本文件。错误的叙述是A选项，...
### Oracle文档知识点总结 #### 一、Scott 用户及其表结构介绍 **Scott 用户**是 Oracle 数据库中的一个标准示例用户账户，常用于教学和演示目的。Scott 用户下包括四张表：部门表（`dept`）、员工表（`EMP`）、...
根据提供的文档内容，我们可以归纳出一系列关于Oracle SQL的知识点，主要涵盖了基本的SQL查询语句、SQL脚本文件编写、分组查询与函数的应用、连接查询以及子查询等几个方面。 ### 第3章：基本查询 #### 基础查询...
3. JavaScript 表达式错误判断：D选项tempA >= tempB > tempC是不正确的，因为JavaScript会将它解析为(tempA >= tempB) && (tempB > tempC)，而不是比较tempA是否大于或等于tempB和tempB是否大于tempC的组合。...
- `{a:/^m/}`：查询所有文档中字段`a`以字母`m`开头的记录。 6. **特殊类型查询** - `{a:{$mod:[10,1]}}`：查询所有文档中字段`a`模10的结果为1的记录。 - `{a:{$type:2}}`：查询所有文档中字段`a`的数据类型为...
- 匹配 `a` 字段值大于 10 的文档。还支持 `$lt`（小于）、`$gte`（大于等于）、`$lte`（小于等于）、`$ne`（不等于）。 4. **值列表匹配**：`{a: {$in: [10, "hello"]}}` - 匹配 `a` 字段值为 10 或 "hello" 的...
在PB开发中，大文本对象通常指的是超出常规大小限制的数据块，例如图片、视频或大型文档等。这些对象往往需要特殊的处理方式来确保高效地读取和存储。PB提供了多种机制来支持这种需求，包括使用`BLOB`类型存储大数据...
根据提供的文档内容，我们可以将其中的关键SQL查询知识点总结如下： ### 使用 EDUC 数据库进行查询 #### 6. 查询课程总个数 - **SQL语句**： ```sql SELECT COUNT(*) FROM course; ``` - **知识点**： - `...
以下是对给定文档中13道SQL题目及其解答的详细解析： 1. **列出所有员工的姓名及其直接上级的姓名** ```sql SELECT E.ENAME, M.ENAME FROM EMP E LEFT JOIN EMP M ON E.MGR = M.EMPNO; ``` 这个查询通过LEFT JOIN...
文档的标题和描述表明这是一份针对2021年西藏计算机二级考试的考前冲刺卷，主要涉及的内容包括数据库设计、SQL查询语句、数据模型、程序逻辑判断以及软件调试等计算机基础知识。 1. SQL的选择运算：在SQL中，`...
- SQL语句示例：`SELECT e.ename FROM emp e JOIN emp m ON e.mgr = m.empno WHERE e.hiredate < m.hiredate;` - **列出至少有一个雇员的所有部门。** - SQL语句示例：`SELECT deptno, COUNT(*) AS emp_count ...
oracle学习文档 笔记 全面 深刻 详细 通俗易懂 doc word格式 清晰 第一章 Oracle入门 一、 数据库概述 数据库（Database）是按照数据结构来组织、存储和管理数据的仓库，它产生于距今五十年前。简单来说是本身可视...
本文档将详细介绍Oracle中的部分常用函数和过程，包括数值函数、字符函数等，并通过具体示例进行说明。 #### 二、SQL常用函数 ##### 1. 数值函数 **ABS** - **功能**：返回一个数值的绝对值。 - **语法**：ABS(n)...
4. Word多窗口编辑：在Word中，虽然可以同时打开多个文档，但默认情况下，同一个文档不能在多个窗口中编辑。 5. 邮件发送：在电子邮件中，多个收件人的地址需要用逗号分隔，但题目中说不能用逗号，这是错误的。 6....