MYSQL教程:查询优化之有效加载数据

来源:asp之家 时间:2009-02-27 15:45:00 

有效地加载数据

有时我们需大量地把数据加载到数据表,采用批量加载的方式比一个一个记录加载效率高,因为MySQL不用每加载一条记录就刷新一次索引。下面介绍几个有助于加快数据加载的操作:

使用LOAD DATA语句要比INSERT语句的加载速度快。

LOAD DATA比LOAD DATA LOCAL语句的效率高。前者可由服务器直接从本地磁盘读取加载数据,后者需由客户程序去读取文件并通过网络传送到服务器。

如果一定要用INSERT语句,应尽量在一条语句中插入多个数据行。

如果必须使用多条INSERT语句,则应尽量把它们集中在一起放到一个事务中进行处理,而不是在自动提交模式下执行它们:如:

BEGIN;

INSERT INTO table_name values (...);

INSERT INTO table_name values (...);

INSERT INTO table_name values (...);

...

COMMIT;

对于不支持事务的表,应对表进行写锁定,然后在表锁定期间对表进行INSERT操作,如:

LOCK TABLES table_name WRITE;

INSERT INTO table_name ...;

INSERT INTO table_name ...;

INSERT INTO table_name ...;

...

UNLOCK TABLES;

利用客户/服务器通信协议中的压缩功能以减少网络传输的数据量。但该压缩会消耗大量的系统资源,所以小心使用。

尽量让MySQL插入默认值。不要在INSERT中写太多值,以减少网络传输量和服务器端的语法分析时间。

对于MyISAM和ISAM数据表,如果需加载大量数据,应先建立一个没索引的表,加载数据后再创建索引。该方法不适用于InnoDB或BDB数据表。

禁用和重新激活索引的方法有两种:

使用ALTER TABLE语句的DISABLE KEYS和ENABLE KEYS命令,如:

ALTER TABLE table_name DISABLE KEYS;

ALTER TABLE table_name ENABLE KEYS;

使用myisamchk或isamchk工具。如:

$ myisamchk --keys-used=0 table_name #禁止

$ myisamchk --recover --quick --key-used=n table_name #激活

n是用来表明需要激活索引的位掩码,第0位对应第一个索引,如果有三个索引,n值就是7(二进制111)。索引编号可以下命令确定:

$ myisamchk --description table_name

标签:mysql,加载,数据,优化
0
投稿

猜你喜欢

  • 监测站点使用多少session和application的asp程序

    2007-09-12 19:40:00
  • SQL Server 2005恢复Master库

    2011-05-16 13:11:00
  • Sql Server 2000 一些安全设置

    2008-02-13 18:57:00
  • 段正淳的css笔记(1)分类之间的横竖线

    2007-11-01 21:47:00
  • 理解JavaScript中的事件 Event

    2008-03-19 11:16:00
  • 豆瓣可以做而且值得做的几件事情

    2009-04-24 12:07:00
  • 让Entity Framework支持MySql数据库

    2010-12-14 15:22:00
  • AJAX缓存的问题解决办法

    2009-04-26 14:47:00
  • 使用游标进行PHP SQLSRV查询的方法与注意事项

    2023-05-22 10:51:10
  • 蚁群算法js版

    2008-10-08 10:15:00
  • ASP如何跳出本次进入下一次循环

    2008-10-23 13:46:00
  • 交互设计实用指南系列(10)—别让我思考

    2010-03-01 12:50:00
  • JavaScript加密解密终级指南

    2008-01-03 12:25:00
  • 如何调用Oracle存储过程?

    2009-11-15 20:13:00
  • 从Web查询数据库之PHP与MySQL篇

    2009-09-19 16:58:00
  • 为SWFUpload增加ASP版本的上传处理程序

    2011-04-28 08:01:00
  • MySQL优化全攻略--相关数据库命令

    2008-11-01 17:03:00
  • 如何将计数器的值赋给一个变量?

    2009-12-03 20:02:00
  • 在flash中使用XML动态菜单

    2007-09-06 19:16:00
  • 元素层叠级别及z-index剖析

    2008-07-22 12:03:00
  • asp之家 网络编程 m.aspxhome.com