从MySQL导大量数据的程序实现方法

作者:佚名 来源:天极 时间:2009-03-06 14:34:00 

大家一定使用过 phpmyadmin 里面的数据库导入,导出功能,非常方便。但是在实际应用中,我发现如下几个问题:

1、数据库超过一定尺寸,比如6M 这时使用导出一般没问题,可以正确的保存到本机硬盘上面,但是导入则不行!原因是:一般的 PHP.INI 里面设置临时文件/上传文件的大小限制为2M,而phpmyadmin使用了上传的方式,造成失败。

2、导出到硬盘的 .SQL 文件在导回时,经常出现由于某些单引号的问题引起失败,造成导入失败,只能用 mysql等应用程序导入了。

我的数据库已经超过10M,所以必须解决这个问题。我的思路:

导出: 用phpmyadmin 保存数据库/表格结构,用脚本读取数据库内容并保存到文件里面!

导入: 用phpmyadmin 恢复数据库/表格结构,用脚本读取文件,然后保存到库里面!

导出程序如下:调用方法为 ****.php?table=tablename

这个简单的程序目前一次保存一个表格!!每行为一个字段的数据!!

if($table=="")exit();

mysql_connect("localhost","name","password");

mysql_select_db("database");

$result = mysql_query("select * from $table");

if(mysql_num_rows($result) <= 0) exit();

echo "开始转换数据到文本...

";

$handle = fopen("$table.txt","w");

$numfields = mysql_num_fields($result);

fputs($handle,$numfields."\r\n");

for($k=0;$k

{

$msg = mysql_fetch_row($result);

for($i=0;$i<$numfields;$i++)

{

$msg[$i] = str_replace("\r\n","&&php2000mysqlreturn&&",$msg[$i]);

$msg[$i] = str_replace("\n" ,"&&php2000mysqlreturn&&",$msg[$i]);

fputs($handle,$msg[$i]."\r\n");

}

fputs($handle,"------- php2000 dump data program V1.0 for MySQL --------\r\n");

}

fclose($handle);

echo "ok";

?>

导入的程序如下:用法同上面!

if($table=="")exit();

mysql_connect("localhost","name","password");

mysql_select_db("database");

$message = file("$table.txt");

echo $numfields = chop($message[0]);

for($k=1;$k

{

$value="";

for ($i=$k;$i<($k+$numfields-1);$i++)

{

$tmp = str_replace("&&php2000mysqlreturn&&","\r\n",chop($message[$i]));

$value .= "'".addslashes($tmp)."',";

}

$tmp = str_replace("&&php2000mysqlreturn&&","\r\n",chop($message[$k+$numfields-1]));

$value .= "'".$tmp."'";

$query = "insert into $table values (".$value.")";

echo mysql_error();

mysql_query($query);

echo $k." ";

}
echo "ok";

?>

使用方法和可能的问题!

1、导入时 file()函数可能会有问题(我的10M的数据没出现问题),可以改为 fopen()然后没次读一行!!

2、导入,导出都需要用 ftp 操作,也就是导出后,用 ftp 把数据转到本机,导入时先用ftp转移数据到服务器!

标签:MySQL,数据,程序,实现方法
0
投稿

猜你喜欢

  • Python通过类的组合模拟街道红绿灯

    2021-04-13 02:00:24
  • Python安装Flask环境及简单应用示例

    2021-09-19 10:07:24
  • ubuntu 18.04搭建python环境(pycharm+anaconda)

    2023-09-23 20:01:56
  • python调用Delphi写的Dll代码示例

    2023-07-25 09:33:53
  • mysql5.7.19 安装配置方法图文教程(win10)

    2024-01-16 03:52:10
  • mysql中普通索引和唯一索引的效率对比

    2010-12-08 16:03:00
  • Python程序中设置HTTP代理

    2023-01-06 11:32:23
  • Python面向对象之类和实例用法分析

    2022-09-09 00:02:33
  • python脚本实现验证码识别

    2022-02-03 09:41:30
  • SQL Server把某个字段的数据用一条语句转换成字符串

    2024-01-13 16:10:12
  • Python 图片文字识别的实现之PaddleOCR

    2022-03-12 19:07:58
  • java常用正则表达式

    2023-04-24 11:38:36
  • Python的包管理器pip更换软件源的方法详解

    2023-02-03 05:25:22
  • 利用Pytorch实现ResNet网络构建及模型训练

    2022-02-24 19:57:59
  • Python I/O与进程的详细讲解

    2022-11-27 14:07:15
  • Python使用django获取用户IP地址的方法

    2021-07-22 04:01:05
  • PHP结构型模式之外观模式

    2023-05-25 11:43:14
  • flask框架自定义过滤器示例【markdown文件读取和展示功能】

    2023-03-07 19:22:27
  • 有关缓存 Cache 的随想

    2008-06-09 14:25:00
  • asp中isNull(str), isEmpty(str)和str=""的区别

    2008-02-15 13:10:00
  • asp之家 网络编程 m.aspxhome.com