大数据导入mysql

A. 如何把数据文件导入mysql

工具：navicat for MySQL

步骤：

1、打开navicat for MySQL，连接到数据库所在服务器。如本图就是连接到本地数据库。

B. 怎样在mysql中插入大量的数据

方法一，从已有大数据表中检索大量数据插入到目标表里;

方法二，编写存储过程，利用循环向数据表中插入大量的固定或有规律变化或随机变化的虚拟数据;

方法三，通过应用程序端编程向目标表插入大量的数据，手法与方法二类似。

C. 怎样把大量Excel数据导入到MySQL数据库

1.将选中的数据快儿拷贝到一个TXT文本文件中（记得把后面的空格消掉。。否则导入专数据库后会属有对应的空行），假如存到“D:\data.txt”这个位置里。
2.根据要导入的数据快儿建立MySql数据库和表，然后进入命令提示符里使用命令
load data local infile 'D:/data.txt' into table exceltomysql fields terminated by '\t';
注意：盘符我使用的“/”才成功，否则提示找不到文件 下面文章中是用的“\”！
进行导入操作
手动进行Excel数据和MySql数据转换

D. mysql数据库 文件过大 如何导入

1.把已导出文件拷贝到服务器
2.利用root权限提交命令：
#mysql
-u
用户名
-p
密码
库名
<
需要导入的.sql文件
在本地导入会比phpmyadmin稳定，快

E. mysql如何导入几个G的数据库

首先说明本人只测试了40G的东西。大于40G的还没有测试。

在上传之前我们需要将my.ini修改一个参数max_allowed_packet.将参数设置为max_allowed_packet=100000M。1M=1024*1024。以此类推。1G=...。

不经过此设置可能会发生以下问题：MySQLserver has gone away .出现这个问题的原因是因为client端和mysql server端断开了。一般是操作sql文件时间过长导致的。

设置好之后重启

这里我经过测试：max_allowed_packet最大只能设置为1G=10737418248/1024/1024/1024.

查看max_allowed_packet命令为如下：

三、如何检验文件是否在上传或者文件是否已经传完毕。打开您的mysql管理工具（比如navicat）。按F5看对应的库记录和大小或者上次更新时间是否在变化就好了。

四：上传过程可能比较漫长。上传完毕

F. 如何向mysql 中导入大数据

方法一，从已有大数据表中检索大量数据插入到目标表里;

方法二，编写存储过程，利用循环向数据表中插入大量的固定或有规律变化或随机变化的虚拟数据;

方法三，通过应用程序端编程向目标表插入大量的数据，手法与方法二类似。

G. 如何在mysql中导入/导出超大的sql文本文件

在mysql中导入/导出超大的sql文本文件,我们可以使用很多方法实例，如有:客户端直接命令操作,分块导入,客户端用source命令操作等等。
在实际工作中，有时经常地时行mysql数据库的导入和导入操作，但对于大型sql文件导入时，phpmyadmin是不行的，有太多限制，比如记录，内存等!
在实际工作中，有时经常地时行mysql数据库的导入和导入操作，但对于大型sql文件导入时，phpmyadmin是不行的，有太多限制，比如记录，内存等！

比较好的办法仍是用mysql的source命令：
一、在客户端下操作：
1、进行入客户端
2、mysql>use 数据库名（如果没有，先建一个）
3、mysql>set names 'utf8'; （一般看导入的是什么格式的文件）
4、mysql>source d:\aaa.sql;
即可正常导入，如果有错，可以看出错提示

二、PHP文件操作：
建立a.php
里面有下面内容
mysql_connet('xxxx');
mysql_query("set names 'utf8'");
mysql_query("source d:\aaa.sql'");

原理同上，主要方便了无法使用命令行用户的操作

H. 如何快速导入大SQL文件到MySQL数据库

大SQL文件导入数据库的方法：
1、点击"开始"-"运行"，输入cmd，然后回车进入到DOS界面。
2、进入MYSQL安装目录。
3、假如MYSQL安装在D盘，SQL文件也在D盘，加入命名为demo.sql，操作的方法是：
输入"D:"，回车即进入到D盘了，然后输入"cd mysql/bin"并回车
4、再输入"mysql -u root -p database d:/demo.sql"，回车显示要输入密码
5、如果MYSQL数据库的密码为空则不输入任何东西回车，没有出现错误说明导入成功。
注意：上面的database是要导入的数据库名。

I. 如何导入超大mysql数据库备份文件

在mysql中导入/导出超大的文本文件,我们可以使用很多方法实例，如有:客户端直接命令操作,分块导入,客户端用source命令操作等等。
在实际工作中，有时经常地时行mysql数据库的导入和导入操作，但对于大型sql文件导入时，phpmyadmin是不行的，有太多限制，比如记录，内存等!

多种方案收集，如下：
方案一：客户端直接命令操作(此方法是我比较喜欢的)

刚恢复一个电商网站mysql备份数据，此备份文件有300多M，因为phpmyadmin支持上传有限，文件太大IE停止响应，所以在本地用

代码如下
复制代码

mysql -u root -p root jiahuibuydb<
c:/yebihai.sql

但没导入进去，出来一大堆mysql的参数提示，不认输入的命令参数，后来写成下面这个样子，就是去掉了参数和数据之间的空格

代码如下
复制代码

mysql -uroot -proot jiahuibuydb<
c:/yebihai.sql

导入就OK了

导出命令:

a)导出整个库

mysqlmp -u 用户名 -p 数据库名 > 导出的文件名

代码如下
复制代码

mysqlmp -u root -p student
>d:/yebihai.sql

b)导出一个表

mysqlmp -u 用户名 -p 数据库名 表名> 导出的文件名

方案二：分块导入

代码如下
复制代码

<?
//用来快速Mysql的大数据备份
//使用前请首先按照代码注释修改要导入的SQL文件名、数据库主机名、数据库用户名、密码、数据库名
//同时将数据库文件和本文本一起ftp导网站目录，然后以web方式访问此文件即可

$file_name="sql.sql"; //要导入的SQL文件名

$dbhost="localhost"; //数据库主机名
$dbuser="user"; //数据库用户名

$dbpass="pass"; //数据库密码
$dbname="dbname";
//数据库名

set_time_limit(0); //设置超时时间为0，表示一直执行。当php在safe
mode模式下无效，此时可能会导致导入超时，此时需要分段导入
$fp = @fopen($file_name, "r") or
die("不能打开SQL文件 $file_name");//打开文件
mysql_connect($dbhost, $dbuser,
$dbpass) or die("不能连接数据库 $dbhost");//连接数据库
mysql_select_db($dbname)
or die ("不能打开数据库 $dbname");//打开数据库
mysql_query('set names utf8');

echo "正在执行导入操作";
while($SQL=GetNextSQL()){
if
(!mysql_query($SQL)){
echo
"执行出错www.111cn.net：".mysql_error()."
";
echo
"SQL语句为：
".$SQL."
";
};
}
echo
"导入完成";

fclose($fp) or die("Can’t close file $file_name");//关闭文件

mysql_close();

//从文件中逐条取SQL
function GetNextSQL() {

global $fp;
$sql="";
while ($line =
@fgets($fp, 40960)) {
$line =
trim($line);

//以下三句在高版本php中不需要，在部分低版本中也许需要修改
$line =
str_replace("////","//",$line);
$line =
str_replace("/’","’",$line);
$line =
str_replace("//r//n",chr(13).chr(10),$line);
// $line
= stripcslashes($line);
if (strlen($line)>1)
{
if ($line[0]=="-" && $line[1]=="-")
{

continue;
}

}

$sql.=$line.chr(13).chr(10);
if
(strlen($line)>0){
if
($line[strlen($line)-1]==";"){

break;
}

}
}
return $sql;

}
?>

方案三：客户端用source命令操作

比较好的办法仍是用mysql的source命令：

一、在客户端下操作：

1、进行入客户端 代码如下
复制代码

2、mysql>use 数据库名(如果没有，先建一个)

3、mysql>set names 'utf8'; (一般看导入的是什么格式的文件)

4、mysql>source d:/aaa.sql;

即可正常导入，如果有错，可以看出错提示

二、PHP文件操作：

建立a.php

里面有下面内容 代码如下
复制代码

mysql_connet('xxxx');

mysql_query("set names 'utf8'");

mysql_query("source d:/aaa.sql'");

原理同上，主要方便了无法使用命令行用户的操作

方案四：下面教大家一个简单有效的办法，适合不会使用命令窗口的非技术人员，可以导入任意大小的mysql数据库，理论上不论您的数据库备份文件多大，都可以导入

方法如下：

1.将数据库备份文件(如backup.sql)上传至网站根目录。

2.将以下代码保存为mysql.php文件，上传至网站根目录。

代码如下
复制代码

system("mysql -hdbhost -udbuser -ppassword dbname < backup.sql");

print "导入成功";

其中

dbhost 改为您的数据库服务器地址(小提示:一般主机默认数据库服务器地址是:localhost)

dbuser 改为您的数据库用户名

password 改为您的数据库用户密码

dbname 改为您的数据库名(导入的时候此库必须先建立好，否则会失败并且不会进行任何提示)

backup.sql表示通过ftp上传到网站根目录下数据库文件的文件名(该文件是解压缩后的文件)

3.在浏览器里面访问mysql.php， 那么就在浏览器里面输入/mysql.php，只要浏览器一访问这个mysql.php文件，数据就开始导入，数据导入结束后，就会显示“导入成功”的字样。这个时间根据您要导入的数据大小决定，一般时间很短

J. 如何向mysql数据库中导入大批量数据

你双击dbf是什么程序打开的？vfp吗？
你可以使用set
printer
to
file
abc.sql
list
to
print
然后使用一个文本编辑器，如emeditor，编辑这个abc.sql，将内容构造为标准的sql语句：
insert
into
mytable
(a,b,c,d,e)
values
('dbf_field1','dbf_field2','dbf_field3','dbf_field4','dbf_field5')
然后在mysql
administrtor中，将这个abc.sql导入到数据库中就可以了。