大數據導入mysql

A. 如何把數據文件導入mysql

工具：navicat for MySQL

步驟：

1、打開navicat for MySQL，連接到資料庫所在伺服器。如本圖就是連接到本地資料庫。

B. 怎樣在mysql中插入大量的數據

方法一，從已有大數據表中檢索大量數據插入到目標表裡;

方法二，編寫存儲過程，利用循環向數據表中插入大量的固定或有規律變化或隨機變化的虛擬數據;

方法三，通過應用程序端編程向目標表插入大量的數據，手法與方法二類似。

C. 怎樣把大量Excel數據導入到MySQL資料庫

1.將選中的數據快兒拷貝到一個TXT文本文件中（記得把後面的空格消掉。。否則導入專資料庫後會屬有對應的空行），假如存到「D:\data.txt」這個位置里。
2.根據要導入的數據快兒建立MySql資料庫和表，然後進入命令提示符里使用命令
load data local infile 'D:/data.txt' into table exceltomysql fields terminated by '\t';
注意：盤符我使用的「/」才成功，否則提示找不到文件 下面文章中是用的「\」！
進行導入操作
手動進行Excel數據和MySql數據轉換

D. mysql資料庫 文件過大 如何導入

1.把已導出文件拷貝到伺服器
2.利用root許可權提交命令：
#mysql
-u
用戶名
-p
密碼
庫名
<
需要導入的.sql文件
在本地導入會比phpmyadmin穩定，快

E. mysql如何導入幾個G的資料庫

首先說明本人只測試了40G的東西。大於40G的還沒有測試。

在上傳之前我們需要將my.ini修改一個參數max_allowed_packet.將參數設置為max_allowed_packet=100000M。1M=1024*1024。以此類推。1G=...。

不經過此設置可能會發生以下問題：MySQLserver has gone away .出現這個問題的原因是因為client端和mysql server端斷開了。一般是操作sql文件時間過長導致的。

設置好之後重啟

這里我經過測試：max_allowed_packet最大隻能設置為1G=10737418248/1024/1024/1024.

查看max_allowed_packet命令為如下：

三、如何檢驗文件是否在上傳或者文件是否已經傳完畢。打開您的mysql管理工具（比如navicat）。按F5看對應的庫記錄和大小或者上次更新時間是否在變化就好了。

四：上傳過程可能比較漫長。上傳完畢

F. 如何向mysql 中導入大數據

方法一，從已有大數據表中檢索大量數據插入到目標表裡;

方法二，編寫存儲過程，利用循環向數據表中插入大量的固定或有規律變化或隨機變化的虛擬數據;

方法三，通過應用程序端編程向目標表插入大量的數據，手法與方法二類似。

G. 如何在mysql中導入/導出超大的sql文本文件

在mysql中導入/導出超大的sql文本文件,我們可以使用很多方法實例，如有:客戶端直接命令操作,分塊導入,客戶端用source命令操作等等。
在實際工作中，有時經常地時行mysql資料庫的導入和導入操作，但對於大型sql文件導入時，phpmyadmin是不行的，有太多限制，比如記錄，內存等!
在實際工作中，有時經常地時行mysql資料庫的導入和導入操作，但對於大型sql文件導入時，phpmyadmin是不行的，有太多限制，比如記錄，內存等！

比較好的辦法仍是用mysql的source命令：
一、在客戶端下操作：
1、進行入客戶端
2、mysql>use 資料庫名（如果沒有，先建一個）
3、mysql>set names 'utf8'; （一般看導入的是什麼格式的文件）
4、mysql>source d:\aaa.sql;
即可正常導入，如果有錯，可以看出錯提示

二、PHP文件操作：
建立a.php
裡面有下面內容
mysql_connet('xxxx');
mysql_query("set names 'utf8'");
mysql_query("source d:\aaa.sql'");

原理同上，主要方便了無法使用命令行用戶的操作

H. 如何快速導入大SQL文件到MySQL資料庫

大SQL文件導入資料庫的方法：
1、點擊"開始"-"運行"，輸入cmd，然後回車進入到DOS界面。
2、進入MYSQL安裝目錄。
3、假如MYSQL安裝在D盤，SQL文件也在D盤，加入命名為demo.sql，操作的方法是：
輸入"D:"，回車即進入到D盤了，然後輸入"cd mysql/bin"並回車
4、再輸入"mysql -u root -p database d:/demo.sql"，回車顯示要輸入密碼
5、如果MYSQL資料庫的密碼為空則不輸入任何東西回車，沒有出現錯誤說明導入成功。
注意：上面的database是要導入的資料庫名。

I. 如何導入超大mysql資料庫備份文件

在mysql中導入/導出超大的文本文件,我們可以使用很多方法實例，如有:客戶端直接命令操作,分塊導入,客戶端用source命令操作等等。
在實際工作中，有時經常地時行mysql資料庫的導入和導入操作，但對於大型sql文件導入時，phpmyadmin是不行的，有太多限制，比如記錄，內存等!

多種方案收集，如下：
方案一：客戶端直接命令操作(此方法是我比較喜歡的)

剛恢復一個電商網站mysql備份數據，此備份文件有300多M，因為phpmyadmin支持上傳有限，文件太大IE停止響應，所以在本地用

代碼如下
復制代碼

mysql -u root -p root jiahuibuydb<
c:/yebihai.sql

但沒導入進去，出來一大堆mysql的參數提示，不認輸入的命令參數，後來寫成下面這個樣子，就是去掉了參數和數據之間的空格

代碼如下
復制代碼

mysql -uroot -proot jiahuibuydb<
c:/yebihai.sql

導入就OK了

導出命令:

a)導出整個庫

mysqlmp -u 用戶名 -p 資料庫名 > 導出的文件名

代碼如下
復制代碼

mysqlmp -u root -p student
>d:/yebihai.sql

b)導出一個表

mysqlmp -u 用戶名 -p 資料庫名 表名> 導出的文件名

方案二：分塊導入

代碼如下
復制代碼

<?
//用來快速Mysql的大數據備份
//使用前請首先按照代碼注釋修改要導入的SQL文件名、資料庫主機名、資料庫用戶名、密碼、資料庫名
//同時將資料庫文件和本文本一起ftp導網站目錄，然後以web方式訪問此文件即可

$file_name="sql.sql"; //要導入的SQL文件名

$dbhost="localhost"; //資料庫主機名
$dbuser="user"; //資料庫用戶名

$dbpass="pass"; //資料庫密碼
$dbname="dbname";
//資料庫名

set_time_limit(0); //設置超時時間為0，表示一直執行。當php在safe
mode模式下無效，此時可能會導致導入超時，此時需要分段導入
$fp = @fopen($file_name, "r") or
die("不能打開SQL文件 $file_name");//打開文件
mysql_connect($dbhost, $dbuser,
$dbpass) or die("不能連接資料庫 $dbhost");//連接資料庫
mysql_select_db($dbname)
or die ("不能打開資料庫 $dbname");//打開資料庫
mysql_query('set names utf8');

echo "正在執行導入操作";
while($SQL=GetNextSQL()){
if
(!mysql_query($SQL)){
echo
"執行出錯www.111cn.net：".mysql_error()."
";
echo
"SQL語句為：
".$SQL."
";
};
}
echo
"導入完成";

fclose($fp) or die("Can』t close file $file_name");//關閉文件

mysql_close();

//從文件中逐條取SQL
function GetNextSQL() {

global $fp;
$sql="";
while ($line =
@fgets($fp, 40960)) {
$line =
trim($line);

//以下三句在高版本php中不需要，在部分低版本中也許需要修改
$line =
str_replace("////","//",$line);
$line =
str_replace("/』","』",$line);
$line =
str_replace("//r//n",chr(13).chr(10),$line);
// $line
= stripcslashes($line);
if (strlen($line)>1)
{
if ($line[0]=="-" && $line[1]=="-")
{

continue;
}

}

$sql.=$line.chr(13).chr(10);
if
(strlen($line)>0){
if
($line[strlen($line)-1]==";"){

break;
}

}
}
return $sql;

}
?>

方案三：客戶端用source命令操作

比較好的辦法仍是用mysql的source命令：

一、在客戶端下操作：

1、進行入客戶端 代碼如下
復制代碼

2、mysql>use 資料庫名(如果沒有，先建一個)

3、mysql>set names 'utf8'; (一般看導入的是什麼格式的文件)

4、mysql>source d:/aaa.sql;

即可正常導入，如果有錯，可以看出錯提示

二、PHP文件操作：

建立a.php

裡面有下面內容 代碼如下
復制代碼

mysql_connet('xxxx');

mysql_query("set names 'utf8'");

mysql_query("source d:/aaa.sql'");

原理同上，主要方便了無法使用命令行用戶的操作

方案四：下面教大家一個簡單有效的辦法，適合不會使用命令窗口的非技術人員，可以導入任意大小的mysql資料庫，理論上不論您的資料庫備份文件多大，都可以導入

方法如下：

1.將資料庫備份文件(如backup.sql)上傳至網站根目錄。

2.將以下代碼保存為mysql.php文件，上傳至網站根目錄。

代碼如下
復制代碼

system("mysql -hdbhost -udbuser -ppassword dbname < backup.sql");

print "導入成功";

其中

dbhost 改為您的資料庫伺服器地址(小提示:一般主機默認資料庫伺服器地址是:localhost)

dbuser 改為您的資料庫用戶名

password 改為您的資料庫用戶密碼

dbname 改為您的資料庫名(導入的時候此庫必須先建立好，否則會失敗並且不會進行任何提示)

backup.sql表示通過ftp上傳到網站根目錄下資料庫文件的文件名(該文件是解壓縮後的文件)

3.在瀏覽器裡面訪問mysql.php， 那麼就在瀏覽器裡面輸入/mysql.php，只要瀏覽器一訪問這個mysql.php文件，數據就開始導入，數據導入結束後，就會顯示「導入成功」的字樣。這個時間根據您要導入的數據大小決定，一般時間很短

J. 如何向mysql資料庫中導入大批量數據

你雙擊dbf是什麼程序打開的？vfp嗎？
你可以使用set
printer
to
file
abc.sql
list
to
print
然後使用一個文本編輯器，如emeditor，編輯這個abc.sql，將內容構造為標準的sql語句：
insert
into
mytable
(a,b,c,d,e)
values
('dbf_field1','dbf_field2','dbf_field3','dbf_field4','dbf_field5')
然後在mysql
administrtor中，將這個abc.sql導入到資料庫中就可以了。