溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

怎么將1億條數(shù)據(jù)分表100張到Mysql數(shù)據(jù)庫中

發(fā)布時間:2021-02-08 09:48:20 來源:億速云 閱讀:244 作者:小新 欄目:開發(fā)技術(shù)

這篇文章給大家分享的是有關(guān)怎么將1億條數(shù)據(jù)分表100張到Mysql數(shù)據(jù)庫中的內(nèi)容。小編覺得挺實用的,因此分享給大家做個參考,一起跟隨小編過來看看吧。

通過創(chuàng)建100張表來演示下1億條數(shù)據(jù)的分表過程,具體請看下文代碼。

當(dāng)數(shù)據(jù)量猛增的時候,大家都會選擇庫表散列等等方式去優(yōu)化數(shù)據(jù)讀寫速度。筆者做了一個簡單的嘗試,1億條數(shù)據(jù),分100張表。具體實現(xiàn)過程如下:

首先創(chuàng)建100張表:

 $i=0;
 while($i<=99){
 echo "$newNumber \r\n";
 $sql="CREATE TABLE `code_".$i."` (
 `full_code` char(10) NOT NULL,
 `create_time` int(10) unsigned NOT NULL,
 PRIMARY KEY (`full_code`),
 ) ENGINE=MyISAM DEFAULT CHARSET=utf8";
 mysql_query($sql);
 $i++;

下面說一下我的分表規(guī)則,full_code作為主鍵,我們對full_code做hash

函數(shù)如下:

$table_name=get_hash_table('code',$full_code);
function get_hash_table($table,$code,$s=100){
$hash = sprintf("%u", crc32($code));
echo $hash;
$hash2 = intval(fmod($hash, $s));
 return $table."_".$hash2;
}

這樣插入數(shù)據(jù)前通過get_hash_table獲取數(shù)據(jù)存放的表名。

最后我們使用merge存儲引擎來實現(xiàn)一張完整的code表

CREATE TABLE IF NOT EXISTS `code` ( 
`full_code` char(10) NOT NULL,
`create_time` int(10) unsigned NOT NULL,
INDEX(full_code) 
) TYPE=MERGE UNION=(code_0,code_1,code_2.......) INSERT_METHOD=LAST ;

這樣我們通過select * from code就可以得到所有的full_code數(shù)據(jù)了。

感謝各位的閱讀!關(guān)于“怎么將1億條數(shù)據(jù)分表100張到Mysql數(shù)據(jù)庫中”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,讓大家可以學(xué)到更多知識,如果覺得文章不錯,可以把它分享出去讓更多的人看到吧!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI