您好,登錄后才能下訂單哦!
本篇文章給大家分享的是有關(guān)Mysql數(shù)據(jù)庫中的分庫分表怎么利用MyBatis來實(shí)現(xiàn),小編覺得挺實(shí)用的,因此分享給大家學(xué)習(xí),希望大家閱讀完這篇文章后可以有所收獲,話不多說,跟著小編一起來看看吧。
MyBatis實(shí)現(xiàn)分表最簡單步驟
1、我們模擬用戶表數(shù)據(jù)量超過千萬(雖然實(shí)際不太可能)
2、用戶表原來的名字叫做user_tab
,我們切分為user_tab_0
和user_tab_1
(實(shí)際也可能不是這么隨意的名字),這樣就能把原來千萬的數(shù)據(jù)分離成兩個(gè)百萬的數(shù)據(jù)量的兩張表了。
3、如何操作這兩張表呢?我們利用userId也就是用戶的唯一標(biāo)識進(jìn)行區(qū)分。
4、userId%2 == 0
的用戶操作表user_tab_0
,同理userId%2 == 1
的用戶操作表user_tab_1
5、那么在MyBatis中sql語句如何實(shí)現(xiàn)呢?下面是舉例查詢一個(gè)用戶的sql語句
<select id="getUser" parameterType="java.util.Map" resultType="UserDO"> SELECT userId, name FROM user_tab_#{tabIndex} WHERE userId = #{userId} </select>
其中我們傳入了兩個(gè)參數(shù)tabIndex和userId,tabIndex就是需要操作表的標(biāo)示值(0或1),這樣如果需要查詢userId為5的用戶,那么最終出現(xiàn)的sql語句就會是:
SELECT userId, name FROM user_tab_1 WHERE userId = 5
其他多余的DAO服務(wù)和實(shí)現(xiàn)我這里就不多展示了,相信聰明的你肯定會的。
以上就是最簡單的實(shí)現(xiàn),不需要多余的框架,不需要任何的插件也就滿足了分表的要求。
上面基本上就是所有實(shí)現(xiàn)的內(nèi)容了,下面就要開始詳細(xì)說說分離的細(xì)節(jié)了,看熱鬧的基本可以散了。
我將從下面幾個(gè)角度分別來說說。我盡可能用最簡單的白話來說。
分離的方式
切分的方式主要有兩種,水平切分和垂直切分。
1、水平切分
簡單的說就是,把一張表分離成幾張一模一樣的表,然后表的名字不同。就和上面最簡單的例子一樣。
這種切分適合于一張表的數(shù)據(jù)量過大而導(dǎo)致操作時(shí)間變慢的情況,如保存的一些記錄表。
2、垂直切分
把不同的業(yè)務(wù)模塊分成不同的數(shù)據(jù)庫,這些業(yè)務(wù)模塊直接最好是0耦合(簡單的說就是毫無關(guān)系)。
這主要是適合數(shù)據(jù)量普遍較大,而且業(yè)務(wù)場景比較分散,互相之間沒有邏輯關(guān)系的情況。
分離的策略
具體的策略有很多種,你也可以設(shè)計(jì)你自己的,普遍的策略有下面幾種,只是列舉就不具體展開了。
1、“%”取模,也就是上面例子中實(shí)現(xiàn)的,也是最簡單的一種。
2、MD5哈希
3、移位
4、日期時(shí)間(根據(jù)不同的日期分表,如一個(gè)月一張表,這個(gè)月就操作這張表,下個(gè)月就下張表)
5、枚舉范圍(用戶1-10000操作第一張表,用戶10001-20000操作第二張表)
分離的問題
下面說說最終要的點(diǎn),導(dǎo)致的問題。
數(shù)據(jù)庫肯定不是你說分就分的。(人家比較有感情的,怎么能說分就分呢?)
正經(jīng)來說,我列舉了下面幾個(gè)分離只有會導(dǎo)致的問題。
1、添加時(shí)主鍵唯一性的問題;分離之后多張表,就會導(dǎo)致原有的自增長主鍵不唯一,所以沒有辦法自增長了,導(dǎo)致問題,解決方案的也是有的,比如單獨(dú)維護(hù)一張主鍵表專門用來存放當(dāng)前主鍵,或者說用別的中間件等。
2、新增時(shí)的效率問題,雖然不是個(gè)大問題,但是新增肯定會多了計(jì)算量嘛,這個(gè)問題可以忽略不計(jì)。
3、查詢所帶來的分頁問題,分離成多張表之后,分頁查詢就很困難了,這也考慮到不同的分離用不同的解決方案,總之會產(chǎn)生問題。
4、同理,關(guān)聯(lián)查詢,原本一張表關(guān)聯(lián)別的表或者別的表關(guān)聯(lián)一張表,都很簡單,但是現(xiàn)在分離之后就難了。
5、事務(wù)問題,多張表需要使用分布式事務(wù)才能完成原來帶有事務(wù)的操作。因?yàn)樵瓉淼氖聞?wù)只是鎖一張表現(xiàn)在可能要鎖多張了呢。
6、擴(kuò)展性問題,有的切分策略下,對數(shù)據(jù)的擴(kuò)展性其實(shí)不好,之后如果有更多的數(shù)據(jù)來了,是說還能再新建表來擴(kuò)展嗎?
分離的原則
下面總結(jié)了幾點(diǎn)分離的原則,主要是參考了網(wǎng)絡(luò)上的,沒有任何實(shí)際的依據(jù)(我也不是個(gè)年薪百萬的DBA也碰不到那么大的數(shù)據(jù)去實(shí)際檢驗(yàn)嘛),所以如果有任何問題也請指出。
1、能不分就不分
2、能分少就不分多
3、多冗余,不關(guān)聯(lián)
4、避免使用分布式事務(wù),主要是太難我也不會啊
5、單表千萬記錄以內(nèi)就不分
6、現(xiàn)在不分以后分也來得及
7、擴(kuò)展,耦合,仔細(xì)考慮
實(shí)現(xiàn)分離的方式
最后說說分離的方式,現(xiàn)在流行使用的DAO框架是MyBatis,也有很多別的框架。分離的實(shí)現(xiàn)主要有下面幾種方式。
1、原生實(shí)現(xiàn),就和最上面的例子一樣,不需要其他任何的東西,利用原生的框架,自己去控制實(shí)現(xiàn)。
優(yōu)點(diǎn)是:容易控制,掌握主動權(quán)。
缺點(diǎn)是:代碼量多,需要自己很清楚,修改不方便,不支持復(fù)雜的切分,比如切分之后還需要做一些分頁查詢,還有上面說的主鍵問題等。
2、插件實(shí)現(xiàn),利用框架本身開發(fā)的一些插件,去實(shí)現(xiàn)這些插件,然后利用插件去訪問數(shù)據(jù)庫,直接實(shí)現(xiàn)分離。
優(yōu)點(diǎn)是:代碼量少,實(shí)現(xiàn)簡單,擴(kuò)展性好。
缺點(diǎn)是:不易控制,分離方式有限,出現(xiàn)問題難以解決。沒有找到特別成熟的插件。
3、中間件實(shí)現(xiàn)。利用一些數(shù)據(jù)庫訪問的中間件,在訪問數(shù)據(jù)庫之前做一些操作使得sql進(jìn)行相應(yīng)的變化從而實(shí)現(xiàn)分離。
優(yōu)點(diǎn)是:耦合小,擴(kuò)展性好,可以解決分布式事務(wù)的問題。
確定是:實(shí)現(xiàn)比較復(fù)雜,需要對中間件進(jìn)行學(xué)習(xí),成本較大。維護(hù)也是一個(gè)大問題,萬一掛掉了。。
總之方式各有千秋,但是考慮到成本上面,第一種幾乎是0成本,即可上手,而且比較容易控制,就如同最上面給出的例子一樣,而且當(dāng)前我處理的數(shù)據(jù)還沒有到達(dá)那種處處要分離的地步,所以我選擇第一種。也推薦使用。如果你找到比較好用的插件或者中間件也可以在評論中推薦。
以上就是Mysql數(shù)據(jù)庫中的分庫分表怎么利用MyBatis來實(shí)現(xiàn),小編相信有部分知識點(diǎn)可能是我們?nèi)粘9ぷ鲿姷交蛴玫降?。希望你能通過這篇文章學(xué)到更多知識。更多詳情敬請關(guān)注億速云行業(yè)資訊頻道。
免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。