一区二区三区日韩精品-日韩经典一区二区三区-五月激情综合丁香婷婷-欧美精品中文字幕专区

分享

mysql 數(shù)據(jù)庫 分表后 怎么進(jìn)行分頁查詢?Mysql分庫分表方案?

 WindySky 2017-11-23
1.如果只是為了分頁,可以考慮這種分表,就是表的id是范圍性的,且id是連續(xù)的,比如第一張表id是1到10萬,第二張是10萬到20萬,這樣分頁應(yīng)該沒什么問題。

2.如果是其他的分表方式,建議用sphinx先建索引,然后查詢分頁,我們公司現(xiàn)在就是這樣干的

Mysql分庫分表方案

1.為什么要分表:

當(dāng)一張表的數(shù)據(jù)達(dá)到幾千萬時,你查詢一次所花的時間會變多,如果有聯(lián)合查詢的話,我想有可能會死在那兒了。分表的目的就在于此,減小數(shù)據(jù)庫的負(fù)擔(dān),縮短查詢時間。

mysql中有一種機(jī)制是表鎖定和行鎖定,是為了保證數(shù)據(jù)的完整性。表鎖定表示你們都不能對這張表進(jìn)行操作,必須等我對表操作完才行。行鎖定也一樣,別的sql必須等我對這條數(shù)據(jù)操作完了,才能對這條數(shù)據(jù)進(jìn)行操作。

2. mysql proxy:amoeba

做mysql集群,利用amoeba。

從上層的java程序來講,不需要知道主服務(wù)器和從服務(wù)器的來源,即主從數(shù)據(jù)庫服務(wù)器對于上層來講是透明的??梢酝ㄟ^amoeba來配置。

 3.大數(shù)據(jù)量并且訪問頻繁的表,將其分為若干個表

比如對于某網(wǎng)站平臺的數(shù)據(jù)庫表-公司表,數(shù)據(jù)量很大,這種能預(yù)估出來的大數(shù)據(jù)量表,我們就事先分出個N個表,這個N是多少,根據(jù)實際情況而定。

     某網(wǎng)站現(xiàn)在的數(shù)據(jù)量至多是5000萬條,可以設(shè)計每張表容納的數(shù)據(jù)量是500萬條,也就是拆分成10張表,

那么如何判斷某張表的數(shù)據(jù)是否容量已滿呢?可以在程序段對于要新增數(shù)據(jù)的表,在插入前先做統(tǒng)計表記錄數(shù)量的操作,當(dāng)<500萬條數(shù)據(jù),就直接插入,當(dāng)已經(jīng)到達(dá)閥值,可以在程序段新創(chuàng)建數(shù)據(jù)庫表(或者已經(jīng)事先創(chuàng)建好),再執(zhí)行插入操作。

 4. 利用merge存儲引擎來實現(xiàn)分表

如果要把已有的大數(shù)據(jù)量表分開比較痛苦,最痛苦的事就是改代碼,因為程序里面的sql語句已經(jīng)寫好了。用merge存儲引擎來實現(xiàn)分表, 這種方法比較適合.

舉例子:

 

 ------------------- ----------華麗的分割線--------------------------------------

 數(shù)據(jù)庫架構(gòu)

1、簡單的MySQL主從復(fù)制:

MySQL的主從復(fù)制解決了數(shù)據(jù)庫的讀寫分離,并很好的提升了讀的性能,其圖如下:

 

其主從復(fù)制的過程如下圖所示:

 

但是,主從復(fù)制也帶來其他一系列性能瓶頸問題:

1. 寫入無法擴(kuò)展

2. 寫入無法緩存

3. 復(fù)制延時

4. 鎖表率上升

5. 表變大,緩存率下降

那問題產(chǎn)生總得解決的,這就產(chǎn)生下面的優(yōu)化方案,一起來看看。

2、MySQL垂直分區(qū)

   如果把業(yè)務(wù)切割得足夠獨(dú)立,那把不同業(yè)務(wù)的數(shù)據(jù)放到不同的數(shù)據(jù)庫服務(wù)器將是一個不錯的方案,而且萬一其中一個業(yè)務(wù)崩潰了也不會影響其他業(yè)務(wù)的正常進(jìn)行,并且也起到了負(fù)載分流的作用,大大提升了數(shù)據(jù)庫的吞吐能力。經(jīng)過垂直分區(qū)后的數(shù)據(jù)庫架構(gòu)圖如下:

 

然而,盡管業(yè)務(wù)之間已經(jīng)足夠獨(dú)立了,但是有些業(yè)務(wù)之間或多或少總會有點聯(lián)系,如用戶,基本上都會和每個業(yè)務(wù)相關(guān)聯(lián),況且這種分區(qū)方式,也不能解決單張表數(shù)據(jù)量暴漲的問題,因此為何不試試水平分割呢?

3、MySQL水平分片(Sharding)

這是一個非常好的思路,將用戶按一定規(guī)則(按id哈希)分組,并把該組用戶的數(shù)據(jù)存儲到一個數(shù)據(jù)庫分片中,即一個sharding,這樣隨著用戶數(shù)量的增加,只要簡單地配置一臺服務(wù)器即可,原理圖如下:

 

如何來確定某個用戶所在的shard呢,可以建一張用戶和shard對應(yīng)的數(shù)據(jù)表,每次請求先從這張表找用戶的shard id,再從對應(yīng)shard中查詢相關(guān)數(shù)據(jù),如下圖所示:

 


    本站是提供個人知識管理的網(wǎng)絡(luò)存儲空間,所有內(nèi)容均由用戶發(fā)布,不代表本站觀點。請注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購買等信息,謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請點擊一鍵舉報。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評論

    發(fā)表

    請遵守用戶 評論公約

    類似文章 更多

    国产老熟女超碰一区二区三区| 99国产高清不卡视频| 中文字幕佐山爱一区二区免费| 欧美精品一区二区水蜜桃| 欧美黑人黄色一区二区| 日韩一区二区三区有码| 丰满人妻熟妇乱又伦精另类视频 | 综合久综合久综合久久| 国产精品一级香蕉一区| 欧美丝袜诱惑一区二区| 亚洲精品中文字幕一二三| 熟女乱一区二区三区四区| 日韩精品福利在线观看| 九九热精品视频免费在线播放| 欧美黄色黑人一区二区| 日本一区二区三区久久娇喘| 国产一区一一一区麻豆| 日韩一区二区三区在线欧洲| 国产一级不卡视频在线观看| 亚洲一区在线观看蜜桃| 久久婷婷综合色拍亚洲| 亚洲中文字幕剧情在线播放| 欧美黑人在线一区二区| 欧美午夜性刺激在线观看| 日韩精品视频一二三区| 日本加勒比中文在线观看| 欧美黑人在线精品极品| 91精品视频免费播放| 国产一区二区久久综合| 欧美日韩亚洲精品在线观看| 欧美一级内射一色桃子| 日本一级特黄大片国产| 最新69国产精品视频| av中文字幕一区二区三区在线| 久久国产成人精品国产成人亚洲 | 日韩精品人妻少妇一区二区| 青青久久亚洲婷婷中文网| 91亚洲人人在字幕国产| 精品综合欧美一区二区三区| 久久福利视频这里有精品| 国产欧美一区二区久久 |