在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

優(yōu)化MySQL數(shù)據(jù)庫中樸實(shí)無華的分表和花里胡哨的分庫

5jek_harmonyos ? 來源:CSDN博客 ? 作者:_陳哈哈 ? 2021-08-26 16:33 ? 次閱讀

blog.csdn.net/qq_39390545/article/details/116248222

一、樸實(shí)無華的 - 分表

1、垂直分表

2、水平分表

二、花里胡哨的 - 分庫

3、垂直分庫

4、水平分庫

總結(jié)

首先我們要知道分庫、分表都是干啥的,本文主角還是我們的MySQL為第一視角。首先從字面意思來看:

分庫:由單個(gè)數(shù)據(jù)庫實(shí)例拆分成多個(gè)數(shù)據(jù)庫實(shí)例,將數(shù)據(jù)分布到多個(gè)數(shù)據(jù)庫實(shí)例中。

分表:由單張表拆分成多張表,將數(shù)據(jù)劃分到多張表內(nèi)。

要知道,對于大型互聯(lián)網(wǎng)項(xiàng)目,數(shù)據(jù)量級(jí)可能不是我們能想到的,每日新增數(shù)據(jù)量過千萬是常有的事兒,想靠單臺(tái)MySQL服務(wù)器是不現(xiàn)實(shí)的。你項(xiàng)羽在牛B,也頂不住四個(gè)隊(duì)友掛機(jī)啊!!項(xiàng)羽:???

隨著業(yè)務(wù)數(shù)據(jù)量和網(wǎng)站QPS日益增高,對數(shù)據(jù)庫壓力也越來越大,單機(jī)版數(shù)據(jù)庫很快會(huì)到達(dá)存儲(chǔ)和并發(fā)瓶頸,就需要做數(shù)據(jù)庫性能方面的優(yōu)化,分庫分表采取的是分而治之的策略,分庫目的是減輕單臺(tái)MySQL實(shí)例存儲(chǔ)壓力及可擴(kuò)展性,而分表是解決單張表數(shù)據(jù)過大以后查詢的瓶頸問題,坦白說,這些問題也是所有關(guān)系型數(shù)據(jù)庫的“硬傷”。

今天我們就基于常見分庫、分表的策略方式以及場景,來搞清楚我們到底啥時(shí)候用的到。常用策略包括:垂直分表、水平分表、垂直分庫、水平分庫。

一、樸實(shí)無華的 - 分表

1、垂直分表

垂直分表,或者叫豎著切表,是不是感受到該策略是以字段為依據(jù)的!主要按照字段的活躍性、字段長度,將表中字段拆分到不同的表(主表和擴(kuò)展表)中。

特點(diǎn):

每個(gè)表的結(jié)構(gòu)都不一樣;

每個(gè)表的數(shù)據(jù)也不一樣,

有一個(gè)關(guān)聯(lián)字段,一般是主鍵或外鍵,用于關(guān)聯(lián)兄弟表數(shù)據(jù);

所有兄弟表的并集是該表的全量數(shù)據(jù);

場景 :

有幾個(gè)字段屬于熱點(diǎn)字段,更新頻率很高,要把這些字段單獨(dú)切到一張表里,不然innodb行鎖很惡心的,鎖死你呀~~如用戶表里的余額字段?不,我的余額就很穩(wěn)定,一直是0。。

有大字段,如text,存儲(chǔ)壓力很大,畢竟innodb數(shù)據(jù)和索引是同一個(gè)文件;同時(shí),我又喜歡用SELECT *,你懂得,這磁盤IO消耗的,跟玩兒似的,誰都扛不住的。

有明顯的業(yè)務(wù)區(qū)分,或表結(jié)構(gòu)設(shè)計(jì)時(shí)字段冗余;有些小伙伴看到第一點(diǎn)時(shí),就發(fā)現(xiàn)陳哈哈是個(gè)菜雞,用戶表怎么會(huì)有余額字段?明顯有問題啊!趕緊先到評(píng)論區(qū)噴陳哈哈一波~~然后笑嘻嘻的發(fā)現(xiàn)原來是個(gè)小尾巴,真不要臉是吧。。是的,因此不同業(yè)務(wù)我們要把具體字段拆開,這樣才有利于業(yè)務(wù)后續(xù)擴(kuò)展哦。

2、水平分表

水平分表,也叫“橫著切”。。以行數(shù)據(jù)為依據(jù)進(jìn)行切分,一般按照某列的自容進(jìn)行切分。

手機(jī)號(hào)表,我們可以通過前兩位或前三位進(jìn)行切分,如131、132、133 → phone_131、phone_132、phone_133,手機(jī)號(hào)有11位(100億),量大是很正常的事兒,這年頭誰家老頭老太太每個(gè)手機(jī)呢是吧。這樣切就把一張大表切成了好幾十張小表,數(shù)據(jù)量不就下來了。有同學(xué)就問了那我怎么知道我這手機(jī)號(hào)查哪個(gè)表呢?一看你就沒認(rèn)真看前兩行標(biāo)紅的點(diǎn),為啥標(biāo)紅嘞?比如我查13100001111,那我截取前三位,動(dòng)態(tài)拼接到查詢的表名上,就行了。

特點(diǎn):

每個(gè)表的結(jié)構(gòu)都一樣;

每個(gè)表的數(shù)據(jù)都不一樣,沒有交集;

所有表的并集是該表的全量數(shù)據(jù);

場景 :單表的數(shù)據(jù)量過大或增長速度很快,已經(jīng)影響或即將會(huì)影響SQL查詢效率,加重了CPU負(fù)擔(dān),提前到達(dá)瓶頸。記得水平分表越早越好,別問我為什么。。

你要有興趣試一試,就關(guān)注我,讓csdn研發(fā)同學(xué)給我的粉絲們分個(gè)表哈哈。。算了,別做夢了,忘了你是個(gè)菜狗了么~

二、花里胡哨的 - 分庫

需要你注意的是,傳統(tǒng)的分庫和我們熟悉的集群、主從復(fù)制可不是一個(gè)事兒;多節(jié)點(diǎn)集群是將一個(gè)庫復(fù)制成N個(gè)庫,從而通過讀寫分離實(shí)現(xiàn)多個(gè)MySQL服務(wù)的負(fù)載均衡,實(shí)際是圍繞一個(gè)庫來搞的,這個(gè)庫稱為Master主庫。而分庫就不同了,分庫是將這個(gè)主庫一分為N,比如一分為二,然后針對這兩個(gè)主庫,再配置2N個(gè)從庫節(jié)點(diǎn)。

3、垂直分庫

縱向切庫,太經(jīng)典的切分方式,基于表進(jìn)行切分,通常是把新的業(yè)務(wù)模塊或集成公共模塊拆分出去,比如我們最熟悉的單點(diǎn)登錄、鑒權(quán)模塊。熟悉的味道,記得有一次我把一些沒用的表切到一個(gè)性能很好的服務(wù)器中,這服務(wù)器我專門用來學(xué)習(xí),后來也不知被哪個(gè)狗腿子告密了~ 我**你個(gè)**,有種站出來,你個(gè)**東西。

特點(diǎn):

每個(gè)庫的表都不一樣;

表不一樣,數(shù)據(jù)就更不一樣了~ 沒有任何交集;

每個(gè)庫相對獨(dú)立,模塊化

場景 :可以抽象出單獨(dú)的業(yè)務(wù)模塊時(shí),可以抽象出公共區(qū)時(shí)(如字典、公共時(shí)間、公共配置等),或者想有一臺(tái)屬于自己的服務(wù)器時(shí)?

4、水平分庫

以行數(shù)據(jù)為依據(jù),將一個(gè)庫中的數(shù)據(jù)拆分到多個(gè)庫中。大型分表體驗(yàn)一下?坦白說這種策略并不實(shí)用,因?yàn)闀?huì)對后臺(tái)開發(fā)很不友好,有很多坑,不建議采用,理解即可。

特點(diǎn):

每個(gè)庫的結(jié)構(gòu)都一樣;

每個(gè)庫的數(shù)據(jù)都不一樣,沒有交集;

所有庫的并集是全量數(shù)據(jù);

場景 :系統(tǒng)絕對并發(fā)量上來了,CPU內(nèi)存壓力大。分表難以根本上解決量的問題,并且還沒有明顯的業(yè)務(wù)歸屬來垂直分庫,主庫磁盤接近飽和。

總結(jié)

本文就到這里,希望你學(xué)廢了!其實(shí),在實(shí)際工作中,我們在選擇分庫分表策略前,想到的應(yīng)該是從緩存、讀寫分離、SQL優(yōu)化等方面,因?yàn)檫@些能夠更直接、代價(jià)更小的解決問題。要記住動(dòng)表就是動(dòng)根本,你永遠(yuǎn)不知道這張表后面會(huì)連帶多少歷史遺留問題,如果是個(gè)很大型的項(xiàng)目,遇到些問題你就跟經(jīng)理提議要分庫分表,小心被呼死~

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7067

    瀏覽量

    89125
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    816

    瀏覽量

    26611

原文標(biāo)題:老大讓我優(yōu)化數(shù)據(jù)庫,我上來就分庫分表。。。

文章出處:【微信號(hào):harmonyos_developer,微信公眾號(hào):harmonyos_developer】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—Mysql數(shù)據(jù)庫表記錄丟失的數(shù)據(jù)恢復(fù)流程

    Mysql數(shù)據(jù)庫故障: Mysql數(shù)據(jù)庫表記錄丟失。 Mysql數(shù)據(jù)庫故障表現(xiàn): 1、
    的頭像 發(fā)表于 12-16 11:05 ?172次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—<b class='flag-5'>Mysql</b><b class='flag-5'>數(shù)據(jù)庫</b>表記錄丟失的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)流程

    Mybatis 攔截器實(shí)現(xiàn)單數(shù)據(jù)源內(nèi)多數(shù)據(jù)庫切換

    數(shù)據(jù)庫 現(xiàn)在需要上線報(bào)表服務(wù)來查詢所有數(shù)據(jù)庫數(shù)據(jù)進(jìn)行統(tǒng)計(jì),那么現(xiàn)在的問題來了,該如何 滿足在配置一個(gè)數(shù)據(jù)源的情況下來查詢該
    的頭像 發(fā)表于 12-12 10:23 ?749次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—MYSQL數(shù)據(jù)庫ibdata1文件損壞的數(shù)據(jù)恢復(fù)案例

    mysql數(shù)據(jù)庫故障: mysql數(shù)據(jù)庫文件ibdata1、MYI、MYD損壞。 故障表現(xiàn):1、數(shù)據(jù)庫無法進(jìn)行查詢等操作;2、使用my
    的頭像 發(fā)表于 12-09 11:05 ?170次閱讀

    香港云服務(wù)器怎么部署MySQL數(shù)據(jù)庫

    在香港云服務(wù)器上部署MySQL數(shù)據(jù)庫的步驟如下: 步驟 1: 更新軟件包列表 首先,確保軟件包列表是最新的。在終端執(zhí)行以下命令: sudo apt update 步驟 2: 安裝 MySQL
    的頭像 發(fā)表于 11-14 16:15 ?184次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—通過拼接數(shù)據(jù)庫碎片恢復(fù)SQLserver數(shù)據(jù)庫

    一個(gè)運(yùn)行在存儲(chǔ)上的SQLServer數(shù)據(jù)庫,有1000多個(gè)文件,大小幾十TB。數(shù)據(jù)庫每10天生成一個(gè)NDF文件,每個(gè)NDF幾百GB大小。數(shù)據(jù)庫包含兩個(gè)LDF文件。 存儲(chǔ)損壞,數(shù)據(jù)庫
    的頭像 發(fā)表于 10-31 13:21 ?249次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—通過拼接<b class='flag-5'>數(shù)據(jù)庫</b>碎片恢復(fù)SQLserver<b class='flag-5'>數(shù)據(jù)庫</b>

    MySQL性能優(yōu)化淺析及線上案例

    手段則會(huì)對用戶的使用體驗(yàn)造成影響,嚴(yán)重的則會(huì)直接導(dǎo)致訂單、金額直接受損,因而就需要時(shí)刻關(guān)注數(shù)據(jù)庫的性能問題。 2、 性能優(yōu)化的幾個(gè)常見措施 數(shù)據(jù)庫性能優(yōu)化的常見手段有很多,比如添加索引
    的頭像 發(fā)表于 10-22 15:17 ?699次閱讀
    <b class='flag-5'>MySQL</b>性能<b class='flag-5'>優(yōu)化</b>淺析及線上案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SQL Server數(shù)據(jù)庫出現(xiàn)823錯(cuò)誤的數(shù)據(jù)恢復(fù)案例

    SQL Server數(shù)據(jù)庫故障: SQL Server附加數(shù)據(jù)庫出現(xiàn)錯(cuò)誤823,附加數(shù)據(jù)庫失敗。數(shù)據(jù)庫沒有備份,無法通過備份恢復(fù)數(shù)據(jù)庫
    的頭像 發(fā)表于 09-20 11:46 ?364次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—SQL Server<b class='flag-5'>數(shù)據(jù)庫</b>出現(xiàn)823錯(cuò)誤的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    華納云:MySQL初始化操作如何創(chuàng)建新的數(shù)據(jù)庫

    要在MySQL創(chuàng)建一個(gè)新的數(shù)據(jù)庫,可以按照以下步驟進(jìn)行操作: 登錄到MySQL數(shù)據(jù)庫管理系統(tǒng)
    的頭像 發(fā)表于 09-04 14:30 ?275次閱讀

    軟件系統(tǒng)數(shù)據(jù)庫分庫設(shè)計(jì)

    的分布式集群,實(shí)現(xiàn)分庫表功能,解決數(shù)據(jù)庫中海量數(shù)據(jù)存儲(chǔ)和查詢性能的問題。MyCat 還是一個(gè)數(shù)據(jù)庫的集群中間件,主要實(shí)現(xiàn) RDBMS
    的頭像 發(fā)表于 08-22 11:39 ?331次閱讀
    軟件系統(tǒng)<b class='flag-5'>數(shù)據(jù)庫</b>的<b class='flag-5'>分庫</b><b class='flag-5'>分</b><b class='flag-5'>表</b>設(shè)計(jì)

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SqlServer數(shù)據(jù)庫底層File Record被截?cái)酁?的數(shù)據(jù)恢復(fù)案例

    SQL Server數(shù)據(jù)庫數(shù)據(jù)無法被讀取。 經(jīng)過數(shù)據(jù)庫數(shù)據(jù)恢復(fù)工程師的初步檢測,發(fā)現(xiàn)SQL Server數(shù)據(jù)庫文件無法被讀取的原因是底層
    的頭像 發(fā)表于 07-26 11:27 ?403次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—SqlServer<b class='flag-5'>數(shù)據(jù)庫</b>底層File Record被截?cái)酁?的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    恒訊科技分析:sql數(shù)據(jù)庫怎么用?

    SQL數(shù)據(jù)庫的使用通常包括以下幾個(gè)基本步驟: 1、選擇數(shù)據(jù)庫系統(tǒng): 選擇適合您需求的SQL數(shù)據(jù)庫系統(tǒng),如MySQL、PostgreSQL、Microsoft SQL Server、SQ
    的頭像 發(fā)表于 07-15 14:40 ?372次閱讀

    分庫后復(fù)雜查詢的應(yīng)對之道:基于DTS實(shí)時(shí)性ES寬構(gòu)建技術(shù)實(shí)踐

    1 問題域 業(yè)務(wù)發(fā)展的初期,我們的數(shù)據(jù)庫架構(gòu)往往是單,外加讀寫分離來快速的支撐業(yè)務(wù),隨著用戶量和訂單量的增加,數(shù)據(jù)庫的計(jì)算和存儲(chǔ)往往會(huì)成為我們系統(tǒng)的瓶頸,業(yè)界的實(shí)踐多數(shù)采用分而治
    的頭像 發(fā)表于 06-25 18:30 ?876次閱讀
    <b class='flag-5'>分庫</b><b class='flag-5'>分</b><b class='flag-5'>表</b>后復(fù)雜查詢的應(yīng)對之道:基于DTS實(shí)時(shí)性ES寬<b class='flag-5'>表</b>構(gòu)建技術(shù)實(shí)踐

    ?通過Modbus讀寫數(shù)據(jù)庫數(shù)據(jù)

    本文是將數(shù)據(jù)庫數(shù)據(jù)轉(zhuǎn)為Modbus服務(wù)端/從站,實(shí)現(xiàn)數(shù)據(jù)庫內(nèi)的數(shù)據(jù)也可以走M(jìn)odbus協(xié)議通過網(wǎng)口或串口讀寫的案例,下圖是通過智能網(wǎng)關(guān)的參數(shù)軟件(在附件
    發(fā)表于 03-14 13:44

    怎么簡單實(shí)現(xiàn)由Labview讀取的串口數(shù)據(jù)自增寫入mysql5.7數(shù)據(jù)庫

    怎么簡單實(shí)現(xiàn)由Labview讀取的串口數(shù)據(jù)自增寫入mysql5.7數(shù)據(jù)庫? 已實(shí)現(xiàn):串口數(shù)據(jù)的接收處理
    發(fā)表于 01-11 22:05

    MySQL數(shù)據(jù)庫通用空間詳解

    MySQL 數(shù)據(jù)庫中有效管理存儲(chǔ)和性能至關(guān)重要,通用空間為實(shí)現(xiàn)這一目標(biāo)提供了靈活性。本文討論通用空間并探討其功能、優(yōu)點(diǎn)和實(shí)際用法,并附有說明性示例。
    的頭像 發(fā)表于 01-10 09:33 ?2243次閱讀
    主站蜘蛛池模板: 精品欧美小视频在线观看| 爱爱小视频免费| 亚洲理论视频| 干美女在线视频| 788gao这里只有精品| 午夜免费小视频| 欧美亚洲韩国国产综合五月天| 玖玖福利| 六月丁香激情| 久久精品免费观看| 18一20岁一级毛片| 午夜国产理论| 国产一级簧片| 免费观看一级特黄欧美大片| 国产精品久久久福利| 奇米影视亚洲狠狠色777不卡| 女同激情视频| www.av天天| 日本一区免费看| 亚洲美女激情视频| 在线中文字幕第一页| 五月婷婷免费视频| 亚洲91| 熊出没之环球大冒险旧版免费观看| 天堂欧美| 黄色a∨| 天天爱夜夜爱| 天天碰视频| 国产一级特黄aaa大片| 亚洲国产一区二区在线| 成人丁香| 中文字幕在线观看一区二区| 99久久成人国产精品免费| 色女孩网站| 奇米视频在线观看| 国产高清美女一级a毛片| 菲菲国产在线观看| 日本zzzwww大片免费| 奇米影视777欧美在线观看| 在线视频免费观看| 在线天堂中文新版有限公司|