1. 程式人生 > >mysql分庫、分表、分割槽

mysql分庫、分表、分割槽

分表是分散資料庫壓力的好方法。 分表,最直白的意思,就是將一個表結構分為多個表,然後,可以再同一個庫裡,也可以放到不同的庫。 當然,首先要知道什麼情況下,才需要分表。個人覺得單表記錄條數達到百萬到千萬級別時就要使用分表了。 1,分表的分類 1>縱向分表 將本來可以在同一個表的內容,人為劃分為多個表。(所謂的本來,是指按照關係型資料庫的第三正規化要求,是應該在同一個表的。) 分表理由:根據資料的活躍度進行分離,(因為不同活躍的資料,處理方式是不同的) 案例: 對於一個部落格系統,文章標題,作者,分類,建立時間等,是變化頻率慢,查詢次數多,而且最好有很好的實時性的資料,我們把它叫做冷資料。而部落格的瀏覽量,回覆數等,類似的統計資訊,或者別的變化頻率比較高的資料,我們把它叫做活躍資料。所以,在進行資料庫結構設計的時候,就應該考慮分表,首先是縱向分表的處理。 這樣縱向分表後: 首先儲存引擎的使用不同,冷資料使用MyIsam 可以有更好的查詢資料。活躍資料,可以使用Innodb ,可以有更好的更新速度。 其次,對冷資料進行更多的從庫配置,因為更多的操作是查詢,這樣來加快查詢速度。對熱資料,可以相對有更多的主庫的橫向分表處理。 其實,對於一些特殊的活躍資料,也可以考慮使用memcache ,redis之類的快取,等累計到一定量再去更新資料庫。或者mongodb一類的nosql 資料庫,這裡只是舉例,就先不說這個。 2>橫向分表 字面意思,就可以看出來,是把大的表結構,橫向切割為同樣結構的不同表,如,使用者資訊表,user_1,user_2 等。表結構是完全一樣,但是,根據某些特定的規則來劃分的表,如根據使用者ID來取模劃分。 分表理由:根據資料量的規模來劃分,保證單表的容量不會太大,從而來保證單表的查詢等處理能力。 案例:同上面的例子,部落格系統。當部落格的量達到很大時候,就應該採取橫向分割來降低每個單表的壓力,來提升效能。例如部落格的冷資料表,假如分為100個表,當同時有100萬個使用者在瀏覽時,如果是單表的話,會進行100萬次請求,而現在分表後,就可能是每個表進行1萬個資料的請求(因為,不可能絕對的平均,只是假設),這樣壓力就降低了很多很多。 分資料庫設計,將可能從壓力效能上會提升幾個檔次,當然單次執行效率不會比單資料庫來的高的,畢竟存在著資料庫切換的效率問題。分庫以及主從資料庫搭 配是可以比較好改善資料庫併發瓶頸的方案。原則:大資料量,分庫;大訪問量,主從。很多時候,都是這兩者並行 ( 本文不討論 cache) 。  我想,如果要實現分庫以及主從關係,那麼資料庫伺服器數量將是非常可觀,在應用程式中隨時切換到某一臺伺服器,將是非常頭痛的問題,配置更換,變數名稱,是不是會有一大堆呢?如何尋找更好的解決方案將是本文談論的話題。  首先是分庫使得資料庫頗多的問題。什麼情況下分庫?或許有些人還搞不明白為什麼要分庫,我就簡要說一下自己的經驗猜測。比如一個部落格程式,一般設計是 將日誌存放在一張日誌表中。假設是一個多使用者部落格,那麼將會關聯一個 uid ,如果資料量不大,這樣設計是沒有問題的,但是當日志量巨大,一天有幾十萬條日 志記錄錄入的時候,而且訪問量也比較可觀的時候,我想不可能每個使用者來訪問日誌列表,都去從這包含幾千萬條日誌記錄的資料表中去找那麼幾條,效率可見一 斑。這個時候就該考慮到分庫的問題。如何分?有一個很簡單的分表方法,即,根據 uid 段,將日誌記錄在各個資料庫中,當然,這個分佈還是需要根據以往統計 結果做出調整的,因為使用者日誌分佈肯定不是均勻的。設定好 uid 段,然後根據 uid 索引到指定資料庫配置,建立一個數據庫物件即可。配置資訊可能如下:  Copy code $configs['db_info']['blog'][0] = array(      'db_host' => '192.168.0.1',      'db_name' => 'blog',      'db_user' => 'root',      'db_pass' => '',  );  $configs['db_info']['blog'][1] = array(      'db_host' => '192.168.0.2',      'db_name' => 'blog',      'db_user' => 'root',      'db_pass' => '',  );  $configs['db_info']['blog'][2] = array(      'db_host' => '192.168.0.2',      'db_name' => 'blog',      'db_user' => 'root',      'db_pass' => '',  );  //...and so on 垂直分庫指的是根據應用來分資料庫,比如部落格一個數據庫,論壇一個數據庫。水平分庫是指,根據某些規則,將同一個應用 / 表的資料分佈在不同的庫上。比如根據使用者 ID 把使用者的部落格文章分佈在 5 個數據庫上。