1. 程式人生 > 其它 >Redis:scan命令

Redis:scan命令

  1、MySQL的複製原理以及流程
  
  基本原理流程,3個執行緒以及之間的關聯:
  
  主:binlog執行緒——記錄下所有改變了資料庫資料的語句,放進master上的binlog中;
  
  從:io執行緒——在使用start slave 之後,負責從master上拉取 binlog 內容,放進 自己的relay log中;
  
  從:sql執行執行緒——執行relay log中的語句;
  
  2、MySQL中myisam與innodb的區別:
  
  1>.InnoDB支援事物,而MyISAM不支援事物
  
  2>.InnoDB支援行級鎖,而MyISAM支援表級鎖
  
  3>.InnoDB支援MVCC, 而MyISAM不支援
  
  4>.InnoDB支援外來鍵,而MyISAM不支援
  
  5>.InnoDB不支援全文索引,而MyISAM支援。
  安裝mysql:

http://youhua.cuohei.com/
  innodb引擎的4大特性:
  
  1.插入快取
  
  2.二次寫
  
  3.自適應雜湊索引
  
  4預讀
  
  myisam與innodbselectcount(*)哪個更快?
  
  myisam更快,因為myisam內部維護了一個計數器,可以直接調取。
  
  3、MySQL中varchar與char的區別以及varchar(50)中的50代表的涵義:
  
  (1)、varchar與char的區別
  
  char是一種固定長度的型別,varchar則是一種可變長度的型別
  
  (2)、varchar(50)中50的涵義
  
  最多存放50個字元,varchar(50)和(200)儲存hello所佔空間一樣,但後者在排序時會消耗更多記憶體,因為order by col採用fixed_length計算col長度(memory引擎也一樣)
  
  (3)、int(20)中20的涵義
  
  是指顯示字元的長度
  
  但要加引數的,最大為255,比如它是記錄行數的id,插入10筆資料,它就顯示00000000001 ~~~00000000010,當字元的位數超過11,它也只顯示11位,如果你沒有加那個讓它未滿11位就前面加0的引數,它不會在前面加0
  
  20表示最大顯示寬度為20,但仍佔4位元組儲存,儲存範圍不變;
  
  (4)、mysql為什麼這麼設計
  
  對大多數應用沒有意義,只是規定一些工具用來顯示字元的個數;int(1)和int(20)儲存和計算均一樣;
  
  4、問了innodb的事務與日誌的實現方式:
  
  (1)、有多少種日誌;
  
  錯誤日誌:記錄出錯資訊,也記錄一些警告資訊或者正確的資訊。
  
  查詢日誌:記錄所有對資料庫請求的資訊,不論這些請求是否得到了正確的執行。
  
  慢查詢日誌:設定一個閾值,將執行時間超過該值的所有SQL語句都記錄到慢查詢的日誌檔案中。
  
  二進位制日誌:記錄對資料庫執行更改的所有操作。
  
  中繼日誌:
  
  事務日誌:
  
  (2)、事物的4種隔離級別:
  
  隔離級別
  
  讀未提交(RU)
  
  讀已提交(RC)
  
  可重複讀(RR)
  
  序列
  
  5、MySQL資料事務是如何通過日誌來實現的
  
  事務日誌是通過redo和innodb的儲存引擎日誌緩衝(Innodb log buffer)來實現的,當開始一個事務的時候,會記錄該事務的lsn(log sequence number)號; 當事務執行時,會往InnoDB儲存引擎的日誌的日誌快取裡面插入事務日誌;當事務提交時,必須將儲存引擎的日誌緩衝寫入磁碟(通過innodb_flush_log_at_trx_commit來控制),也就是寫資料前,需要先寫日誌。這種方式稱為“預寫日誌方式”
  
  6、MySQL資料庫cpu飆升到500%的話怎麼處理?
  
  1、列出所有程序 show processlist,觀察所有程序 ,多秒沒有狀態變化的(幹掉)
  
  2、檢視超時日誌或者錯誤日誌 (一般會是查詢以及大批量的插入會導致cpu與i/o上漲,當然不排除網路狀態突然斷了,,導致一個請求伺服器只接受到一半,比如where子句或分頁子句沒有傳送)
  
  7、sql優化各種方法:
  
  (1)、explain出來的各種item的意義;
  
  select_type
  
  表示查詢中每個select子句的型別
  
  type
  
  表示MySQL在表中找到所需行的方式,又稱“訪問型別”
  
  possible_keys
  
  指出MySQL能使用哪個索引在表中找到行,查詢涉及到的欄位上若存在索引,則該索引將被列出,但不一定被查詢使用
  
  key
  
  顯示MySQL在查詢中實際使用的索引,若沒有使用索引,顯示為NULL
  
  key_len
  
  表示索引中使用的位元組數,可通過該列計算查詢中使用的索引的長度
  
  ref
  
  表示上述表的連線匹配條件,即哪些列或常量被用於查詢索引列上的值
  
  Extra
  
  包含不適合在其他列中顯示但十分重要的額外資訊
  
  (2)、profile的意義以及使用場景;
  
  查詢到 SQL 會執行多少時間, 並看出 CPU/Memory 使用量, 執行過程中 Systemlock, Table lock 花多少時間等等
  
  8、備份計劃,mysqldump以及xtranbackup的實現原理:
  
  (1)、備份計劃;
  
  這裡每個公司都不一樣,您別說那種1小時1全備什麼的就行
  
  (2)、備份恢復時間;
  
  這裡跟機器,尤其是硬碟的速率有關係,以下列舉幾個僅供參考
  
  20G的2分鐘(mysqldump)
  
  80G的30分鐘(mysqldump)
  
  111G的30分鐘(mysqldump)
  
  288G的3小時(xtra)
  
  3T的4小時(xtra)
  
  邏輯匯入時間一般是備份時間的5倍以上
  
  (3)、xtrabackup實現原理
  
  在InnoDB內部會維護一個redo日誌檔案,我們也可以叫做事務日誌檔案。事務日誌會儲存每一個InnoDB表資料的記錄修改。當InnoDB啟動時,InnoDB會檢查資料檔案和事務日誌,並執行兩個步驟:它應用(前滾)已經提交的事務日誌到資料檔案,並將修改過但沒有提交的資料進行回滾操作。
  
  9、500臺db,在最快時間之內重啟
  
  puppet,dsh
  
  10、innodb的讀寫引數優化
  
  (1)、讀取引數
  
  global buffer pool以及 local buffer;
  
  (2)、寫入引數;
  
  innodb_flush_log_at_trx_commit
  
  innodb_buffer_pool_size
  
  (3)、與IO相關的引數;
  
  innodb_write_io_threads = 8
  
  innodb_read_io_threads = 8
  
  innodb_thread_concurrency = 0
  
  (4)、快取引數以及快取的適用場景。
  
  query cache/query_cache_type
  
  並不是所有表都適合使用query cache。造成query cache失效的原因主要是相應的table發生了變更
  
  第一個:讀操作多的話看看比例,簡單來說,如果是使用者清單表,或者說是資料比例比較固定,比如說商品列表,是可以開啟的,前提是這些庫比較集中,資料庫中的實務比較小。
  
  第二個:我們“行騙”的時候,比如說我們競標的時候壓測,把query cache開啟,還是能收到qps激增的效果,當然前提示前端的連線池什麼的都配置一樣。大部分情況下如果寫入的居多,訪問量並不多,那麼就不要開啟,例如社交網站的,10%的人產生內容,其餘的90%都在消費,開啟還是效果很好的,但是你如果是qq訊息,或者聊天,那就很要命。
  
  第三個:小網站或者沒有高併發的無所謂,高併發下,會看到 很多 qcache 鎖 等待,所以一般高併發下,不建議開啟query cache
  
  11、如何監控你們的資料庫的?慢日誌都是怎麼查詢的?
  
  監控的工具有很多,例如zabbix,lepus,
  
  12、實現主從一致性校驗:
  
  主從一致性校驗有多種工具 例如checksum、mysqldiff、pt-table-checksum等
  
  13、資料庫是否支援emoji表情,如果不支援,如何操作?
  
  如果是utf8字符集的話,需要升級至utf8_mb4方可支援。
  
  14、如何維護資料庫的資料字典的?
  
  一般是直接在生產庫進行註釋,利用工具匯出成excel方便流通。
  
  15、表中有大欄位X(例如:text型別),且欄位X不會經常更新,以讀為為主,請問拆帶來的問題:
  
  連線消耗 + 儲存拆分空間;不拆可能帶來的問題:查詢效能;
  
  1、如果能容忍拆分帶來的空間問題,拆的話最好和經常要查詢的表的主鍵在物理結構上放置在一起(分割槽) 順序IO,減少連線消耗,最後這是一個文字列再加上一個全文索引來儘量抵消連線消耗
  
  2、如果能容忍不拆分帶來的查詢效能損失的話:上面的方案在某個極致條件下肯定會出現問題,那麼不拆就是最好的選擇
  
  16、MySQL中InnoDB引擎的行鎖是通過加在什麼上完成(或稱實現)的?為什麼是這樣子的?
  
  InnoDB是基於索引來完成行鎖
  
  例: select * from tab_with_index where id = 1 for update;
  
  for update 可以根據條件來完成行鎖鎖定,並且 id 是有索引鍵的列,
  
  如果 id 不是索引鍵那麼InnoDB將完成表鎖,,併發將無從談起
  
  17.個6億的表a,一個3億的表b,通過外間tid關聯,你如何最快的查詢出滿足條件的第50000到第50200中的這200條資料記錄
  
  1、如果A表TID是自增長,並且是連續的,B表的ID為索引
  
  select * from a,b where a.tid = b.id and a.tid>500000 limit 200;
  
  2、如果A表的TID不是連續的,那麼就需要使用覆蓋索引.TID要麼是主鍵,要麼是輔助索引,B表ID也需要有索引。
  
  select * from b , (select tid from a limit 50000,200) a where b.id = a .tid;
  
  18、什麼是儲存過程?有哪些優缺點?
  
  儲存過程是一些預編譯的SQL語句。更加直白的理解:儲存過程可以說是一個記錄集,它是由一些T-SQL語句組成的程式碼塊,這些T-SQL語句程式碼像一個方法一樣實現一些功能(對單表或多表的增刪改查),然後再給這個程式碼塊取一個名字,在用到這個功能的時候呼叫他就行了。儲存過程是一個預編譯的程式碼塊,執行效率比較高,一個儲存過程替代大量T_SQL語句 ,可以降低網路通訊量,提高通訊速率,可以一定程度上確保資料安全
  
  19、索引是什麼?有什麼作用以及優缺點?
  
  1、索引是對資料庫表中一或多個列的值進行排序的結構,是幫助MySQL高效獲取資料的資料結構
  
  2、索引就是加快檢索表中資料的方法。資料庫的索引類似於書籍的索引。在書籍中,索引允許使用者不必翻閱完整個書就能迅速地找到所需要的資訊。在資料庫中,索引也允許資料庫程式迅速地找到表中的資料,而不必掃描整個資料庫。
  
  20、MySQL資料庫幾個基本的索引型別:普通索引、唯一索引、主鍵索引、全文索引:
  
  1、索引加快資料庫的檢索速度
  
  2、索引降低了插入、刪除、修改等維護任務的速度
  
  3、唯一索引可以確保每一行資料的唯一性
  
  4、通過使用索引,可以在查詢的過程中使用優化隱藏器,提高系統的效能
  
  5、索引需要佔物理和資料空間
  
  21、什麼是事務?
  
  事務(Transaction)是併發控制的基本單位。所謂的事務,它是一個操作序列,這些操作要麼都執行,要麼都不執行,它是一個不可分割的工作單位。事務是資料庫維護資料一致性的單位,在每個事務結束時,都能保持資料一致性。
  
  22、資料庫的樂觀鎖和悲觀鎖是什麼?
  
  資料庫管理系統(DBMS)中的併發控制的任務是確保在多個事務同時存取資料庫中同一資料時不破壞事務的隔離性和統一性以及資料庫的統一性。樂觀併發控制(樂觀鎖)和悲觀併發控制(悲觀鎖)是併發控制主要採用的技術手段。
  
  悲觀鎖:假定會發生併發衝突,遮蔽一切可能違反資料完整性的操作
  
  樂觀鎖:假設不會發生併發衝突,只在提交操作時檢查是否違反資料完整性。
  
  23、使用索引查詢一定能提高查詢的效能嗎?為什麼
  
  通常,通過索引查詢資料比全表掃描要快.但是我們也必須注意到它的代價.
  
  1、索引需要空間來儲存,也需要定期維護, 每當有記錄在表中增減或索引列被修改時,索引本身也會被修改. 這意味著每條記錄的INSERT,DELETE,UPDATE將為此多付出4,5 次的磁碟I/O. 因為索引需要額外的儲存空間和處理,那些不必要的索引反而會使查詢反應時間變慢.使用索引查詢不一定能提高查詢效能,索引範圍查詢(INDEX RANGE SCAN)適用於兩種情況:
  
  2、基於一個範圍的檢索,一般查詢返回結果集小於表中記錄數的30%
  
  3、基於非唯一性索引的檢索
  
  24、drop、delete與truncate的區別:
  
  SQL中的drop、delete、truncate都表示刪除,但是三者有一些差別的:
  
  1、delete和truncate只刪除表的資料不刪除表的結構
  
  2、速度,一般來說: drop> truncate >delete
  
  3、delete語句是dml,這個操作會放到rollback segement中,事務提交之後才生效;
  
  4、如果有相應的trigger,執行的時候將被觸發. truncate,drop是ddl, 操作立即生效,原資料不放到rollback segment中,不能回滾. 操作不觸發trigger.
  
  25、drop、delete與truncate分別在什麼場景之下使用?
  
  1、不再需要一張表的時候,用drop
  
  2、想刪除部分資料行時候,用delete,並且帶上where子句
  
  3、保留表而刪除所有資料的時候用truncate
  
  26、超鍵、候選鍵、主鍵、外來鍵分別是什麼?
  
  1、超鍵:在關係中能唯一標識元組的屬性集稱為關係模式的超鍵。一個屬性可以為作為一個超鍵,多個屬性組合在一起也可以作為一個超鍵。超鍵包含候選鍵和主鍵。
  
  2、候選鍵:是最小超鍵,即沒有冗餘元素的超鍵。
  
  3、主鍵:資料庫表中對儲存資料物件予以唯一和完整標識的資料列或屬性的組合。一個數據列只能有一個主鍵,且主鍵的取值不能缺失,即不能為空值(Null)。
  
  4、外來鍵:在一個表中存在的另一個表的主鍵稱此表的外來鍵。
  
  27、什麼是檢視?以及檢視的使用場景有哪些?
  
  1、檢視是一種虛擬的表,具有和物理表相同的功能。可以對檢視進行增,改,查,操作,試圖通常是有一個表或者多個表的行或列的子集。對檢視的修改不影響基本表。它使得我們獲取資料更容易,相比多表查詢。
  
  2、只暴露部分欄位給訪問者,所以就建一個虛表,就是檢視。
  
  3、查詢的資料來源於不同的表,而查詢者希望以統一的方式查詢,這樣也可以建立一個檢視,把多個表查詢結果聯合起來,查詢者只需要直接從檢視中獲取資料,不必考慮資料來源於不同表所帶來的差異
  
  28、三個正規化是指:
  
  第一正規化(1NF):資料庫表中的欄位都是單一屬性的,不可再分。這個單一屬性由基本型別構成,包括整型、實數、字元型、邏輯型、日期型等。
  
  第二正規化(2NF):資料庫表中不存在非關鍵欄位對任一候選關鍵欄位的部分函式依賴(部分函式依賴指的是存在組合關鍵字中的某些欄位決定非關鍵欄位的情況),也即所有非關鍵欄位都完全依賴於任意一組候選關鍵字。
  
  第三正規化(3NF):在第二正規化的基礎上,資料表中如果不存在非關鍵欄位對任一候選關鍵欄位的傳遞函式依賴則符合第三正規化。所謂傳遞函式依賴,指的是如 果存在"A → B → C"的決定關係,則C傳遞函式依賴於A。因此,滿足第三正規化的資料庫表應該不存在如下依賴關係: 關鍵欄位 → 非關鍵欄位 x → 非關鍵欄位y