1. 程式人生 > 其它 >詳解Kafka生產者和消費者的工作原理!太完整了!

詳解Kafka生產者和消費者的工作原理!太完整了!

詳解Kafka生產者和消費者的工作原理!太完整了!

正文

如果你參加過一些大廠面試,肯定會遇到一些開放性的問題:

1、 寫一段程式,讓其執行時的表現為觸發了5次Young GC、3次Full GC、然後3次Young GC;

2、 如果一個Java程序突然消失了,你會怎麼去排查這種問題?

3、 給了一段Spring載入Bean的程式碼片段,闡述一下具體的執行流程?

是不是看上去很難,是不是和自己準備的“題庫”中的問題不一樣?不知道從何處下手?如果你有這種感覺,那麼說明你的技術還需要繼續修煉。

面對如此多的技術面試,怎麼樣才能說自己的技術已經過關了呢?

只有問題沒有參考答案,需要各位小夥伴下來逐一學習!

一、開場白

簡單的介紹一下自己的工作經歷與職責,在校或者工作中主要的工作內容,主要負責的內容;(你的資訊一清二白的寫在簡歷上,這個主要為了緩解面試者的壓力)

介紹下自己最滿意的,有技術亮點的專案或平臺,重點介紹下自己負責那部分的技術細節;(主要考察應聘者對自己做過的事情是否有清晰的描述,判斷做的事情的複雜度)

二、Java多執行緒

  • 執行緒池的原理,為什麼要建立執行緒池?建立執行緒池的方式;
  • 執行緒的生命週期,什麼時候會出現僵死程序;
  • 說說執行緒安全問題,什麼實現執行緒安全,如何實現執行緒安全;
  • 建立執行緒池有哪幾個核心引數? 如何合理配置執行緒池的大小?
  • volatile、ThreadLocal的使用場景和原理;
  • ThreadLocal什麼時候會出現OOM的情況?為什麼?
  • synchronized、volatile區別、synchronized鎖粒度、模擬死鎖場景、原子性與可見性;

三、JVM相關

  • JVM記憶體模型,GC機制和原理;
  • GC分哪兩種,Minor GC 和Full GC有什麼區別?什麼時候會觸發Full GC?分別採用什麼演算法?
  • JVM裡的有幾種classloader,為什麼會有多種?
  • 什麼是雙親委派機制?介紹一些運作過程,雙親委派模型的好處;
  • 什麼情況下我們需要破壞雙親委派模型;
  • 常見的JVM調優方法有哪些?可以具體到調整哪個引數,調成什麼值?
  • JVM虛擬機器記憶體劃分、類載入器、垃圾收集演算法、垃圾收集器、class檔案結構是如何解析的;

四、Java擴充套件篇

  • 紅黑樹的實現原理和應用場景;
  • NIO是什麼?適用於何種場景?
  • Java9比Java8改進了什麼;
  • HashMap內部的資料結構是什麼?底層是怎麼實現的?(還可能會延伸考察ConcurrentHashMap與HashMap、HashTable等,考察對技術細節的深入瞭解程度);
  • 說說反射的用途及實現,反射是不是很慢,我們在專案中是否要避免使用反射;
  • 說說自定義註解的場景及實現;
  • List 和 Map 區別,Arraylist 與 LinkedList 區別,ArrayList 與 Vector 區別;

五、Spring相關

  • Spring AOP的實現原理和場景?
  • Spring bean的作用域和生命週期;
  • Spring Boot比Spring做了哪些改進? Spring 5比Spring4做了哪些改進;
  • 如何自定義一個Spring Boot Starter?
  • Spring IOC是什麼?優點是什麼?
  • SpringMVC、動態代理、反射、AOP原理、事務隔離級別;

六、中介軟體篇

  • Dubbo完整的一次呼叫鏈路介紹;
  • Dubbo支援幾種負載均衡策略?
  • Dubbo Provider服務提供者要控制執行併發請求上限,具體怎麼做?
  • Dubbo啟動的時候支援幾種配置方式?
  • 瞭解幾種訊息中介軟體產品?各產品的優缺點介紹;
  • 訊息中介軟體如何保證訊息的一致性和如何進行訊息的重試機制?
  • Spring Cloud熔斷機制介紹;
  • Spring Cloud對比下Dubbo,什麼場景下該使用Spring Cloud?

七、資料庫篇

  • 鎖機制介紹:行鎖、表鎖、排他鎖、共享鎖;
  • 樂觀鎖的業務場景及實現方式;
  • 事務介紹,分散式事物的理解,常見的解決方案有哪些,什麼事兩階段提交、三階段提交;
  • MySQL記錄binlog的方式主要包括三種模式?每種模式的優缺點是什麼?
  • MySQL鎖,悲觀鎖、樂觀鎖、排它鎖、共享鎖、表級鎖、行級鎖;
  • 分散式事務的原理2階段提交,同步\非同步\阻塞\非阻塞;
  • 資料庫事務隔離級別,MySQL預設的隔離級別、Spring如何實現事務、JDBC如何實現事務、巢狀事務實現、分散式事務實現;
  • SQL的整個解析、執行過程原理、SQL行轉列;

八、Redis

  • Redis為什麼這麼快?redis採用多執行緒會有哪些問題?
  • Redis支援哪幾種資料結構;
  • Redis跳躍表的問題;
  • Redis單程序單執行緒的Redis如何能夠高併發?
  • Redis如何使用Redis實現分散式鎖?
  • Redis分散式鎖操作的原子性,Redis內部是如何實現的?

九、其他

看過哪些原始碼?然後會根據你說的原始碼問一些細節的問題?(這裡主要考察面試者是否對技術有鑽研的精神,還是隻停留在表面,還是背了幾道面經,這個對於很多有強迫症的面試官,如果你連原始碼都沒看過,基本上是會pass掉的,比如我也是這樣的!)

十、最後

其實一步一步走過來,不單單隻靠面試之前刷題那麼簡單,更多的還是平時的積累。小編整理出一篇Java進階架構師之路的核心知識,同時也是面試時面試官必問的知識點,篇章也是包括了很多知識點,其中包括了有基礎知識、Java集合、JVM、多執行緒併發、spring原理、微服務、Netty 與RPC 、Kafka、日記、設計模式、Java演算法、資料庫、Zookeeper、分散式快取、資料結構等等

由於pdf文件裡的細節內容實在過多所以只編輯了部分知識點的章節粗略的介紹下,每個章節小節點裡面都有更細化的內容!以下就是部分章節目錄,由於頭條的篇幅限制目錄上的詳細講解也無法一一列出,文末底下有獲取以下章節的所有詳細知識講解。

JVM

  1. 執行緒
  2. JVM記憶體區域
  3. JVM執行時記憶體
  4. 垃圾回收與演算法
  5. JAVA 四種引用型別
  6. GC分代收集演算法 VS 分割槽收集演算法
  7. GC垃圾收集器
  8. JAVA IO/NIO
  9. JVM 類載入機制

JAVA集合

  1. 介面繼承關係和實現
  2. List
  3. ArrayList(陣列)
  4. Vector(陣列實現、執行緒同步)
  5. LinkList(連結串列)
  6. Set
  7. HashSet(Hash表)
  8. TreeSet(二叉樹)

JAVA多執行緒併發

  1. JAVA併發知識庫
  2. JAVA執行緒實現/建立方式
  3. 4種執行緒池
  4. 執行緒生命週期(狀態)
  5. 終止執行緒4種方式
  6. sleep與wait 區別
  7. start與run區別
  8. JAVA後臺執行緒
  9. JAVA鎖
  10. 執行緒基本方法4.1.11. 執行緒上下文切換
  11. 同步鎖與死鎖
  12. 執行緒池原理
  13. JAVA阻塞佇列原理
  14. CyclicBarrier、CountDownLatch、Semaphore的用法
  15. volatile關鍵字的作用(變數可見性、禁止重排序)
  16. 如何在兩個執行緒之間共享資料

JAVA基礎

  1. JAVA異常分類及處理
  2. JAVA反射
  3. JAVA註解
  4. JAVA內部類
  5. JAVA泛型
  6. JAVA序列化(建立可複用的Java物件)
  7. JAVA複製

Spring 原理

  1. Spring 特點
  2. Spring 核心元件
  3. Spring 常用模組
  4. Spring 主要包
  5. Spring 常用註解
  6. Spring第三方結合
  7. Spring IOC原理
  8. Spring APO原理
  9. Spring MVC原理
  10. Spring Boot原理
  11. JPA原理
  12. Mybatis快取
  13. Tomcat架構

由於篇幅限制小編,pdf文件的詳解資料太全面,細節內容實在太多啦,所以只把部分知識點截圖出來粗略的介紹,每個小節點裡面都有更細化的內容!有需要的程式猿(媛)可以關注我戳這裡,暗號:簡書”即可免費獲取

微服務

  1. 服務註冊發現
  2. API 閘道器
  3. 配置中心
  4. 事件排程(kafka)
  5. 服務跟蹤(starter-sleuth)
  6. 服務熔斷(Hystrix)
  7. Hystrix斷路器機制
  8. API管理

Netty 與RPC

  1. Netty 原理
  2. Netty 高效能
  3. Netty RPC實現
  4. 關鍵技術
  5. 核心流程
  6. 訊息編解碼
  7. 通訊過程
  8. RMI實現方式

分散式快取

  1. 快取雪崩
  2. 快取穿透
  3. 快取預熱
  4. 快取更新
  5. 快取降級

網路

  1. 網路7層架構
  2. TCP/IP原理
  3. TCP三次握手/四次揮手
  4. HTTP原理
  5. CDN 原理
  6. 分發服務系統
  7. 負載均衡系統
  8. 管理系統

日誌

  1. Slf4j
  2. Log4j
  3. LogBack
  4. Logback優點
  5. ELK

Zookeeper

  1. Zookeeper概念
  2. Zookeeper角色
  3. Zookeeper工作原理(原子廣播)
  4. Znode有四種形式的目錄節點

Kafka

  1. Kafka概念
  2. Kafka資料儲存設計
  3. partition的資料檔案(offset,MessageSize,data)
  4. 資料檔案分段segment(順序讀寫、分段命令、二分查詢)
  5. 資料檔案索引(分段索引、稀疏儲存)
  6. 生產者設計
  7. 負載均衡(partition會均衡分佈到不同broker上)
  8. 批量傳送
  9. 壓縮(GZIP或Snappy)
  10. 消費者設計

RabbitMQ

  1. RabbitMQ概念
  2. RabbitMQ架構
  3. Exchange 型別

Hbase

  1. Hbase概念
  2. 列式儲存
  3. Hbase核心概念
  4. Hbase核心架構
  5. Hbase的寫邏輯
  6. HBase vs Cassandra
  7. MongoDB
  8. MongoDB概念
  9. MongoDB特點

Cassandra

  1. Cassandra概念
  2. 資料模型
  3. Cassandra一致Hash和虛擬節點
  4. Gossip協議
  5. 資料複製
  6. 資料寫請求和協調者
  7. 資料讀請求和後臺修復
  8. 資料儲存(CommitLog、MemTable、SSTable)
  9. 二級索引(對要索引的value摘要,生成RowKey)
  10. 資料讀寫

設計模式

  1. 設計原則
  2. 工廠方法模式
  3. 抽象工廠模式
  4. 單例模式
  5. 建造者模式
  6. 原型模式
  7. 介面卡模式
  8. 裝飾器模式
  9. 代理模式
  10. 外觀模式
  11. 橋接模式
  12. 組合模式
  13. 享元模式
  14. 策略模式
  15. 模板方法模式
  16. 觀察者模式
  17. 迭代的模式
  18. 責任鏈模式
  19. 命令模式
  20. 備忘錄模式

負載均衡

  1. 四層負載均衡 vs 七層負載均衡
  2. 負載均衡演算法/策略
  3. LVS
  4. Keepalive
  5. Nginx反向代理負載均衡
  6. HAProxy

資料庫

  1. 儲存引擎
  2. 索引
  3. 資料庫三正規化
  4. 資料庫是事務
  5. 儲存過程(特定功能的SQL 語句集)
  6. 觸發器(一段能自動執行的程式)
  7. 資料庫併發策略
  8. 資料庫鎖
  9. 基於Redis分散式鎖
  10. 分割槽分表
  11. 兩階段提交協議
  12. 三階段提交協議
  13. 柔性事務
  14. CAP

一致性演算法

  1. Paxos
  2. Zab
  3. Raft
  4. NWR
  5. Gossip
  6. 一致性Hash
  7. 一致性Hash特性
  8. 一致性Hash原理

JAVA演算法

  1. 二分查詢
  2. 氣泡排序演算法
  3. 插入排序演算法
  4. 快速排序演算法
  5. 希爾排序演算法
  6. 歸併排序演算法
  7. 桶排序演算法
  8. 基數排序演算法
  9. 剪枝演算法
  10. 回溯演算法
  11. 最短路徑演算法
  12. 最大的陣列演算法
  13. 最長公共子序演算法
  14. 最小生成樹演算法

資料結構

  1. 棧(stack)
  2. 佇列(queue)
  3. 連結串列(Link)
  4. 散列表(Hash Table)
  5. 排序二叉樹
  6. 紅黑樹
  7. B-TREE
  8. 點陣圖

由於篇幅限制小編,pdf文件的詳解資料太全面,細節內容實在太多啦,所以只把部分知識點截圖出來粗略的介紹

最後

2020年在匆匆忙忙慌慌亂亂中就這麼度過了,我們迎來了新一年,網際網路的發展如此之快,技術日新月異,更新迭代成為了這個時代的代名詞,堅持下來的技術體系會越來越健壯,JVM作為如今是跳槽大廠必備的技能,如果你還沒掌握,更別提之後更新的新技術了。

更多JVM面試整理:

點選這裡免費下載“百萬級”「JVM筆記」