基礎介紹

Apache Hudi(簡稱：Hudi)使得您能在hadoop相容的儲存之上儲存大量資料，同時它還提供兩種原語，使得除了經典的批處理之外，還可以在資料湖上進行流處理。這兩種原語分別是：

• Update/Delete記錄：Hudi使用細粒度的檔案/記錄級別索引來支援Update/Delete記錄，同時還提供寫操作的事務保證。查詢會處理最後一個提交的快照，並基於此輸出結果。
• 變更流：Hudi對獲取資料變更提供了一流的支援：可以從給定的時間點獲取給定表中已updated/inserted/deleted的所有記錄的增量流，並解鎖新的查詢姿勢（類別）

當下最流行資料湖框架Apache Hudi，使用HDFS、雲物件儲存儲存資料，整合Spark、Flink、Hive、Presto等分析資料，逐步在大中型公司中使用，構建湖倉一體化架構。為了讓大家更好學習使用Hudi，基於0.9.0版本，黑馬程式設計師聯合ApacheHudi推出本套課程，從資料湖概念，到整合Spark和Flink，最後整合實際需求案例，由0到1深入淺出剖析Hudi使用。

課程概述

本次課程分為三大部分：Hudi基礎入門篇、Hudi整合進階篇和Hudi實戰案例篇

• Hudi基礎入門篇：主要講解Hudi框架概述、快速使用Hudi及基本概念。
  學習收穫：瞭解什麼是資料湖，為什麼使用Hudi，及Hudi如何使用管理資料和基本概念理解。
• Hudi應用進階篇：主要講解Hudi與Spark整合及與Flink整合，資料流式儲存分析。
  學習收穫：如何在企業中使用Hudi，尤其與Spark和Flink整合，無論是流式儲存還是離線分析計算。
• Hudi實戰案例篇：主要講解Hudi在傳智教育博學谷和資料中心中實際案例
  學習收穫：如何在實際業務中使用Hudi，與Spark或Flink整合，掌握實戰操作

視訊觀看地址

https://www.bilibili.com/video/BV1sb4y1n7hK

歡迎在評論區留下你的學習收穫，或者對於課程的建議。

關於傳智教育

傳智教育是一家以就業為導向，培養科技人才的職業教育機構，2021年1月12日在深交所主機板上市，成為中國教育行業A股IPO第一股（股票程式碼003032）。自成立以來，傳智教育緊隨國家網際網路科技戰略及產業發展步伐，始終與軟體、網際網路、智慧製造等前沿技術齊頭並進，已持續向社會高科技企業輸送數十萬名科技人才，促進了當地數字化經濟的發展及新一代資訊科技行業的發展，積極響應了黨和國家“大力發展職業教育”、“新一代人工智慧發展”號召，有力配合了國家“穩就業”、“教育強國”、“資訊化發展”戰略，為當地數字化經濟發展及企業數字化轉型升級提供了強有力的人才支撐。

關於ApacheHudi

Apache Hudi是Apache頂級開源專案，Hudi是一個支援插入、更新、刪除的流式資料湖平臺，為資料湖帶來了類似資料倉庫及資料庫的功能，諸如分鐘級資料新鮮度、優化儲存、自我管理表等功能，藉助Apache Hudi可快速構建下一代企業級資料湖平臺。