前言

近期想了解一下 IOS 下是如何進行音視訊採集和渲染的。在學習一門新的知識時，很多人都有自己的學習方法，有的是買書學習，有的是看論壇等等不一而終。我的學習習慣是直接找一個比較好的開源專案，去分析它的程式碼。這樣即可以瞭解到新的知識，又可以知道該如何編寫正確的程式碼。自己的一點小心得哈。

言歸正轉，我們都知道對於視訊的採集，IOS提供了 AVFoundtion 庫，這個庫非常強大，可以做很多事情。但如果我們要對裡邊的每個函式都仔細的過一遍的話還是要花不少時間的，而且還可能有很多坑在等著我們。是否有這方面比較好的開源庫呢？這樣我們不就輕鬆的跳過了這些坑了嗎？於是我發現了GPUImage庫。

GPUImage在github上有16304個星，哇，能有幾百個星就已經很了不起了，它居然能有上萬的星，可見它人氣是非常旺的。下面我們來看看 GPUImage 都能幹些什麼吧。

GPUImage

GPUImage是一個BSD許可的IOS庫，它使用GPU加速對影象，實時視訊和電影做美顏，灰度等各種特效。在大規模並行運算處理影象或實時視訊時，GPU相對於CPU有顯著的效能優勢。在iPhone4上，一個簡單的影象過濾器在GPU上執行的速度比CPU的過濾器快100倍以上。然而，在GPU上執行自定義過濾器需要大量處理OpenGL ES相關的程式碼。而GPUImage幫我們解決了這些問題，它對 OpengGL ES做了非常好的封裝，我們只要呼叫簡單的幾個介面就可以做出各種特效來。

GPUImage總體結構

GPUImage使用OpenGL ES 2著色器進行影象和視訊處理速度遠遠超過基於CPU程式做的。而且它提供了簡化的Objective-C介面，隱藏了OpenGL複雜的互動。這個介面允許您將影象和視訊作為輸入源，經過過濾器，最後得到處理的影象或視訊的畫面。

影象或視訊幀可以通過GPUImageVideoCamera、GPUImageStillCamera、GPUImagePicture及GPUImageMovie類獲得。

1. GPUImageVideoCamera: 從Camera獲取的實時視訊。
2. GPUImageStillCamera: 從Camera獲取到的圖片。
3. GPUImagePicture: 靜態圖片。
4. GPUImageMovie: 電影

圖片或幀上傳到OpengGL ES後做為紋理，然後將這些紋理傳遞給處理鏈中的下一個物件。

例如，一個應用程式，從Camera獲取視訊，轉換視訊到深褐色調，然後顯示視訊到螢幕上。將建立一個鏈，看起來像下面這樣子：

GPUImageVideoCamera -> GPUImageSepiaFilter -> GPUImageView

依賴庫

GPUImage依賴下面的幾個庫：

CoreMedia: AVFoundation常用的功能。
CoreVideo: OpenGL ES 使用的視訊基礎庫。
OpenGLES: 用於影象渲染。
AVFoundation: 音視訊基礎庫。
QuartzCore: 用於渲染、組合和動畫視覺元素。

小結

本篇文章是對GPUImage的一個簡單的介紹。後面我會對GPUImage做進一步的分析，請大家繼續觀注。

謝謝！