函數語言程式設計

Scala函數語言程式設計是scala的重中之重，老師多次強調它的重要性，spark當中的計算都是用scala函數語言程式設計來做，高階函式也是其獨特的一個特性，並且spark基於集合，這樣可以使scala發揮其對於集合計算的強大功能。首先，函式/變數同是一等公民，函式與變數同等地位，函式的定義可以單獨定義，可以不依賴於類、介面或者object，而且獨立存在，獨立使用，並且可以賦值給變數。

如：      

這裡我們定義了一個函式fun1,然後將他賦值給力一個變數，格式為

       val變數名 = 函式名+空格+_

這裡函式名後面必須要有空格，表明是函式的原型。

這樣，這個變數就是函數了，如上如，fun_v會接收一個String型別的引數，對引數作用會返回unit型別的返回值（=>表示對左邊的引數進行右邊的加工）。

匿名函式

而在大量的spark中大都用的是匿名函式(不為函式命名)，然後將其複製個一個變數。

如：

匿名函式格式：

Val 變數名 = （引數：型別） => 函式體

高階函式

高階函式是函式的引數也是函式。（因為函式的引數可以是變數，而函式又可以賦值給變數，即函式和變數地位一樣，所以函式引數也可以是函式）

如：

首先我們定義了一個函式BigData,這個函式有兩個引數，第一個引數是一個函式，函式名是func，他有一個String型別的引數並且返回值是unit空的；第二個引數是String型別的變數名為content的變數，函式體是將第二個引數作為第一個引數也就是函式func的引數，來呼叫第一個函式，整個函式返回值為unit空。這裡只要傳入的函式的格式與定義的一致就行。

又如：

Array.map()作用，他會遍歷array中每一個元素，並將每個元素作為具體的值傳給map中的作為引數的函式。

高階函式的返回值是函式（更為重要）。

首先，我們定義一個函式作為返回值的一個函式，func_Returned返回的是一個字串型別的。

我們輸入func_Returned(“Spark”),生成了一個名為Spark的函式。

首先我們定義了一個返回值為函式的函式func_Returned,然後我們將其返回值也就是一個函式賦值了變數returned，這樣就得到了一個名為returned的函式，然後我們呼叫returned函式得到了列印結果。

高階函式有個非常有用的特性是型別推斷。其可以自動推斷出引數的型別，而且對於只有一個的引數的函式，可以省略掉小括號，並且在函式的引數作用的函式體內只是用一次函式的輸入引數的值話，就可省略掉函式名，用下劃線（_）代替。

最原始的方法 ：

由於scala可以型別推斷，而且func只有一個引數，由於在spark定義是一定義了變數型別，所以我們就可以把name後的型別String去掉，

由於只有一個引數故小括號也可以去掉，

有由於只有一個引數，所以其引數可以省略，用下劃線代替

例如：

函式的閉包

函式的閉包就是當函式的引數超出其作用域時，我們還能對引數進行訪問。例如：

在這裡我們首先定義了返回值為函式的一個函式，然後我們呼叫了該函式，傳入的引數為Spark，通常當函式scala執行結束後，我們是不能在訪問該引數了，因為區域性變數Spark的作用域也就是生命週期結束了，但是當我們呼叫funcResult函式後，發現它是能訪問引數Spark的。這就是函式的閉包。scala內部是建立了一個函式的內部物件，將引數Spark作為一個成員保留在了這個物件中。

科裡化：將一個函式的兩個引數，我們可以把它轉換成兩個函式，第一個函式會接收原函式的第一個引數，第二個的函式會接收原函式的第二個引數作為輸入變數的函式。

例如：

其利用了閉包。

scala高階操作

reduceLeft：他會從（1 to 100）中最左邊的數（也就是1）開始，進行reduce操作，具體操作，先對第一元素與第二元素進行處理，並將結果作為第一個元素與第三個元素進行處理，然後在結果與第四個元素進行處理，一直到最後一個元素。

在這裡“Thecontent is :” + _是一個函式。

例如：單詞拆分

List.zip操作

------------------------------------------EOF--------------------------------------------------------------------------