1.測試目的

針對相同的硬體環境和計算任務，對比Oracle和集算器的效能差異，為客戶選型提供參考。

2.硬體環境

裝置數量：1臺

CPU：16核 Intel(R) Xeon(R) CPU E5620  @ 2.40GHz

記憶體：20G

3.軟體環境

作業系統：CentOS6.4 64位

JDK：1.6 64位

4.測試物件

Oracle：11g（64位），本文中簡稱為Oracle。

集算器：v3.1。集算器按照資料儲存方式的不同分為“文字檔案、行式二進位制檔案（不分段檔案）、行式二進位制（分段檔案）和列式二進位制檔案”四種不同測試物件，本文中簡稱為集算器文字、集算器行存、集算器行存分段、集算器列存。

5.方案說明

對比的相同點：

1、Oracle和集算器運行於相同的硬體和作業系統之上，執行任務的時候沒有其他負載的干擾。

2、執行的任務輸入資料、演算法和輸出資料均相同。

3、對外提供呼叫介面相同，都是JDBC呼叫，返回結果集。

對比的不同點：

1、儲存方式不同，Oracle是內部儲存資料，對外表現為資料表；集算器是利用作業系統儲存資料，表現為作業系統本地檔案，具體的又有文字檔案、行式二進位制檔案和列式二進位制檔案三種。

2、演算法實現的方式不同，Oracle是以sql的方式來實現演算法的；集算器是以網格程式指令碼來實現演算法。

6.分組彙總

6.1.演算法說明

輸入：採用一個寬表A和一個窄表

計算：針對表每張表中的1到4個字串型別的欄位（g1、g2、g3、g4）做分組，對1到4個數值型的欄位（n1、n2、n3、n4）做彙總sum計算。

輸出：由g1、g2、g3、g4和sum(n1)、sum(n2)、sum(n3)、sum(n4)組成的結果表C。

說明：A表字段多，所以採用集算器列存二進位制檔案的方式是有意義的。B表字段較少，因此不採用集算器二進位制列存的方式，僅對比Oracle、集算器文字和集算器行存（二進位制）三個測試物件。

6.2.Oracle sql示例

A表查詢

Select g1,g2,g3,g4,sum(n1),sum(n2),sum(n3),sum(n4) from A group by g1,g2,g3,g4

B表查詢sql（4個分組欄位4個彙總欄位）

Select g1,g2,g3,g4,sum(n1),sum(n2),sum(n3),sum(n4) from B group by g1,g2,g3,g4

6.3.集算器 指令碼示例

主程式（1個分組欄位一個彙總欄位部分）

子程式groupsub.dfx

子程式groupsubb.dfx

子程式groupsubc.dfx

 
6.4.  測試結果及分析

6.4.1A表（寬表）並行數為1（無並行）

統計計算所用時間，單位：秒。

分析：

1、由於列式儲存對效能提高明顯，所以集算器列存計算時間最短效能最高；Oracle因為是行式儲存所以效能次之；因為是單程序沒有併發的情況，所以集算器行存和集算器文字效能較低，兩者之中集算器行存是二進位制所以比集算器文字要快。

2、在每個測試物件內部對比，一般來說演算法越複雜計算時間越長，因此1分組1彙總計算最快，4分組4彙總最慢。

6.4.2.   A表（寬表）並行數為4

統計計算所用時間，單位：秒。

結果分析：列式儲存對效能提高的作用較大。

6.4.3 B表（窄表）並行數為1（無並行）

統計計算所用時間，單位：秒。

6.4.4 B表（窄表）並行數為4

統計計算所用時間，單位：秒。

6.4.5 B表（窄表）並行數為8

統計計算所用時間，單位：秒。

6.5.  進一步的對比分析

6.5.1併發數量對A表（寬表）計算效能的影響

這裡以A表（寬表）的4分組4彙總的測試資料來橫向對比一下，不同併發數量對計算效能的影響。

分析：平行計算對集算器文字效能提高明顯，其他測試物件不明顯。原因在於集算器文字是分段多遊標讀取資料的，集算器行存和列存都是單個二進位制檔案，無法多遊標分段讀取。如果事先將檔案分段儲存成多個，就可以用分段多遊標讀取可以提升速度。Oracle並行速度提高不明顯的原因應該是內部機制造成。

6.5.2 併發數量對B表（窄表）計算效能的影響

這裡以B表（窄表）的4分組4彙總的測試資料來橫向對比一下，不同併發數量對計算效能的影響。

結果分析：平行計算對集算器行存分段和集算器文字效能提高明顯，其他測試物件不明顯。原因在於集算器行存分段和集算器文字是分段多遊標讀取資料的，集算器行存是單個二進位制檔案，無法多遊標分段讀取。集算器行存分段是事先將檔案分段儲存成多個，就可以用分段多遊標讀取可以提升速度。Oracle並行速度提高不明顯的原因應該是內部機制造成。