本文主要介紹如何使用YCSB來測試HBase，以及如何解決No FileSystem for scheme: hdfs錯誤和Error accessing HBase table錯誤。 YCSB專案地址和簡介：https://github.com/brianfrankcooper/YCSB/wiki YCSB的目標是開發一個框架和通用的workloads來評估不同的key-value和cloud提供的儲存服務。 組成：YCSB Client，一個可擴充套件的workload發生器；Core workloads，一系列的workload場景，由generator來執行。 支援測試不同的資料庫包括HBase，Cassandra，Infinispan，MongoDB等等。 通常用來benchmark多個系統，對比它們。比如可以在相同的硬體上面安裝不同的系統，然後執行相同的workloads，對比不同系統的效能。 HBase測試 1. Hadoop和HBase都部署完畢且正常啟動 比如我使用Hadoop 2.7.0和HBase 1.0.1.1 2. 配置YCSB # git clone git://github.com/brainfrankcooper/YCSB.git # cd YCSB 為YCSB的hbase client程式新增依賴項，原先只有org.apache.hbase的hbase-client依賴包，我們還需要新增org.apache.hadoop以來hadoop-common和hadoop-hdfs包，這裡缺少hbase和hadoop依賴包的話，即便編譯完成，但是在執行ycsb的時候會報出hdfs或者hbase相關的錯誤。依賴包的版本根據自己的實際安裝情況，參考hbase/lib/目錄下的jar包版本。 # vim hbase/pom.xml <modelVersion>4.0.0</modelVersion>
  <parent>
    <groupId>com.yahoo.ycsb</groupId>
    <artifactId>root</artifactId>
    <version>0.2.0-SNAPSHOT</version>
  </parent>

  <artifactId>hbase-binding</artifactId>
  <name>HBase DB Binding</name>

  <dependencies>
    <dependency>
      <groupId>org.apache.hbase</groupId>
      <artifactId>hbase-client</artifactId>
      <version>1.0.1.1</version>
    </dependency>
    <dependency>
      <groupId>org.apache.hadoop</groupId>
      <artifactId>hadoop-hdfs</artifactId>
      <version>2.5.1</version>
    </dependency>
    <dependency>
      <groupId>org.apache.hadoop</groupId>
      <artifactId>hadoop-common</artifactId>
      <version>2.5.1</version>
    </dependency>
    <dependency>
      <groupId>com.yahoo.ycsb</groupId>
      <artifactId>core</artifactId>
      <version>${project.version}</version>
    </dependency>
  </dependencies> # cd .. # mvn clean package 沒有mvn的話要下載maven： # tar zxf apache-maven-3.3.3-bin.tar.gz # mv apache-maven-3.3.3 /usr/maven # export PARH=$PATH:/usr/maven/bin 編譯完畢： 3. 建立一個HBase table HBASE_HOME/bin/hbase shell hbase(main):001:0> create 'usertable', 'family' 4. 匯入資料 在執行worklload之前，需要先匯入load資料。 需要指定一個包含HBase的配置檔案hbase-site.xml的目錄和一個table名和一個column族，使用-cp是設定java的classpath，-p是用來設定各種屬性。這裡的重點是java的CLASSPATH，參考export CLASSPATH=.:$JAVA_HOME/jre/lib:$JAVA_HOME/lib:$HBASE_HOME/conf:$HADOOP_HOME/etc/hadoop/:$HBASE_HOME/lib:$HADOOP_HOME/lib，$HBASE_HOME/lib目錄下有hadoop、hbase、log4j等jar包。 # bin/ycsb load hbase -P workloads/workloada -cp $CLASSPATH -p table=usertable -p columnfamily=family 錯誤1：java.io.IOException: No FileSystem for scheme: hdfs 在hbase-site.xml中新增：

<property><name>fs.file.impl</name><value>org.apache.hadoop.fs.LocalFileSystem</value><description>TheFileSystemfor file: uris.</description></property><property><name>fs.hdfs.impl</name><value>org.apache.hadoop.hdfs.DistributedFileSystem</value><description>TheFileSystemfor hdfs: uris.</description></property>

錯誤2：Error accessing HBase table: java.io.IOException: java.lang.reflect.InvocationTargetException 可以在這裡http://search.maven.org/#browse%7C-856937612找到依賴包，因為我們把hbase/lib/下面的這些jar包新增到了java的CLASSPATH中，所以在YCSB/hbase/pom.xml中新增的hbase和hadoop依賴包的版本就參考這裡的版本：
成功load資料 5. 執行簡單的workloads： # bin/ycsb run hbase -P workloads/workloada -cp $CLASSPATH -p table=usertable -p columnfamily=family -p clientbuffering=true > out.txt 2>&1 將輸出結果重定向到out.txt檔案中，檢視結果，UPDATE和READ總共1000次操作，都Return=0成功了。