簡介：

最近在寫MapReduce程式處理日誌時，需要解析JSON配置檔案，簡化Java程式和處理邏輯。但是Hadoop本身似乎沒有內建對JSON檔案的解析功能，我們不得不求助於第三方JSON工具包。這裡選擇json-simple實現我們的功能。

在Hadoop上執行Java程式的命令如下所示：

[[email protected]]$ hadoop jar my-mapreduce.jar

my-mapreduce.jar是我們進行日誌處理的MapReduce程式。現在假定我們需要在其中處理JSON格式的配置檔案，這裡忽略如何在Hadoop叢集讀取檔案的細節，只關注如何使用JSON工具包。下面是簡單的HelloWorld程式：

import org.json.simple.JSONObject;
public class HelloWorld{
    public static void main(String[] args){
        JSONObject obj=new JSONObject();
        obj.put("name","foo");
        obj.put("num",new Integer(100));
        obj.put("balance",new Double(1000.21));
        obj.put("is_vip",new Boolean(true));
        obj.put("nickname",null);
        System.out.print(obj);
    }
}
 

編譯：

[[email protected]]$ jar tf json-simple-1.1.1.jar
META-INF/MANIFEST.MF
META-INF/
META-INF/maven/
META-INF/maven/com.googlecode.json-simple/
META-INF/maven/com.googlecode.json-simple/json-simple/
META-INF/maven/com.googlecode.json-simple/json-simple/pom.properties
META-INF/maven/com.googlecode.json-simple/json-simple/pom.xml
org/
org/json/
org/json/simple/
org/json/simple/ItemList.class
org/json/simple/JSONArray.class
org/json/simple/JSONAware.class
org/json/simple/JSONObject.class
org/json/simple/JSONStreamAware.class
org/json/simple/JSONValue.class
org/json/simple/parser/
org/json/simple/parser/ContainerFactory.class
org/json/simple/parser/ContentHandler.class
org/json/simple/parser/JSONParser.class
org/json/simple/parser/ParseException.class
org/json/simple/parser/Yylex.class
org/json/simple/parser/Yytoken.class

[[email protected]]$ unzip json-simple-1.1.1.jar
[[email protected]]$ javac -classpath ./json-simple-1.1.1.jar HelloWorld.java
[[email protected]]$ jar -cfe HelloWorld.jar HelloWorld  HelloWorld.class ./org/

執行HelloWorld

[[email protected]]$ hadoop jar HelloWorld.jar
{"balance":1000.21,"num":100,"nickname":null,"is_vip":true,"name":"foo"}