1. 程式人生 > >使用cloudera MRUnit測試你的Mapreduce程式碼

使用cloudera MRUnit測試你的Mapreduce程式碼

    向大家強烈推薦cloudera的mrunit非常好用,簡直可以說太棒了,我的一個略微複雜的MR job每次測試都不夠敏捷,有時候使用mock,有時候部署到線上,除錯耗時非常巨大,最近開始使用mrunit,有了它,每次只要跑起測試,一起盡在掌控,盡情重構。它可以測試你的Mapper、Reducer以及mapreduce整個執行過程。貼個淘寶QA團隊的文章連結寫的不錯:

《Hadoop學習筆記之三:用MRUnit做單元測試》

--heipark