使用cloudera MRUnit测试你的Mapreduce代码

    向大家强烈推荐cloudera的mrunit非常好用,简直可以说太棒了,我的一个略微复杂的MR job每次测试都不够敏捷,有时候使用mock,有时候部署到线上,调试耗时非常巨大,最近开始使用mrunit,有了它,每次只要跑起测试,一起尽在掌控,尽情重构。它可以测试你的Mapper、Reducer以及mapreduce整个运行过程。贴个淘宝QA团队的文章链接写的不错:

《Hadoop学习笔记之三:用MRUnit做单元测试》

http://qa.taobao.com/?p=10550

--heipark

猜你喜欢

转载自heipark.iteye.com/blog/1446688