读书人

施用cloudera MRUnit测试你的Mapreduc

发布时间: 2012-06-27 14:20:09 作者: rapoo

使用cloudera MRUnit测试你的Mapreduce代码

? ? 向大家强烈推荐cloudera的mrunit非常好用,简直可以说太棒了,我的一个略微复杂的MR job每次测试都不够敏捷,有时候使用mock,有时候部署到线上,调试耗时非常巨大,最近开始使用mrunit,有了它,每次只要跑起测试,一起尽在掌控,尽情重构。它可以测试你的Mapper、Reducer以及mapreduce整个运行过程。贴个淘宝QA团队的文章链接写的不错:

?

?

《Hadoop学习笔记之三:用MRUnit做单元测试》

http://qa.taobao.com/?p=10550

?

--heipark

读书人网 >云计算

热点推荐