hadoop pig 之 开发调试命令

<!--[if !supportLists]-->1.1     <!--[endif]-->describe

描述：输出关系的结构

语法：describe alais

<!--[if !supportLists]-->1.2     <!--[endif]-->dump

描述：输出关系数据

语法：dump alais

<!--[if !supportLists]-->1.3     <!--[endif]-->explain

描述：使用explain可以输出脚本的计划

语法：EXPLAIN [–script pigscript] [–out path] [–brief] [–dot]

[–param param_name = param_value] [–param_file file_name] alias; 

Explain的调试结果：

<!--[if !supportLists]-->1.4     <!--[endif]-->illustrate

描述：使用illustrate可以深入脚本，查看pig脚本是如何运行的

语法：ILLUSTRATE {alias | -script scriptfile}; 

使用illustrate可以缩短debug周期，进行小数据测试，提高测试效率

Illustrate的调试结果

<!--[if !supportLists]-->1.5     <!--[endif]-->debugger功能实现

利用日志捕获功能，结合illustrate命令实现少量数据的预处理，这样一旦出现错误，就利用pigLogger捕获日志，并显现在页面。

此种debugger存在一个问题，就是：少量数据可能debugger正确，但是当大量数据的时候仍然会出现某些难以预知的错误。