spark udf 接受并处理 null值.

难点

spark中处理string列的null方便,但是处理int double之类的就很不方便.

你可能会说 我用 Option[Int] 不就行了么,并不行,udf不支持这个.

你会说我用Any接受,然后判断是否为null或者Int,然而还是不行. 

下面给大家一个我的解决方法:

-------------------------

//                            _ooOoo_  
//                           o8888888o  
//                           88" . "88  
//                           (| -_- |)  
//                            O\ = /O  
//                        ____/`---'\____  
//                      .   ' \\| |// `.  
//                       / \\||| : |||// \  
//                     / _||||| -:- |||||- \  
//                       | | \\\ - /// | |  
//                     | \_| ''\---/'' | |  
//                      \ .-\__ `-` ___/-. /  
//                   ___`. .' /--.--\ `. . __  
//