Spark自定义函数UDF

一、自定义函数UDF

有些时候我们一些需求无法通过系统内置函数完成，我们需要将我们的实现逻辑封装成函数进行调用，在MySQL或者Hive中都可以实现，其实在Spark中也是可以的。

下面我们举个例子，我们有个DataFrame，我们想将 Fruit 这一列的值前面加个前缀 Fruit ：

首先我们先创建出对应的DataFrame：

val df: DataFrame = Seq((1, "Apple"),