近期工作中遇到了一个这个问题,现记录一下。

问题如下:

产生这个问题的原因就是项目中的json解析版本与Spark中的冲突了,导致运行时Spark读自己带的版本所以产生了这个问题。
将项目中的包与Spark中的改成一致的就好啦,或是直接用Spark中的。
这问题只在Spark2.4.x版本中遇到过

Logo

腾讯云面向开发者汇聚海量精品云计算使用和开发经验,营造开放的云计算技术生态圈。

更多推荐