SparkSQL奇葩错误 UTF8String类 noSerializableException - 代码天地

SparkSQL奇葩错误 UTF8String类 noSerializableException

其他 2019-01-11 11:47:02 阅读次数: 0

用SparkSQL读取Hive中的数据后，将DataFrame转化成JavaRDD，想要foreach打印里面的内容，或者collect一下，都会报错：

在这里插入图片描述
说是某各类没有序列化，但是我找来找去没有在闭包内部使用外部类，连collect一下也报错。

上网查说是版本的bug，这是Spark2.2.0的bug，后面2.2.1以后就修复了，我就换了2.2.1的版本，就直接可以跑了

猜你喜欢

转载自blog.csdn.net/weixin_41227335/article/details/85321470

SparkSQL奇葩错误 UTF8String类 noSerializableException

奇葩错误

hibernate 在 eclipse 中的奇葩错误（更新中）--逆向生成实体类和映射文件

pytorch奇葩错误

UnicodeDecodeError: 'utf-8'错误

sparksql table not found错误

CS+ for CA 奇葩错误

sparksql错误报No such file or director

SparkSQL学习- InsertIntoHiveTable类

mysql的一个奇葩错误

Editor placeholder in source file Xcode的奇葩错误

web开发中遇到的奇葩错误

响应报文utf-8为什么设置了charset=utf-8，还编码错误？

字符集编码插入Mysql数据库是，字符utf8编码超过3位时的错误以及解决，Incorrect string value: '\xF0\xA1\xBF\xA8\

MySQL invalid utf8 character string

iOS Swift String UTF-8 编码

Pip安装pyinstaller出现utf-8解码错误

解决rspec 生成报告时报utf-8错误的方法

python编码错误asc转为utf8

ArgumentError：invalid byte sequence in UTF-8 错误原因及分析

UTF8编码字节流错误小析

python 读入csv 出现utf-8 错误

Python错误：SyntaxError: Non-UTF-8 code starting with

python中出现utf-8编码格式错误

sparksql

CCS8的各种奇葩报错

Mysql编码引起的 Illegal mix of collations (utf8_unicode_ci,IMPLICIT) and (utf8_general_ci,IMPLICIT)错误

基于ios系统的ionic一些奇葩错误

第8章 SparkSQL愿景

8-spark学习笔记-sparksql

今日推荐

NetBSD 禁止提交由 AI 生成的代码

Apache Doris 2.0.10 版本正式发布！

开源日报 | 大模型开战；大模型独角兽被曝卖身；周鸿祎建议谷歌开源所有产品；最大开源AI社区提供1000万美元共享GPU

开源日报 | Chrome内置Gemini的意义不在于Gemini；中国AI追随之路的五大误区；ECharts创始人“下海”养鱼；谷歌I/O开发者大会什么都有，只是没有惊喜

微软回应中国区AI团队“打包赴美”传闻

基于大语言模型的开源知识库问答系统 MaxKB GitHub Star 数量突破 5,000 个！

周排行

static方法和非static方法的区别（java）

如何查找计算机专业paper

java.lang.ClassFormatError: Incompatible magic value 0 in class file com/sitecha

跳跃游戏II

stm32_之【建立工程】

TeaWeb v0.0.9 发布，统计底层优化、主机监控功能改进

事件分发 -----控制字体大小

JavaScript DOM练习（动态表格添加） December 25，2019

JSF Scope & CDI

实现从零搭建一个登录注册页面（附源代码）

每日归档

更多

2024-05-19(0)

2024-05-18(4)

2024-05-17(34)

2024-05-16(6)

2024-05-15(24)

2024-05-14(0)

2024-05-13(18)

2024-05-12(0)

2024-05-11(38)

2024-05-10(38)