Flink 异常 - 2.The object probably contains or references non serializable fields 无法序列化问题

一.引言

使用 Flink 自定义 Source 生成数据时，集群提交任务时显示 org.apache.log4j.Logger@72c927f1 is not serializable. The object probably contains or references non serializable fields. 报错序列化相关错误 :

二.问题解决

1.Scala Class 初始化不需要对应变量

错误代码:

val logger = Logger.getLogger(classOf[T])

正确代码:

通过 scala 延迟加载功能与 @transient 关键字忽略对该变量的序列化，前提是该变量在对应 class[T] 初始化时不需要，如果某个变量在 class[T] 初始化时调用，加了 @transient 关键字会导致该变量为 null 并报错空指针。

  @transient lazy val