技术文章 - CS333440
在 ThingWorx Analytics 中对数据集进行评分会导致错误“com.esotericsoftware.kryo.KryoException:缓冲区溢出。可用:0,必需:1”
已修改: 20-Feb-2022
适用于
- ThingWorx Analytics 9.0
说明
- 在 Builder 中或使用PredictionThing.BatchScore服务执行预测分数会导致错误:
org.apache.spark.SparkException:Kryo 序列化失败:缓冲区溢出。可用:2,必填:8
序列化跟踪:
行数据(com.thingworx.analytics.ccc.data.utils.DataSetCsvInputStream$CsvRow)。为避免这种情况,请增加 spark.kryoserializer.buffer.max 值。
在 org.apache.spark.serializer.KryoSerializerInstance.serialize(KryoSerializer.scala:350)
在 org.apache.spark.executor.Executor$TaskRunner.run(Executor.scala:393)
在 java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
在 java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
在 java.lang.Thread.run(Thread.java:748)
引起:com.esotericsoftware.kryo.KryoException:缓冲区溢出。可用:2,必填:8
序列化跟踪:
行数据(com.thingworx.analytics.ccc.data.utils.DataSetCsvInputStream$CsvRow)。为避免这种情况,请增加 spark.kryoserializer.buffer.max 值。
在 org.apache.spark.serializer.KryoSerializerInstance.serialize(KryoSerializer.scala:350)
在 org.apache.spark.executor.Executor$TaskRunner.run(Executor.scala:393)
在 java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
在 java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
在 java.lang.Thread.run(Thread.java:748)
引起:com.esotericsoftware.kryo.KryoException:缓冲区溢出。可用:2,必填:8
- 当对大量数据进行评分时会发生这种情况
这是文章 333440 的 PDF 版本,可能已过期。最新版本 CS333440