标签:col == class 原因 field dna filter inpu lte
运行spark程序一直报错:
1 if (assertnotnull(input[0, org.apache.spark.sql.Row, true]).isNullAt) null else staticinvoke(class o
原因: 文件里有一行数据为垃圾数据, 这行数据的列数和列名的个数不一致.
解决办法: 过滤掉这样的数据
1 .filter(_.length == infoSchema.fieldNames.length)
标签:col == class 原因 field dna filter inpu lte
原文地址:https://www.cnblogs.com/water-green/p/9584135.html