Idea编写Spark运行报错(spark scala版本不一致)

Idea编写Spark运行报错

  1. 报错信息
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.$conforms()Lscala/Predef$$less$colon$less;
at org.apache.spark.util.Utils$.getSystemProperties(Utils.scala:1632)
at org.apache.spark.SparkConf.loadFromSystemProperties(SparkConf.scala:65)
at org.apache.spark.SparkConf.(SparkConf.scala:60)
at org.apache.spark.SparkConf.(SparkConf.scala:55)
at Main$.main(Main.scala:26)
at Main.main(Main.scala)
  1. 原因 : spark和scala的版本不对应
  2. 解决 1: Maven库找spark对应的scala版本 , 添加到pom.xml
    Idea编写Spark运行报错(spark scala版本不一致)_第1张图片
    Idea编写Spark运行报错(spark scala版本不一致)_第2张图片
  3. 解决2 : Idea下载对应的Scala
    Idea编写Spark运行报错(spark scala版本不一致)_第3张图片Idea编写Spark运行报错(spark scala版本不一致)_第4张图片Idea编写Spark运行报错(spark scala版本不一致)_第5张图片Idea编写Spark运行报错(spark scala版本不一致)_第6张图片
  4. 注意事项 : SDK 和 pom.xml只需要添加一个 , 同时 , 需要检查Project Settings --> Libraries和Modules是否还存在就得Scala
    Idea编写Spark运行报错(spark scala版本不一致)_第7张图片
    Idea编写Spark运行报错(spark scala版本不一致)_第8张图片
  5. 重新测试

你可能感兴趣的:(spark报错)