TeRiTeRi

  1. 首页
  2. Scala
  3. 正文

记录一次Spark - org.apache.spark.sql.AnalysisException异常 2020.04.16

2020年4月24日 1480点热度 0人点赞 0条评论

因为使用了笛卡尔积,但是在Spark2.x中是笛卡尔积操作是默认关闭,如果需要开启,则添加如下配置

val sparkSession = SparkSession.builder().master("local[*]").appName("wula")
.config("spark.sql.crossJoin.enabled","true").getOrCreate()
标签: Scala Spark
最后更新:2020年4月24日

kamisamak

这个人很懒,什么都没留下

点赞
< 上一篇
下一篇 >

文章评论

razz evil exclaim smile redface biggrin eek confused idea lol mad twisted rolleyes wink cool arrow neutral cry mrgreen drooling persevering
取消回复

COPYRIGHT © 2023 TeRiTeRi. ALL RIGHTS RESERVED.

Theme Kratos Made By Seaton Jiang