报错如下:
Exception in thread "main" java.lang.IllegalArgumentException: System memory 259522560 must be at least 471859200. Please increase heap size using the --driver-memory option or spark.driver.memory in Spark configuration.
测试了调整idea的vm参数 和spark的spark.driver.memory都没有效果,最后发现需要调整idea的程序启动参数
启动参数中添加VM Options:(具体内存使用大小根据实际情况条件即可)
-server -Xms512M -Xmx1024M -XX:PermSize=256M -XX:MaxNewSize=512M -XX:MaxPermSize=512M