4.21 从0开始配置spark-local模式

2025/4/24 20:06:48 来源：https://blog.csdn.net/2402_87076449/article/details/147381923 浏览: 次关键词：4.21 从0开始配置spark-local模式

首先准备好安装包

然后使用命令解压

使用source /etc/profile命令让环境变量生效

输入命令

spark-submit --class org.apache.spark.examples.SparkPi --master local[2] /opt/module/spark-local/examples/jars/spark-examples_2.12-3.1.1.jar 10

即在spark运行了第一个程序

在任务还处于运行状态时，可以通过FanLing001:4040来查看。请注意，一旦任务结束，则这个界面就不可访问了。

本网仅为发布的内容提供存储空间，不对发表、转载的内容提供任何形式的保证。凡本网注明“来源：XXX网络”的作品，均转载自其它媒体，著作权归作者所有，商业转载请联系作者获得授权，非商业转载请注明出处。

我们尊重并感谢每一位作者，均已注明文章来源和作者。如因作品内容、版权或其它问题，请及时与我们联系，联系邮箱：809451989@qq.com，投稿邮箱：809451989@qq.com

相关资讯