spark的安装和使用

    xiaoxiao2023-11-25  163

    a.先到官网下载安装包 注意第二项要选择和自己hadoop版本相匹配的spark版本,然后在第4项点击下载。若无图形界面,可用windows系统下载完成后传送到centos中。 b.安装spark 保存后,Spark 就可以启动了。

    b.spark的简单使用 在 ./examples/src/main 目录下有一些 Spark 的示例程序,有 Scala、Java、Python、R 等语言的版本。我们可以先运行一个示例程序 SparkPi(即计算 π 的近似值),执行如下命令: 如果是Python 版本的 SparkPi, 则需要通过 spark-su如果是Python 版本的 SparkPi, 则需要通过 spark-submit 运行:bmit 运行:

    最新回复(0)