| 服务 | Spark standalone master RPC |
|---|---|
| 协议 | TCP(7077;Web UI 默认 8080) |
| 用途 | Spark 集群资源调度 |
| 安全等级 | 仅大数据网段 |
提交作业的 URL 就写 spark://master:7077;常见错误是只开 8080 界面端口导致 spark-submit 卡在 connecting。
提交与检查
提交与检查
spark-submit --master spark://master:7077 app.py
ss -lntp | grep 7077Apache Spark Standalone 集群的 master 端口:Worker 与 Driver 通过它注册和调度作业(spark://host:7077)。
| 服务 | Spark standalone master RPC |
|---|---|
| 协议 | TCP(7077;Web UI 默认 8080) |
| 用途 | Spark 集群资源调度 |
| 安全等级 | 仅大数据网段 |
提交作业的 URL 就写 spark://master:7077;常见错误是只开 8080 界面端口导致 spark-submit 卡在 connecting。
spark-submit --master spark://master:7077 app.py
ss -lntp | grep 7077