Spark的资源管理器有哪些选择

524
2024/3/28 17:46:00
栏目: 大数据
开发者测试专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

1. Standalone Mode:独立模式,Spark自身启动一个资源管理器,并通过内置的资源调度器来管理资源。

2. YARN Mode:使用Hadoop的YARN资源管理器来管理Spark作业的资源。

3. Mesos Mode:使用Apache Mesos资源管理器来管理Spark作业的资源。

4. Kubernetes Mode:使用Kubernetes容器编排引擎来管理Spark作业的资源。

5. Local Mode:本地模式,Spark作业在本地机器上运行,不涉及资源管理器。

6. Amazon EMR Mode:在Amazon EMR上运行Spark作业,由EMR集群托管资源管理。

7. Databricks Mode:在Databricks平台上运行Spark作业,由Databricks提供资源管理服务。

辰迅云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

推荐阅读: 基于spark的数据分析怎么实现