Spark中的RDD是指什么

462
2024/2/26 17:39:06
栏目: 大数据
开发者测试专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

RDD(Resilient Distributed Dataset)是Spark中最基本的数据抽象,它代表一个不可变、可分区、元素集合。RDD可以并行计算,分布在集群中的多个节点上。RDD可以从Hadoop文件系统、HBase、Cassandra等数据源创建,也可以通过其他RDD的转换操作生成。RDD是Spark提供的一种高容错性的数据结构,即使在节点发生故障时也能够自动恢复。

辰迅云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

推荐阅读: spark集群的基本运行流程是什么