网站首页
编程语言
数据库
系统相关
其他分享
编程问答
glom
2024-05-25
【pyspark速成专家】5_Spark之RDD编程3
目录编辑六,共享变量七,分区操作六,共享变量当spark集群在许多节点上运行一个函数时,默认情况下会把这个函数涉及到的对象在每个节点生成一个副本。但是,有时候需要在不同节点或者节点和Driver之间共享变量。Spark提供两种类型的共享变量,广播变量和累加器。广播变量是