Spark 调优(三):Linux 调优

关闭 SWAP

SWAP,又称为交换内存。Linux 操作系统使用 SWAP 作为系统的额外内存,当内存使用量超过了物理内存,就会使用 SWAP 确保系统不会崩溃。SWAP 是在磁盘上的虚拟内存,读写速度较物理内存更慢。

由于硬件成本的不断降低,部署 Spark 的机器通常分配了大量的内存资源。所以,可以关闭 SWAP,执行命令:

sudo swapoff -a