Does my data need to fit in memory to use Spark?
No. Spark's operators spill data to disk if it does not fit in memory, allowing it to run well on any sized data. Likewise, cached datasets that do not fit in memory are either spilled to disk or recomputed on the fly when needed, as determined by the RDD's storage level.
Os meus dados precisam de caber na memória para usar o Spark?
Não. Os operadores do Spark derramam dados para o disco se não cabem na memória, permitindo que ele funcione bem em qualquer tamanho de dados. Da mesma forma, os conjuntos de dados em cache que não cabem na memória são derramados para o disco ou recomputados no momento em que necessário, conforme determinado pelo nível de armazenamento do RDD.