What is the difference between a Narrow Transformation and Wide Transformation
+ Narrow Transformation: In Narrow transformation, all the elements that are required to compute the records in single partition live in the single partition of parent RDD. Ex:- Select, Filter, Union,
+ Wide Transformation: Wide transformation, all the elements that are required to compute the records in the single partition may live in many partitions of parent RDD. The partition may live in many partitions of parent RDD. Involves a network shuffle and are split between stages. Ex:- GroupBy, Repartition, Sorts
Qual é a diferença entre uma transformação estreita e uma transformação ampla?
+ Transformação estreita: Na transformação estreita, todos os elementos que são necessários para calcular os registros em uma única partição vivem na única partição do RDD pai. Ex:- Select, Filter, Union, + Wide Transformation: Transformação ampla, todos os elementos que são necessários para calcular os registros em uma única partição podem viver em muitas partições do RDD pai. A partição pode viver em muitas partições do RDD pai. Envolve uma baralhada de rede e são divididos entre etapas. Ex:- GroupBy, Repartition, Sorts