All about partitions in spark

Ғылым және технология

All about partitions in spark
- Input Partitions
- Output partitions
- Shuffle partitions

Пікірлер: 7

  • 7 ай бұрын

    Thats great work!! , Thank you

  • @sandippatel6999
    @sandippatel6999 Жыл бұрын

    Good Explanation 👍

  • @narayanankm4298
    @narayanankm4298 Жыл бұрын

    good session. Can also add tutorial for bucketing ?

  • @9292suresh
    @9292suresh Жыл бұрын

    Each task acts on each core and each partition is assigned to a core , not executors . Is this correct ?

  • @TotuBabyBird
    @TotuBabyBird Жыл бұрын

    😍

  • @evreddy461
    @evreddy461 Жыл бұрын

    Can we avoid shuffle partition when input partition is opted for wide transformation like join operation 8:52

  • @BishalKarki-pe8hs
    @BishalKarki-pe8hsАй бұрын

    this is not excatly asnwer

Келесі