spark map flatMap flatMapToPair mapPartitions 的区别和用途

2025-04-10 01:43:28
推荐回答(1个)
回答1:

map 是把 function 作用到每个 element,针对的是 element。 mapPartitions 是把 function 作用到每个 partition,针对的是 partition 内部的 iterator。