バッチ処理

シャッフリング

分散処理におけるグループ化や集計フェーズでクラスタノード間でデータを再分配するコストの高い操作。シャッフリングはMapReduceやSparkジョブにおける主なボトルネックとなることが多い。

← 戻る