Partitioned Compute in Dataflow Gen2 is a feature designed to process multiple files at the same time, potentially slashing your refresh durations. But how do you actually get it working with your data? In this post, I break down the exact setup process for ADLS Gen2, explain how the engine streams requests under the hood, and put it to the test with a massive benchmark. Read on to learn how to configure your partition keys and see the raw numbers for yourself.

Partitioned Compute v Dataflow Gen2 umí zpracovávat více souborů paralelně a teoreticky tak výrazně zkrátit dobu refreshe. Jak to ale reálně rozchodit s tvými daty? V tomhle článku ti ukážu přesný postup nastavení pro ADLS Gen2, vysvětlím, jak tenhle engine funguje pod pokličkou, a rovnou ho podrobím zátěžovému testu. Přečti si, jak správně nastavit partition key a zjisti z mého benchmarku, jak si tahle novinka vede v praxi.