Noos
PT EN
RAN-DBDEA-00273
Ranvier · DBDEA

Prova DBDEA Tópicos: troubleshooting Dificuldade: hard A questão está em en.

A nightly aggregation shuffles about 6 GB of data. The plan submitted to the cluster ended with 200 post-shuffle partitions, yet the Spark UI shows the final stage ran only 12 tasks, each processing a reasonably sized slice — and nobody edited the query. Which mechanism changed the task count while the query was running?

Alternativas (Modo Leitura) Clique para filtrar a discussão →
  1. A. The driver, which locks the final task count when the plan is compiled and submitted for execution
  2. B. Adaptive Query Execution, which coalesces small post-shuffle partitions into fewer, larger tasks using runtime statistics
  3. C. A manual repartition transformation, which engineers are required to add to every job before Spark can merge its small shuffle partitions
  4. D. Photon, whose vectorized engine merges small partitions while it executes the stage's scans and aggregations
Revelar gabarito

Resposta correta: Adaptive Query Execution, which coalesces small post-shuffle partitions into fewer, larger tasks using runtime statistics

Referência: https://docs.databricks.com/aws/en/optimizations/aqe

02 — Camada de Mielina · Discussão Canônica

Onde a prova tenta te enganar — e como quem passou resolveu.

0 Aprovados

contribuíram nesta questão

Matriz de Dissecção de Alternativas Clique numa alternativa para filtrar ou inaugurar a dissecção.
✦ Síntese Consolidada (Wiki) rev. #1 (baseline) · CC BY-SA 4.0
Inaugurar síntese desta questão →

Ainda não há síntese comunitária consolidada para esta questão. Abaixo está o ponto de partida oficial verificável — se você passou na prova, inaugure a dissecção das alternativas.

Gabarito Oficial (B): Adaptive Query Execution, which coalesces small post-shuffle partitions into fewer, larger tasks using runtime statistics

Ranvier · DBDEA

Contribuir com a Questão

Sua contribuição constrói sua Bainha Orbital

Contribuições dos pares

Nenhuma contribuição pública ainda. Seja o primeiro aprovado a explicar por que as alternativas incorretas enganam — sua contribuição constrói sua Bainha Orbital.