On a cluster with 4 workers, a silver aggregation over a 3 GB DataFrame shows 200 shuffle tasks in the Spark UI; most tasks process only a few megabytes, and scheduling overhead dominates the stage time. The team wants fewer, larger tasks. spark.sql.shuffle.partitions is at its default value. Which statement is accurate?
Revelar gabarito
Resposta correta: spark.sql.shuffle.partitions (default 200) sets the shuffle partition count — lower it or rely on AQE coalescing
Referência: https://docs.databricks.com/aws/en/optimizations/aqe
Reconhecimento Visual & Funcional Noos
O “Abraço da Esfera”: como o Noos abraça quem mais ajuda sem usar mascote infantil.
Na neurobiologia, os oligodendrócitos abraçam o axônio com camadas de mielina para acelerar o impulso nervoso. No Noos, conforme suas explicações recebem votos e entram na Síntese Wiki, a Esfera Noos envolve seu Identicon com órbitas keplerianas e dois nós quânticos nos ombros do avatar.
Identicon geométrico 5×5 (sem foto pessoal, zero rastreio). Moldura de 1px.
Órbita tracejada única com 1 nó polar brilhante no ápice. Destaca quem enfrentou a prova real.
Duas elipses coaxiais (±35°) abraçam o avatar com dois nós laterais.
O Abraço da Esfera: O capuz da Esfera Noos envolve o topo do Identicon e apoia dois nós luminosos nos ombros do perfil.
02 — Camada de Mielina · Discussão Canônica
Onde a prova tenta te enganar — e como quem passou resolveu.
contribuíram nesta questão
Ainda não há síntese comunitária consolidada para esta questão. Abaixo está o ponto de partida oficial verificável — se você passou na prova, inaugure a dissecção das alternativas.
Gabarito Oficial (B): spark.sql.shuffle.partitions (default 200) sets the shuffle partition count — lower it or rely on AQE coalescing
Contribuir com a Questão
✦ PASSEI!Contribuições dos pares
Nenhuma contribuição pública ainda. Seja o primeiro aprovado a explicar por que as alternativas incorretas enganam — sua contribuição constrói sua Bainha Orbital.