In the Spark UI, a stage's tasks report large Spill (Disk) values — tens of GB spilled across the stage — and the stage takes three times longer than its siblings. Executor garbage-collection time is elevated, but no single task is disproportionately larger than the others. What does the spill indicate, and what is a reasonable remedy?
Revelar gabarito
Resposta correta: Shuffle data per task exceeds executor memory, so it spills to disk — raise memory per executor or shuffle partitions
Referência: https://docs.databricks.com/aws/en/optimizations/spark-ui-guide/
Reconhecimento Visual & Funcional Noos
O “Abraço da Esfera”: como o Noos abraça quem mais ajuda sem usar mascote infantil.
Na neurobiologia, os oligodendrócitos abraçam o axônio com camadas de mielina para acelerar o impulso nervoso. No Noos, conforme suas explicações recebem votos e entram na Síntese Wiki, a Esfera Noos envolve seu Identicon com órbitas keplerianas e dois nós quânticos nos ombros do avatar.
Identicon geométrico 5×5 (sem foto pessoal, zero rastreio). Moldura de 1px.
Órbita tracejada única com 1 nó polar brilhante no ápice. Destaca quem enfrentou a prova real.
Duas elipses coaxiais (±35°) abraçam o avatar com dois nós laterais.
O Abraço da Esfera: O capuz da Esfera Noos envolve o topo do Identicon e apoia dois nós luminosos nos ombros do perfil.
02 — Camada de Mielina · Discussão Canônica
Onde a prova tenta te enganar — e como quem passou resolveu.
contribuíram nesta questão
Ainda não há síntese comunitária consolidada para esta questão. Abaixo está o ponto de partida oficial verificável — se você passou na prova, inaugure a dissecção das alternativas.
Gabarito Oficial (C): Shuffle data per task exceeds executor memory, so it spills to disk — raise memory per executor or shuffle partitions
Contribuir com a Questão
✦ PASSEI!Contribuições dos pares
Nenhuma contribuição pública ainda. Seja o primeiro aprovado a explicar por que as alternativas incorretas enganam — sua contribuição constrói sua Bainha Orbital.