A shuffle-heavy aggregation job fails repeatedly with `java.lang.OutOfMemoryError: Java heap space` on the executors. The Spark UI shows long garbage-collection pauses and heavy spill on the failing stage, and the cluster uses the smallest general-purpose worker type, with each node running multiple concurrent tasks. What is the most effective fix?
Revelar gabarito
Resposta correta: Bigger workers (more memory per executor) plus more shuffle partitions, so each task handles less data
Referência: https://docs.databricks.com/aws/en/compute/cluster-config-best-practices
Reconhecimento Visual & Funcional Noos
O “Abraço da Esfera”: como o Noos abraça quem mais ajuda sem usar mascote infantil.
Na neurobiologia, os oligodendrócitos abraçam o axônio com camadas de mielina para acelerar o impulso nervoso. No Noos, conforme suas explicações recebem votos e entram na Síntese Wiki, a Esfera Noos envolve seu Identicon com órbitas keplerianas e dois nós quânticos nos ombros do avatar.
Identicon geométrico 5×5 (sem foto pessoal, zero rastreio). Moldura de 1px.
Órbita tracejada única com 1 nó polar brilhante no ápice. Destaca quem enfrentou a prova real.
Duas elipses coaxiais (±35°) abraçam o avatar com dois nós laterais.
O Abraço da Esfera: O capuz da Esfera Noos envolve o topo do Identicon e apoia dois nós luminosos nos ombros do perfil.
02 — Camada de Mielina · Discussão Canônica
Onde a prova tenta te enganar — e como quem passou resolveu.
contribuíram nesta questão
Ainda não há síntese comunitária consolidada para esta questão. Abaixo está o ponto de partida oficial verificável — se você passou na prova, inaugure a dissecção das alternativas.
Gabarito Oficial (C): Bigger workers (more memory per executor) plus more shuffle partitions, so each task handles less data
Contribuir com a Questão
✦ PASSEI!Contribuições dos pares
Nenhuma contribuição pública ainda. Seja o primeiro aprovado a explicar por que as alternativas incorretas enganam — sua contribuição constrói sua Bainha Orbital.