Pular para o conteúdo principal

Questão de Não definido — Geral — FGV 2026

Não definidoGeral
Código
fg132602
Banca
FGV
Órgão
TCE-SC
Ano
2026
Nível
Superior
Cargo
Auditor Fiscal de Controle Externo - Ciências da Computação, Sistemas de Informação, Engenharia de Computação e Engenharia de Software
Um pipeline de dados do TCE-SC processa bilhões de registros de notas fiscais usando Spark SQL. O Auditor nota um problema de desbalanceamento de dados no qual um único executor demora muito mais que os outros para completar uma operação de Join, pois uma chave específica possui muito mais registros que as demais.A seguinte técnica avançada de otimização no Spark 3.x permite ao motor de execução identificar esse desequilíbrio em tempo de execução e dividir a partição sobrecarregada em subtarefas menores:
  1. ABroadcast Hash Join.
  2. BAdaptive Query Execution com Skew Join Optimization.
  3. CPredicate Pushdown.
  4. DBucketing com 1024 partições fixas.
  5. ECache In-Memory em nível de cluster.
Revelar gabarito e comentário

GabaritoB — Adaptive Query Execution com Skew Join Optimization.

Link permanente: /questoes/fg132602