Monitore sua definição de trabalho do Apache Spark

Usando o monitoramento em linha do item de definição de trabalho do Spark, você pode acompanhar o seguinte:

• Monitore o progresso e o status de uma definição de trabalho do Spark em execução.
• Exiba o status e a duração das execuções anteriores de definição de trabalho do Spark.

Você pode obter essas informações no menu contextual Execuções recentes no espaço de trabalho ou navegando pelas atividades de definição de trabalho do Spark no painel Monitor.

Monitorização em tempo real de definição de trabalho Spark

O recurso de monitorização integrada da definição de tarefa do Spark permite visualizar a submissão da definição de tarefa do Spark e o estado de execução em tempo real. Você também pode visualizar as execuções e configurações anteriores da definição de trabalho do Spark e navegar até a página de detalhes do aplicativo Spark para ver mais detalhes.

Vista do item de definição de trabalho Spark no espaço de trabalho

Você pode acessar as execuções de trabalho associadas a itens específicos de definição de tarefa do Spark usando o menu contextual Execuções recentes na página inicial do espaço de trabalho.

A definição de trabalho do Spark é executada no painel Monitor

Para exibir todos os aplicativos do Spark relacionados a uma definição de trabalho do Spark, vá para o painel Monitor. Classifique ou filtre a coluna Tipo de Item para exibir todas as atividades de execução associadas às definições de trabalho do Spark.

Conteúdo relacionado

A próxima etapa após visualizar os detalhes de uma aplicação Apache Spark é visualizar o progresso da tarefa Spark abaixo da célula do Notebook. Pode consultar:

• Monitoramento de detalhes do aplicativo Spark