Ao executar tarefas com o cluster do Ray na Vertex AI, os registros de rastreamento são gerados e armazenados automaticamente no Cloud Logging e no Ray de código aberto. Nesta seção, descrevemos como acessar os registros gerados pelo console do Google Cloud.
Antes de começar, leia a Visão geral do Ray na Vertex AI e configure todas as ferramentas necessárias como pré-requisito.Console do Cloud Logging
-
No painel de navegação do console do Google Cloud, selecione Logging e clique em Análise de registros:
Selecione um projeto do Google Cloud, uma pasta ou uma organização.
Para exibir todos os registros do Ray, insira a consulta a seguir no campo query-editor e clique em Executar consulta:
resource.labels.task_name="ray-cluster-logs"
Para reduzir os registros a um cluster do Ray específico, adicione a seguinte linha à consulta e clique em Executar consulta:
labels."ml.googleapis.com/ray_cluster_id"=CLUSTER_NAME
em que CLUSTER_NAME é o nome do seu cluster do Ray.
Para reduzir ainda mais os registros a um arquivo de registro específico, como
raylet.out
, clique no nome do registro em Campos de registro -> Nome do registro.É possível agrupar entradas de registro semelhantes:
Em Resultados da consulta, clique em uma entrada de registro para expandi-la.
Em
jsonPayload
, clique no valortailed_path
. Será exibido um menu suspenso.Clique em Mostrar entradas correspondentes.
Shell do nó principal
É possível ver os arquivos de registro do Ray de código aberto pelo shell interativo no nó principal do Ray:
No console do Google Cloud, acesse a página do Ray na Vertex AI.
Na linha do cluster que você criou, clique no menu
mais ações.Selecione Shell interativo do nó principal. O shell abre em outra guia.
Acesse o diretório
/var/log-storage/
:cd /var/log-storage/
Acesse os registros do Ray no diretório
session_DATE/logs/
, em que DATE é a data em que você criou o cluster do Ray na Vertex AI.