Visualiza registros de tu clúster de Ray en Vertex AI

Cuando realizas tareas con tu clúster de Ray en Vertex AI, los registros de seguimiento se generan y almacenan de forma automática en Cloud Logging y en Ray de código abierto. En esta sección, se describe cómo acceder a los registros generados a través de la consola de Google Cloud.

Antes de comenzar, asegúrate de leer la descripción general de Ray en Vertex AI y configurar todas las herramientas de requisitos previos que necesitas.

Consola de Cloud Logging

  1. En el panel de navegación de la consola de Google Cloud, selecciona Logging y, luego, Explorador de registros:

    Ir al Explorador de registros

  2. Selecciona una organización, una carpeta o un proyecto existente de Google Cloud.

  3. Para mostrar todos los registros de Ray, ingresa la siguiente consulta en el campo del editor de consultas y, luego, haz clic en Ejecutar consulta:

    resource.labels.task_name="ray-cluster-logs"

  4. Para limitar los registros a un clúster de Ray específico, agrega la siguiente línea a la consulta y haz clic en Ejecutar consulta:

    labels."ml.googleapis.com/ray_cluster_id"=CLUSTER_NAME

    donde, CLUSTER_NAME es el nombre del clúster de Ray.

  5. Para limitar aún más los registros a un archivo de registro específico, como raylet.out, haz clic en el nombre del registro en Campos de registro -> Nombre del registro.

  6. Puedes agrupar entradas de registro similares:

    1. En los Resultados de la búsqueda, haz clic en una entrada de registro para expandir el registro.

    2. En jsonPayload, haz clic en el valor tailed_path. Aparecerá un menú desplegable.

    3. Haz clic en Mostrar entradas coincidentes.

Shell de nodo principal

Puedes ver los archivos de registro de Ray de código abierto a través del shell interactivo en el nodo principal de Ray:

  1. En la consola de Google Cloud, ve a la página Ray en Vertex AI.

    Ir a la página de Ray en Vertex AI

  2. En la fila del clúster que creaste, haz clic en el menú más acciones.

  3. Selecciona Shell interactiva de nodos principales. La shell se abre en otra pestaña.

  4. Navega al directorio /var/log-storage/:

    cd /var/log-storage/

  5. Accede a los registros de Ray en el directorio session_DATE/logs/, en el que DATE es la fecha en que creaste el clúster de Ray en Vertex AI.

¿Qué sigue?