Imagen on Vertex AI의 시각적 캡셔닝 및 시각적 질의 응답(VQA) 기능을 이용하여 이미지 정보 가져오기(콘솔)

Imagen on Vertex AI의 시각적 캡셔닝 및 시각적 질의 응답(VQA) 기능을 이용하여 이미지에대 텍스트 정보를 얻는 방법을 알아보세요. 이 빠른 시작에서는 Google Cloud 콘솔에서 시각적 캡셔닝 및 VQA를 사용하는 방법을 보여드립니다.

물고기 샘플 이미지
이미지 소스: Unsplash의 Worachat Sodsri(이미지를 크롭하여 Google Cloud 콘솔에 표시)

시작하기 전에

  1. Google Cloud 계정에 로그인합니다. Google Cloud를 처음 사용하는 경우 계정을 만들고 Google 제품의 실제 성능을 평가해 보세요. 신규 고객에게는 워크로드를 실행, 테스트, 배포하는 데 사용할 수 있는 $300의 무료 크레딧이 제공됩니다.

  2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  3. Google Cloud 프로젝트에 결제가 사용 설정되어 있는지 확인합니다.

  4. Vertex AI API 사용 설정

    API 사용 설정

    5.

  5. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  6. Google Cloud 프로젝트에 결제가 사용 설정되어 있는지 확인합니다.

  7. Vertex AI API 사용 설정

    API 사용 설정

    8.

샘플 이미지 가져오기

환경을 설정한 후에 샘플 이미지를 가져오고 시각적 캡셔닝과 시각적 질의 응답을 사용하여 이미지 정보를 가져올 수 있습니다.

물고기 샘플 이미지
이미지 소스: Unsplash의 Worachat Sodsri(크롭한 이미지)

샘플 이미지를 가져오려면 Cloud Storage에서 직접 이미지를 다운로드하거나 다음 명령어를 사용하여 현재 디렉터리에 저장합니다.

curl -O http://storage.googleapis.com/cloud-samples-data/generative-ai/image/vcap-vqa-quickstart_fish.jpg

시각적 캡셔닝으로 이미지 설명 생성

샘플 이미지를 가져온 후 시각적 캡셔닝 요청을 보내 이미지의 텍스트 설명을 가져올 수 있습니다.

콘솔

  1. Google Cloud 콘솔의 Vertex AI 대시보드에서 Vertex AI Studio > 비전 탭을 엽니다.

    Vertex AI Studio 탭으로 이동

  2. 하단 메뉴에서 설명을 클릭합니다.

  3. 이미지 업로드를 클릭하고 설명을 추가할 로컬 이미지를 선택합니다.

  4. 매개변수 패널에서 다음을 설정합니다.

    1. 캡션 수: 2를 선택합니다.
    2. 언어: 아직 선택하지 않은 경우 English (en)를 선택합니다.

  5. 캡션 생성을 클릭합니다.

VQA로 질문에 대한 답변 생성

마지막으로 동일한 이미지를 사용하여 이미지에 대해 질문하고 VQA 기능을 사용하여 답변을 얻을 수 있습니다.

콘솔

  1. Google Cloud 콘솔의 Vertex AI 대시보드에서 Vertex AI Studio > 비전 탭을 엽니다.

    Vertex AI Studio 탭으로 이동

  2. 하단 메뉴에서 시각적 Q&A를 클릭합니다.

  3. 이미지 업로드를 클릭하고 로컬 이미지를 선택합니다.

  4. 매개변수 패널에서 답변 수로 2를 선택합니다.

  5. 프롬프트(여기에 질문하세요) 입력란에 다음 텍스트를 입력합니다.

    What color is the left fish?

  6. 생성을 클릭합니다.

수고하셨습니다 지금까지 Imagen의 시각적 캡셔닝 및 VQA 기능을 사용하여 이미지에 대한 정보를 얻었습니다.

삭제

이 페이지에서 사용한 리소스 비용이 Google Cloud 계정에 청구되지 않도록 하려면 다음 단계를 수행합니다.

프로젝트 삭제

  1. Google Cloud 콘솔에서 리소스 관리 페이지로 이동합니다.

    리소스 관리로 이동

  2. 프로젝트 목록에서 삭제할 프로젝트를 선택하고 삭제를 클릭합니다.
  3. 대화상자에서 프로젝트 ID를 입력한 후 종료를 클릭하여 프로젝트를 삭제합니다.

다음 단계