arrow_back

TensorFlow에서 MinDiff로 편향 완화하기

로그인 가입
Test and share your knowledge with our community!
done
Get access to over 700 hands-on labs, skill badges, and courses

TensorFlow에서 MinDiff로 편향 완화하기

Lab 1시간 30분 universal_currency_alt 크레딧 1개 show_chart 중급
Test and share your knowledge with our community!
done
Get access to over 700 hands-on labs, skill badges, and courses

개요

이 실습에서는 TensorFlow 모델 수정 라이브러리를 활용하여 MinDiff 기법으로 편향을 완화하는 방법을 학습합니다.

학습 목표

  1. 유해성 텍스트 데이터 세트를 살펴봅니다.
  2. 유해성 분류 모델을 빌드하고 학습시킵니다.
  3. 예측 결과를 표시하여 모델 편향을 확인합니다.
  4. TensorFlow 모델 수정 라이브러리를 사용하여 MinDiff 기법을 적용합니다.
  5. 기준 모델과 MinDiff 모델의 결과를 비교합니다.

작업 0. 설정 및 요건

각 실습에서는 정해진 기간 동안 새 Google Cloud 프로젝트와 리소스 집합이 무료로 제공됩니다.

  1. 시크릿 창을 사용하여 Qwiklabs에 로그인합니다.

  2. 실습 사용 가능 시간(예: 1:15:00)을 참고하여 해당 시간 내에 완료합니다.
    일시중지 기능은 없습니다. 필요한 경우 다시 시작할 수 있지만 처음부터 시작해야 합니다.

  3. 준비가 되면 실습 시작을 클릭합니다.

  4. 실습 사용자 인증 정보(사용자 이름비밀번호)를 기록해 두세요. Google Cloud Console에 로그인합니다.

  5. Google Console 열기를 클릭합니다.

  6. 다른 계정 사용을 클릭한 다음, 안내 메시지에 실습에 대한 사용자 인증 정보를 복사하여 붙여넣습니다.
    다른 사용자 인증 정보를 사용하는 경우 오류가 발생하거나 요금이 부과됩니다.

  7. 약관에 동의하고 리소스 복구 페이지를 건너뜁니다.

Notebooks API 사용 설정

  1. Google Cloud 콘솔의 탐색 메뉴에서 API 및 서비스 > 라이브러리를 클릭합니다.

  2. Notebooks API를 검색하고 Enter 키를 누릅니다.

  3. Notebooks API 결과를 클릭하고 API가 사용 설정되어 있지 않은 경우 사용 설정을 클릭합니다.

Vertex AI API 사용 설정

  1. Google Cloud 콘솔의 탐색 메뉴에서 Vertex AI > 대시보드를 클릭합니다.

  2. 모든 권장 API 사용 설정을 클릭합니다.

내 진행 상황 확인하기를 클릭하여 목표를 확인합니다. Notebooks 및 Vertex AI API 사용 설정

작업 1. Vertex AI Workbench 인스턴스 열기

  1. Google Cloud 콘솔의 탐색 메뉴에서 Vertex AI > Workbench를 클릭합니다.

  2. 사용자 관리형 노트북 페이지에서 새로 만들기를 클릭하고 TensorFlow Enterprise 2.12(Intel® MKL-DNN/MKL)를 선택합니다.

  3. 기본 영역 및 리전( )을 사용합니다. 나머지 설정은 그대로 두고 만들기를 클릭합니다. 새 VM이 시작하는 데 2~3분 정도 걸립니다.

  4. JupyterLab 열기를 클릭합니다. JupyterLab 창이 새 탭에서 열립니다.

내 진행 상황 확인하기를 클릭하여 목표를 확인합니다. Vertex AI Workbench 인스턴스 만들기

작업 2. Vertex AI Workbench 인스턴스 내에서 과정 저장소 클론하기

JupyterLab 인스턴스에서 노트북을 클론하는 방법은 다음과 같습니다.

  1. JupyterLab에서 새 터미널 창을 엽니다.

  2. 명령줄 프롬프트에서 다음 명령어를 실행합니다.

git clone https://github.com/GoogleCloudPlatform/asl-ml-immersion.git cd asl-ml-immersion export PATH=$PATH:~/.local/bin make install
  1. asl-ml-immersion 디렉터리를 더블클릭하고 디렉터리의 콘텐츠를 볼 수 있는지 검토하여 저장소가 클론되었는지 확인합니다. 이 과정의 모든 Jupyter 노트북 기반 실습 파일은 이 디렉터리에서 확인할 수 있습니다.

내 진행 상황 확인하기를 클릭하여 목표를 확인합니다. Vertex AI Platform Notebooks 인스턴스 내에서 과정 저장소 클론하기

작업 3. TensorFlow 모델 수정을 사용하여 편향 완화하기

  1. 노트북 인터페이스에서 asl-ml-immersion > notebooks(노트북) > responsible_ai > fairness(공정성) > solutions(솔루션)로 이동하여 min_diff_keras.ipynb를 엽니다.

  2. 노트북 인터페이스에서 Edit(수정) > Clear All Outputs(모든 출력 지우기)를 클릭합니다.

  3. 노트북 안내를 꼼꼼히 읽은 후 노트북을 실행합니다.

: 현재 셀을 실행하려면 셀을 클릭하고 Shift+Enter 키를 누르세요. 다른 셀 명령어는 노트북 UI의 Run(실행)에 나열되어 있습니다.

실습 종료

실습을 완료하면 실습 종료를 클릭합니다. Qwiklabs에서 사용된 리소스를 자동으로 삭제하고 계정을 지웁니다.

실습 경험을 평가할 수 있습니다. 해당하는 별표 수를 선택하고 의견을 입력한 후 제출을 클릭합니다.

별점의 의미는 다음과 같습니다.

  • 별표 1개 = 매우 불만족
  • 별표 2개 = 불만족
  • 별표 3개 = 중간
  • 별표 4개 = 만족
  • 별표 5개 = 매우 만족

의견을 제공하고 싶지 않다면 대화상자를 닫으면 됩니다.

의견이나 제안 또는 수정할 사항이 있다면 지원 탭을 사용하세요.

Copyright 2020 Google LLC All rights reserved. Google 및 Google 로고는 Google LLC의 상표입니다. 기타 모든 회사명 및 제품명은 해당 업체의 상표일 수 있습니다.