스테이블 디퓨전으로 만드는 게임 그래픽 - 게임 캐릭터 배경 생성부터 ChatGPT 연동까지

프로그램 작성은 쉬워도, 그림 그리는 것은 어려운 당신에게
스테이블 디퓨전을 소개합니다.

* AUTOMATIC 1111판 Stable Diffusion Web UI 소개
* 실습을 위한 URL 링크 및 프롬프트 텍스트 제공

이 책은 스테이블 디퓨전을 활용하여 다양한 게임 그래픽을 만드는 방법을 안내합니다. 저사양 환경을 위한 Google colab에서의 실습과 AUTOMATIC1111판 Stable Diffusion web UI에서의 실습으로 직접 판타지 게임의 그래픽을 생성하는 과정을 담고 있습니다. 스테이블 디퓨전의 간단한 설명과 사용 방법을 다룬 다음 '캐릭터', '배경', '아이템', '아이콘', '지도' 등 게임 제작에 필요한 다양한 그래픽을 만들어 볼 수 있습니다.
뿐만 아니라 ChatGPT를 활용하여 캐릭터의 소개글, 게임 속 캐릭터 간 대화 시나리오 등을 작성하는 방법까지 상세하게 다룹니다. 기본적인 txt2img, img2img와 구체적인 Prompt 작성, 정확한 포즈를 출력할 수 있는 ControlNet, 모델을 세부 조정할 수 있는 LoRA 등을 통해 전문가의 지식 없이도 손쉽게 현실적인 결과물을 얻을 수 있습니다.

[목 차]

Part 01 환경 구축과 기초 지식
CHAPTER 1 로컬 환경 구축
1.1 이미지 생성 AI의 폭발적인 보급
1.2 사용하는 소프트웨어
1.3 소프트웨어 설치
1.4 webui-user.bat 실행
1.5 webui-user-my.bat 작성
1.6 webui-user-my.bat 실행
1.7 학습 모델 배치 방법
1.8 학습 모델 추가 확보①
1.9 학습 모델 추가 확보②
1.10 VAE 추가
1.11 업데이트 방법


CHAPTER 2 온라인 환경 구축
2.1 Web UI의 온라인 사용
2.2 Google Colab에서의 이용
2.3 런타임 유형 변경
2.4 Web UI 실행
2.5 파일 트리 확인


CHAPTER 3 기초 지식
3.1 Stable Diffusion에 대하여
3.2 Web UI 설정 및 이미지 생성
3.3 txt2img
3.4 img2img
3.5 Settings
3.6 단계 수에 따른 출력 이미지의 차이점 예시
3.7 프롬프트와 설정의 시행착오


CHAPTER 4 프롬프트 이론
4.1 학습 모델 선정
4.2 프롬프트의 규칙
4.3 프롬프트의 분류
4.4 프롬프트: 그리는 대상
4.5 프롬프트: 화질 향상
4.6 프롬프트: 화풍과 화가
4.7 프롬프트: 시점과 빛
4.8 프롬프트: 세부 조작
4.9 Negative Prompt: 저화질 제외
4.10 Negative Prompt: 서투른 것 제외
4.11 Negative Prompt: 불필요한 것 제외
4.12 이미지에서 프롬프트 얻기
4.13 프롬프트 예시
4.14 실제 게임에서의 화풍 만들기

PART 02 캐릭터 생성
CHAPTER 5 캐릭터 생성
5.1 캐릭터 이미지 생성
5.2 캐릭터 얼굴 이미지를 여러 종류 만들기
5.3 캐릭터에 포즈를 취하게 하기
5.4 캐릭터에 정보 추가
5.5 이미지를 보충하기
5.6 실제 게임 속 캐릭터 만들기
5.3 배타적 제어
5.4 돌고 도는 배타적 제어
5.5 멀티 프로세스 및 멀티 스레드
Column 커널 스레드와 사용자 스레드


CHAPTER 6 캐릭터에 포즈 취하게 하기
6.1 ControlNet
6.2 ControlNet 도입
6.3 모델 입수 및 배치
6.4 ControlNet 사용법
6.5 모델별 간략한 설명
6.6 생성 예제의 공통 설정
6.7 canny 생성 예
6.8 depth 생성 예
6.9 openpose 생성 예
6.10 scribble 생성 예
6.11 손그림으로 이미지 생성하기

CHAPTER 7 캐릭터 학습시키기
7.1 캐릭터 학습
7.2 Web UI에서 LoRA 사용
7.3 학습 준비
7.4 Google Colab에서 학습
7.5 학습 결과 확인
7.6 Control Net과의 조합


PART 03 배경 생성
CHAPTER 8 배경 생성 ①판타지
8.1 배경 이미지 생성
8.2 그림의 내용
8.3 실습
8.4 실제 게임 개발에서 배경 이미지 제작


CHAPTER 9 배경 생성 ②현대
9.1 실습

CHAPTER 10 배경 생성 ③SF
10.1 실습

CHAPTER 11 배경 생성 ④사이버펑크
11.1 실습


PART 04 게임 소재 생성
CHAPTER 12 무기와 도구 생성
12.1 무기와 도구 생성
12.2 밑그림 그리기
12.3 실습: 검 만들기
12.4 실습: 보물상자 만들기
12.5 실습: 물약 만들기
12.6 게임 내 효과 이미지 만들기


CHAPTER 13 아이콘 작성
13.1 아이콘 생성
13.2 밑그림 만들기
13.3 밑그림을 경로로 만들어 소재로 활용하기
13.4 소재를 이용해 아이콘 제작하기

CHAPTER 14 그림지도 생성
14.1 그림지도 생성
14.2 그림지도의 부품 생성하기
14.3 그림지도 배치하기
14.4 그림지도 생성하기
14.5 다시 img2img 적용하기
14.6 Inpaint로 수정하기
14.7 실제 게임 개발에서 지도 작성

CHAPTER 15 UI 부품의 텍스처 생성
15.1 UI 배경 만들기
15.2 UI 프레임 생성
15.3 9Slice용 이미지 만들기
15.4 실제 게임 개발에서 UI 부품 만들기
15.5 실제 게임 개발에서 AI를 사용하지 않은 이미지

PART 05 문장 데이터 생성
CHAPTER 16 ChatGPT 연계 ①이미지에 곁들일 문장 생성
16.1 ChatGPT란?
16.2 배경 이미지에 곁들일 문서 생성하기
16.3 캐릭터 소개글 문장 생성하기①
16.4 캐릭터 소개글 문장 생성하기②

CHAPTER 17 ChatGPT 연계 ②캐릭터 설정과 대화 생성
17.1 캐릭터 설정 생성하기①
17.2 캐릭터 설정 생성하기②
17.3 캐릭터 대화 생성하기