1장의 일러스트를 추가 학습하는 것 만으로, 일러스트의 화풍을 모방해 고품질의 다양한 구도로 이미지를 생성할 수 있는 기법 「Advanced Prompt Tuning(APT)」이 개발되었습니다.
GitHub - 7eu7d7/DreamArtist-stable-diffusion: stable diffusion webui with advance prompt tuning
propose an advanced Prompt Tuning method (APT), can super dramatically improve theimage diversity by 7eu7d7 · Pull Request #2945 · AUTOMATIC1111/stable-diffusion-webui · GitHub
APT를 개발한 것은 7eu7d7 씨로, 그가 공개하고 있는 예는 이런 느낌입니다. 우선, 다음의 1장의 이미지를 학습 원본으로 합니다.
기존의 Stable Diffusion에 위의 이미지를 학습시켜 생성한 이미지가 아래입니다. 복수의 이미지를 생성해도 유사한 구도의 이미지 밖에 생성할 수 없고, 그 중에는 뭔지 모를 망작도 생성되고 있습니다.
그리고, APT를 이용하여 생성한 이미지가 아래입니다. 기존의 Stable Diffusion에서 생성한 이미지에 비해 압도적으로 고품이며, 구도나 포즈도 다양하게 분포된 것을 알 수 있습니다.
또한, 상세한 프롬프트를 더 추가하여 생성한 이미지가 아래입니다. 손과 다리가 자연스러운 형상으로 그려져 있으며, AI가 생성했다고는 눈치채지 못할 정도의 퀄리티를 자랑하고 있습니다.
7eu7d7씨는 APT를 오픈 소스로 개발하고 있어, APT를 Stable Diffusion의 고기능 UI 「Stable Diffusion web UI(AUTOMATIC1111판)」의 확장 기능으로 사용할 수 있도록 하기 위한 개발이 진행되고 있다고 합니다.
덧붙여 7eu7d7씨는 AI를 이용해 pixiv의 이미지를 수집하는 앱 등도 개발하고 있습니다.
'AI · 인공지능 > 이미지 생성 AI' 카테고리의 다른 글
「Stable Diffusion」으로 만들기 어려웠던 구도를 작성할 수 있는「multi-subject-render」 (0) | 2022.11.28 |
---|---|
「Stable Diffusion 2.0」 VS 「Stable Diffusion 1.4」비교 (0) | 2022.11.28 |
「Stable Diffusion 2.0」에서는 야한 이미지나 도안을 흉내낸 이미지 생성이 어려워져, 유저가 분노 (0) | 2022.11.28 |
이미지 생성 AI「NovelAI」,「Waifu Diffusion」사용시 도움되는 Danbooru의 태그 정리 (0) | 2022.11.26 |
이미지 생성 AI「Stable Diffusion」의 버전 2.0이 등장, 해상도 확대&디지털 워터마크 기능도 (0) | 2022.11.25 |
AI를 더 효율적으로 움직일 수 있는 신형 칩 "NeuRRAM" 발표, 보다 소형의 디바이스로 대규모 AI 알고리즘 실행과 정밀도를 향상 (0) | 2022.11.18 |
이미지 생성 AI "Stable Diffusion"을 Intel Arc에서 구동하는 데 성공 (0) | 2022.11.18 |
이미지 생성 AI 유저의 지식을 결집시킨 고품질 주문사전「마포백과 사전」을 사용해 보았다 (0) | 2022.11.16 |