스테이블 디퓨전 AI 사용법 & 설치 (Stable Diffusion)

스테이블 디퓨전은 Stability AI에서 오픈소스 라이선스로 배포한 텍스트를 이미지로 변환해주는 인공지능 모델로 2022년 8월 22일에 출시했습니다. 오픈소스 모델인 만큼 다양한 오픈소스 프로젝트들과 몇몇 유명한 AI 그림 사이트들이 주로 사용하고 있습니다.

이 중에서 가장 유명한 AI 그림 사이트는 NovelAI로 Stable Diffusion를 기반으로 제작되었습니다. 이번 글에서는 스테이블 디퓨전 사용법과 함께 오렌지믹스 AI 모델을 사용해 실사 풍의 애니 일러스트를 생성하는 방법을 소개합니다.

오렌지AI가 제작한 실사 일러스트
WebUI와 OrangeMixs AI 모델을 사용해 제작한 실사 애니 일러스트

스테이블 디퓨전 사용법

WebUI는 스테이블 디퓨전를 보다 쉽게 사용할 수 있게 도와주는 오픈소스 프로그램으로 다운로드 방법에 대해서는 이전 글에 정리해두었기에 링크를 클릭해 Webui를 설치한 후에 아래 내용을 진행해주시길 바랍니다.

OrangeMixs

Stable Diffusion WebUI를 설치하였다면 이번에는 학습 모델을 설치 및 적용해주어야 합니다. 학습 모델은 여러가지 있는데 이번 글에서는 애니메이션 일러스트를 생성해주는 AI 모델로 유명한 오렌지를 적용하는 방법에 대해 설명합니다.

AI 모델 설치

애니 실사 AI모델 다운로드

오렌지믹스 AI모델 다운로드 https://huggingface.co/WarriorMama777/OrangeMixs/tree/main/Models/AbyssOrangeMix2 >

오렌지믹스 엔진을 적용하기 위해서는 AbyssOrangeMix2_sfw.ckpt 파일과 .safetensors 확장자로 끝나는 파일 중 1개 이상이 필요합니다. 오렌지 엔진 다운로드 사이트로 이동한 후 다운로드 받을 모델을 클릭하고, Download 버튼을 누르면 파일 설치가 시작됩니다.

  • hard 애니+실사 느낌의 AI 모델
  • nsfw 검열이 없는 버전의 AI 모델
  • sfw 검열이 약간 있는 버전의 AI 모델

고품질과 사실적인 질감 일러스트 생성을 목표로 하는 오렌지믹스 3가 출시했습니다. 새로운 버전을 원하신다면 AbyssOrangeMix3 > 링크를 통해 다운로드 할 수 있습니다.

오렌지 모델 적용

  • AbyssOrangeMix2_sfw.ckpt 파일 필수
  • .safetensors 확장자로 끝나는 파일 1개 이상 필수

오렌지믹스 AI모델을 다운받은 후 Webui가 설치된 폴더를 열고 stable-diffusion-webui > models > Stable-diffusion 폴더에 다운받은 OrangeMixs 파일을 붙여넣기 합니다.

붙여넣기 이후에는 stable-diffusion-webui 폴더에 있는 webui-user.bat 파일을 기동해 Stable Diffusion Webui를 실행합니다.

애니실사 일러스트 생성-방법
렌지믹스2 hard AI 모델로 생성한 실사 풍의 애니 일러스트

Stable Diffusion Webui를 실행한 후 인터넷 브라우저(크롬)을 실행하고, 주소 창에 127.0.0.1:7860 를 입력해 Webui에 접속할 수 있습니다.

  • Prompt에 masterpiece, best quality를 입력
  • Negative Prompt에 lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts,signature, watermark, username, blurry, artist name를 입력
  • Sampling steps 20~60 사이 값을 설정
  • Width(가로), Height(높이) 값을 변경해 이미지 크기 조절
  • Stable Diffusion checkpoint를 클릭해 사용할 AI 모델 선택

접속한 후에는 위와 같은 기본 설정 값을 지정한 후 Prompt란에 추가로 원하는 키워드를 입력한 후 Generate(생성) 버튼을 클릭해 AI가 그린 그림을 생성할 수 있습니다.

정보킹

정보킹은 2021년부터 IT 인터넷과 게임 관련 기사를 작성하고 있는 프리랜서 작가입니다. 구독자 2만 4천의 유튜브 채널을 보유하고 있고, 게임 및 IT에 관련된 모든 내용을 다룹니다. 또한 인공지능(AI)과 관련된 기사도 작성하고 있습니다.

34건의 댓글이 있습니다.

  1. 정보킹 2024년 6월 22일

    설치 경로에 한글이 있어 그럴 수도 있습니다. 폴더에서 로컬 디스크 (C:)를 클릭하고, 이 부분에 폴더를 새로 생성해 webui를 다시 설치해보세요.

  2. 정현우 2024년 6월 22일

    venv “C:\Users\정현우\Downloads\wpqkfwha\stable-diffusion-webui\venv\Scripts\Python.exe”
    Python 3.10.7 (tags/v3.10.7:6cc6b13, Sep 5 2022, 14:08:36) [MSC v.1933 64 bit (AMD64)]
    Version: v1.9.4
    Commit hash: feee37d75f1b168768014e4634dcb156ee649c05
    Traceback (most recent call last):
    File “C:\Users\정현우\Downloads\wpqkfwha\stable-diffusion-webui\launch.py”, line 48, in
    main()
    File “C:\Users\정현우\Downloads\wpqkfwha\stable-diffusion-webui\launch.py”, line 39, in main
    prepare_environment()
    File “C:\Users\정현우\Downloads\wpqkfwha\stable-diffusion-webui\modules\launch_utils.py”, line 386, in prepare_environment
    raise RuntimeError(
    RuntimeError: Torch is not able to use GPU; add –skip-torch-cuda-test to COMMANDLINE_ARGS variable to disable this check
    계속하려면 아무 키나 누르십시오 . . .
    제가 몇시간동안 혼자 해봤는데 이런식으로 뜹니다 더이상 진짜 뭘 어떻게 해야될지를 모르겠어서요 질문드려요
    127.0.0.1:7860 저 위에거가 해결이 안되서 여기도 못들어가는건가요?? 안들어가져요 webui-user 눌렀을때 저런식으로 뜨네요..

  3. 뉴골 2024년 5월 30일

    하는는대로 잘따라하니깐 잘됩니다~. 컴퓨터 성능에 따라 읽고쓰기가 틀려집니다,
    매일 AI그림만 봐왔는데 이젠 저도 할수있네요 신기 합니다~ 정말 감사합니다.

  4. anony 2024년 5월 8일

    좋은 정보 감사합니다

  5. 정보킹 2023년 6월 25일

    중간에 오류가 발생했다면 처음부터 다시 설치하시는 것을 권장합니다.

  6. 강민우 2023년 6월 25일

    webui-user.bat 파일이 설치가 안되서, 방화벽을 끈 상태입니다.
    webui-user.bat파일을 설치하기 위해서 다시 처음부터 모두 설치해야될까요?

  7. Gameking 2023년 5월 5일

    webui-user.bat을 실행한 상태로 접속하셔야 합니다.

  8. namu 2023년 5월 4일

    127.0.0.1:7860 치고 들어 갔는데 사이트 연결 할 수 없음 이라 뜨는데 어떻게하면 되죠?

  10. 꼬로록 2023년 4월 13일

    안녕하세요. 혹시 그림 생성하면 검정색만 나오는데 해결 방안이 있을까요??

  11. Gameking 2023년 4월 11일

    백신 프로그램이 가끔 bat 확장자 파일을 차단하는 경우가 있습니다. 별도의 백신 프로그램을 사용하신다면 삭제해보세요. (혹은 윈도우 방화벽)

  12. sungsoo kim 2023년 4월 11일

    stable-diffusion-webui 폴더(webui가 설치된 폴더) 안에 webui-user.bat가 없는데 어떻게 된걸까요?

  13. Gilja 2023년 3월 30일

    stable-diffusion-webui 폴더(webui가 설치된 폴더) 안에 webui-user.bat을 기동하면 Stable Diffusion Webui(프로그램 이름)가 실행된다는 내용입니다.

  14. JJA 2023년 3월 30일

    붙여넣기 이후에는 stable-diffusion-webui 폴더에 있는 webui-user.bat 파일을 기동해 Stable Diffusion Webui를 실행합니다.

    여기에서 stable diffusion webui가 어디에 있나요? 아무리 찾아봐도 안보입니다

  15. Gameking 2023년 3월 24일

    bat 파일을 실행한 상태에서 접속하셨나요?

  16. testversion 2023년 3월 24일

    파이썬 path를 체크해도 127.0.0.1:7860에 안들어가지는데 어떻게 하죠

  17. Gameking 2023년 3월 23일

    파이썬 설치할 때 Path에 체크안하신 것 같습니다. 삭제 후 Path에 꼭 체크한 상태로 재설치해보세요.

  18. AAAA 2023년 3월 23일

    .bat 파일 실행후에
    Couldn’t launch python

    exit code: 9009

    stderr:
    Python
    Launch unsuccessful. Exiting.
    계속하려면 아무 키나 누르십시오 . . .

    라고 뜨면서 Stable Diffusion Webui로 실행이 안되는데 어떡하죠?

  19. Gameking 2023년 3월 22일

    몇몇 보안프로그램은 bat 파일 자체를 차단하는 경우가 있습니다. 방화벽을 해제하거나 백신을 비활성화해보세요.

  20. ramnbling 2023년 3월 22일

    bat 파일이 안보이는데 왜 이럴까요.. ㅠ

  21. Gameking 2023년 3월 21일

    .safetensors 확장자 파일 하나만 다운받고, 적용하시면 됩니다.

  22. abc 2023년 3월 21일

    오렌지믹스3는 ckpt파일이 없는데 어떻게 해야할까요?

  23. Gameking 2023년 3월 20일

    bat 파일 실행한 상태로 들어가셨나요?

  24. gwaemul 2023년 3월 20일

    127.0.0.1:7860 입력 후 사이트가 안들어가지는데 왜그럴까요?

  25. Basquiat 2023년 3월 17일

    아앗 귀찮게 해드려 죄송합니다. 파일 경로를 잘못설정한거였네요.
    해결했습니다!!! 즐거운하루 되십쇼!!!

  26. Gameking 2023년 3월 15일

    전날 새로운 프로그램(보안 등)을 다운로드 받았거나 윈도우 업데이트 등을 진행하면 가끔 그런 경우가 있습니다. 전날 새로운 프로그램을 다운로드 받았다면 삭제해보고, 윈도우 방화벽을 풀고 시도해보세요. 그래도 안된다면 webui와 관련된 프로그램을 모두 삭제한 후 재설치해보세요.

  27. MIN 2023년 3월 15일

    잘 실행되던게 다음 날 실행이 안된다면 어떻게 해야하나요?

  28. Gameking 2023년 3월 13일

    1. CFG Scale 값을 7~11으로 조절해보세요.
    2. Sampling steps을 28~60으로 설정해보세요.
    3. 사이트에 표시해둔 Negative Prompt를 적어보세요.
    4. 업스케일러(highres)에 체크했다면 체크해제하거나 highres anime 6b를 사용해보세요.

  29. thank 2023년 3월 13일

    안녕하세요 그림을 완성했을때 전체적으로 모래낀 사막처럼 황색으로 나오는건 어떤 이유인가요?

  30. Gameking 2023년 3월 13일

    이동한 페이지에서 hard, nsfw, sfw 중 하나를 선택해 클릭해야 다운로드 버튼이 나타납니다.

  31. dd 2023년 3월 13일

    오렌지믹스 다운로드 버튼이 없는데요? 막혔나요?

  32. 행인 2023년 3월 12일

    오렌지믹스 모델 다운로드방법이 헷갈릴수 있는데
    이동한 다운로드 사이트 huggingface.co 에서 아래 단계로 들어가서 AbyssOrangeMix2_sfw.ckpt 파일을 다운로드 받습니다.

    OrangeMixs
    /
    Models
    /
    AbyssOrangeMix2
    /
    AbyssOrangeMix2_sfw.ckpt

  33. Gameking 2023년 3월 12일

    게시글 오렌지믹스 AI모델 다운로드 옆에 있는 링크 클릭하면 다운로드 사이트로 이동됩니다. 이동한 사이트에서 4개의 파일 중 하나를 선택해 클릭 > download 버튼을 눌러 설치할 수 있습니다.

  34. PurwiHai 2023년 3월 12일

    오렌지믹스 AI모델 다운로드를 어떻게하죠?

답글 남기기