🤖 로라의 가중치를 테스트해보자!

안녕하세요 여러분!

이번 글에서는 로라라는 인공지능 도구를 이용하여 그림을 그려보는 시간을 가져볼 거예요!

🤔 근데... 로라가 뭔가요?

LoRA (Low-Rank Adaptation)

혹시 요즘 인공지능이 엄청나게 발전하고 있는 거 아시나요?? 이전에도 AI 챗봇부터 시작해서 너튜브 알고리즘 추천, 최근 엄청나게 떠오르는 chatgpt까지... 알게 모르게 인공지능은 우리 삶에 많은 영향을 끼치고 있어요. 특히나, 2022년은 그림을 그려주는 AI가 엄청나게 발전한 한 해였죠!

로라는 최근에 인기를 얻고 있는 GPT-3와 같은 인공지능 기술을 기반으로 만들어진 도구로, 그림을 자동으로 생성해주는 기능을 제공합니다. 이미 사전에 훈련된 모델을 사용하는 것이기 때문에 보다 간편하게 그림을 그릴 수가 있죠! 또한 검색을 통해서 여러 버전의 로라를 만나볼 수 있어요. 예를 들어, 실사화에 특화되었다거나, 판타지풍에 특화되었다거나 하는 거죠!

하지만, 이러한 인공지능 도구를 사용하여 그림을 그리는 경우, 사용자가 원하는 결과를 얻기 위해서는 적절한 가중치를 조정 해야 해요.

이곳에서는 로라의 가중치를 테스트하여 적절한 가중치를 찾아 보려 합니다. 특히 모에한(!!!) 그림체 를 만들수 있는 로라의 적절한 가중치 조사를 위해, 다양한 가중치를 테스트하고 결과를 비교하였습니다 😜

로라에 대해 좀 더 자세한 내용이 알고 싶으신 분은 아래 링크를 참조해주세요. LoRA: Low-Rank Adaptation of Large Language Models이라는 제목의 논문입니다! (근데 영어라서 저는 중간에 포기했습니다...^^)

https://arxiv.org/abs/2106.09685

📱 디바이스 사양

로라는 비교적 낮은 사양의 PC에서도 사용이 가능하다고 하긴 하지만, 일정한 사양의 컴퓨터가 필요하긴 합니다. 최소 6GB 이상의 VRAM이 필요하다고 하네요. 이번 테스트에서는 아래와 같은 사양의 컴퓨터를 사용했습니다!

• CPU i7 8700

• GTX 1060 6G

• DDR4 32G

🔨인공지능 도구

에서 Stable Diffusion 이라는 인공지능 도구를 사용했어요. Stable Diffusion은 텍스트에서 이미지를 생성하는 딥러닝 모델이랍니다. stability.ai에서 만들었으며, 다른 모델에 비해 품질, 다양성 등에서 우수한 성적을 거두고 있죠😁

사용 리소스

이번 테스트에서는 다음과 같은 리소스를 사용하였습니다.

• 모델 : AniLike 2.5 v1

• 로라 : CuteScrap - 0,5v (https://civitai.com/models/5100/cutescrap-05v)

프롬프트

여기에서 프롬프트란, 그림을 그리기 위해 로라에게 전달하는 메시지를 뜻해요. "시리야~ 이것 좀 찾아줘~" 하는 것처럼, 로라가 그림을 그리기 전에 우리가 먼저 무엇을 그릴지 말해줘야 합니다.

아래와 같이 포지티브에는 포함되었으면 하는 속성을, 네거티브에는 포함되지 않았으면 하는 속성을 적어주면 된답니다.

• 포지티브 : lora:cutescrap05v_cutescrap3:0.6, 1girl, white_hair, headphones, hoodie

• 네거티브 : EasyNegative

세팅값

이번 테스트에서는 다양한 가중치를 테스트하였습니다. 다음은 각 가중치의 세팅값입니다.

📑 테스트 결과

로라 가중치 0

생성 완료! 첫 번쨰 테스트에서는 모델을 확인을 위해 로라의 가중치를 0으로 설정하여 그림을 생성하였습니다. 이번 테스트에서는 프롬프트에 넣은 단어들의 조합이 정상적으로 연출된 것을 확인할 수 있었어요.

→ 즉, 모델이 내가 요구한 프롬을 모두 적용 시킬 수 있음을 알 수 있습니다!

로라 가중치 1

두 번째도 생성완료! ...인데 프롬프트에 넣었던 사항들이 반영이 안 된 모습을 보여주네요. 헤드폰이 사라져버렸습니다.. 다시 돌려도 동일한 결과가 나오는 걸로 봐선, 로라의 가중치를 1로 설정하여 그림을 생성하면 헤드폰을 연출할 수 없음을 알 수 있습니다 😂

또한 그림에서 가중치를 적용하지 않았을 때와 많은 차이가 나는 것을 볼 수 있습니다.

자, 그럼 이제 원하는 느낌을 위해 로라의 가중치를 조절해서, 원하는 그림을 얻어내보자구요!

로라 가중치 0.8

세 번째 테스트에서는 로라의 가중치를 0.8로 설정하여 그림을 생성하였습니다. 귀엽긴 하지만... 지적할 포인트가 꽤나 많은 듯 하네요..! 특히나 아직까지는 헤드폰을 제대로 구현할 수 없나봐요 ㅠㅁㅠ

로라 가중치 0.7

네 번째 테스트에서는 로라의 가중치를 0.7로 설정하여 그림을 생성하였습니다. 드디어 헤드폰 구현이 가능해졌습니다!! 헤드폰의 생김새가 음악을 듣는 용도보다는 아이돌이 공연할 때 차는 이어마이크 같은 느낌이 나네요!

같은 세팅으로 다시 돌려본 결과, 갑자기 요구한 적 없는 토끼 귀가 생겼습니다! 귀엽긴 하지만... 사용자가 원하는 것 외의 무언가를 주는 것은 아무래도 좀 곤란하죠...🥺

로라 가중치 0.65

다섯 번째 테스트에서는 로라의 가중치를 0.65로 설정하여 그림을 생성하였습니다. 이번 테스트에서도 라이브 공연을 해야할 것 같은 마이크 달린 헤드셋이 나왔네요! 헤드폰 마이크를 굉장히 좋아하는지 같은 세팅으로 다시 돌려보아도 항상 헤드폰 마이크만 나오더라구요... 일관성 있어서 오히려 좋아... 일까요? 🤔

로라 가중치 0.6

여섯 번째 테스트에서는 로라의 가중치를 0.6로 설정하여 그림을 생성하였습니다. 이번 테스트는 무난하네요! 적당히 믹스된 느낌을 주는 그림이었습니다. 다만 위의 그림처럼 가끔 헤드폰 1+1 이벤트도 하곤 합니다 🙄

로라 가중치 0.5

일곱 번째 테스트에서는 로라의 가중치를 0.5로 설정하여 그림을 생성하였습니다. 점점 기준치 0의 모습과 흡사해지는 걸 볼 수 있어요. 입고 있는 옷이 상당히 특이해서 마음에 드는 그림입니다... ^_^

이제 보여드릴만큼 보여드린 것 같아요! 나머지 0.4~0.1 그림은 사담 없이 그림만 보여드리겠습니다!

로라 가중치 0.4

여덟 번째 테스트에서는 로라의 가중치를 0.4로 설정하여 그림을 생성하였습니다.

로라 가중치 0.3

아홉 번째 테스트에서는 로라의 가중치를 0.3으로 설정하여 그림을 생성하였습니다.

로라 가중치 0.2

열 번째 테스트에서는 로라의 가중치를 0.2로 설정하여 그림을 생성하였습니다.

로라 가중치 0.1

열한 번째 테스트에서는 로라의 가중치를 0.1로 설정하여 그림을 생성하였습니다.

💡 결론

길고 길었던 테스트가 마참내... 끝이 났습니다...!!

이제 홀로 절 기다리고 있는 침대에게로 돌아갈 수 있게 되었어요.

이번 테스트에서는 로라의 다양한 가중치를 테스트해봤습니다.

각 가중치마다 그림의 형태와 색상이 달라졌으며, 프롬프트에 따라 그림이 생성되는 과정에서도 차이를 볼 수 있었죠. 따라서, 로라를 사용하여 그림을 그리는 경우 적절한 가중치를 찾아내는 것이 중요해보입니다! 이를 위해서는 다양한 가중치를 테스트하고 결과를 비교해야만 해요. 아무래도 적절한 가중치란 사용자가 무엇을 더 중시하느냐에 따라 다르니까요!

마지막으로, 인공지능 그림은 현재 저작권 관련하여 논란이 되고 있어요. 따라서 지식 공유 나 영감을 얻는 용도 로 사용하는 것이 좋을 것 같습니다 \(￣︶￣*\))

<< 이부분 어떻게 할까요?

그럼, 다음에는 더 재밌는 글로 돌아오겠습니다 ! 😉