Skip to content

Dohyeon-Kim1/Multimodal_StyleTransfer

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

70 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Introduce

image


Quick Start

How to Use

1. upload/url/path/create 를 통해 스타일을 바꾸고 싶은 이미지를 선택하기

  • upload
    image

  • url
    image

  • path
    image

  • create
    image

2. 스타일을 바꾸고 싶은 이미지에서 마스크와 스타일 이미지 쌍 생성하기

  • 이미지에서 스타일을 바꾸고 싶은 부분을 클릭하여 그 부분에 대한 마스크를 생성하고 합치기

    image
  • 합쳐진 마스크 부분에 대해서 go to select style image 버튼을 눌러 스타일 이미지를 선택하기
    (no apply style image 버튼을 누르면 합쳐진 마스크 부분에 대해서 스타일을 바꾸지 않고 원래 이미지 그대로 사용)

    image
  • 위 내용을 반복하여 자유롭게 마스크와 스타일 이미지 쌍 생성하기

  • 아직 선택되지 않은 부분에 대해서 스타일 이미지를 선택하기

    image
  • Show Pairs 탭에서 생성된 마스크와 스타일 이미지 쌍 확인하기

    image

3. 생성된 마스크와 스타일 이미지 쌍으로 Style Transfer 적용하기

image


Requirements

torch
numpy
Pillow
matplotlib
diffusers
transformers
scipy
ftfy
accelerate

Model Usage

Text-to-Image Generator

Stable Diffusion

image

Segmentation

SAM

image

Style Transfer

AdalN

image


Sample Images

Contributions

Name Kim DoHyeon Park JiWan Sohn SooKyoung
Github ID @Dohyeon-Kim1 @jiwaan @sooking87