<aside> 🔖 목차

</aside>

팀 및 팀원 소개

WE, FUSION

• 서로 다른 조에서 multimodal에 관심 있는 우리들이 모여서, (FUSION)
• 각자 아는 지식들을 공유하고 융합하여, (FUSION)
• diffusion을 활용해 text-to-emoji 문제를 풀어보자! (FUSION)

⇒ WE, FUSION !!

팀원 소개

김지수

diffusion modeling

Model serving

데이터 제작 및 가공

김현수

diffusion modeling

diffusion 이론 조사

프로젝트 기획 및 발표

지상수

diffusion modeling

Frontend

Code Review

최석훈

diffusion modeling

Model serving

데이터 제작 및 가공

최혜원

diffusion modeling

Multi Encoder(AltCLIP)

프로젝트 기획 및 발표

프로젝트 소개: Text-to-Emoji

Text-to-Emoji는 프로젝트명과 같이 사용자의 Text를 입력받아서 사용자의 Text에 맞는 Emoji를 생성하는 프로젝트입니다.

멀티모달 태스크 중 하나인 Text-to-Image로 분류할 수 있으며, 해당 태스크를 잘 해결한 모델로는 Stable Diffusion, DALLE-2등의 모델들이 있습니다.

Stable diffusion모델을 통해 생성된 이미지. 출처:stable diffusion 공식 홈페이지

“An astronaut riding a horse in a photorealistic style” 라는 텍스트를 입력으로 받아 생성된 이미지. -DALLE-2- 출처:DALLE-2공식 홈페이지

문제 정의

배경 지식

프로젝트 구조

문제 해결 과정

개선사항