본문 바로가기
AI & Data Analysis/AI 프로젝트

MuLife 프로젝트 계획서

by 로토마 2023. 1. 9.

프로젝트 주제

MuLife (음악 생성 및 추천 서비스)

🔍 일명 Music is My Life의 줄임말로, 음악과 관련된 과제를 바탕으로 하나의 서비스를 제공하고자 한다.

선정 이유

음악,, 삶에서 뺄 수 없는, 가장 쉽게 힐링하는 법!

만약 매일매일 그때의 단어 느낌 바탕으로 다른 독특한 개성있는 노래를 들을 수 있다면?!!

기능

text 기반, 새로운 음악 혹은 이미지 구현하기.

음악 추천 서비스

등등의 text 를 바탕으로 뻗어나갈 수 있는 여러 기능 구현.

구현 방향

Stable Diffusion 모델을 바탕으로 text - image -music의 흐름 구현하기.

  1. Stable Diffusion에 대한 공부 및 구현 계획
  2. Kaggle Dataset과의 결합
  3. 웹 서비스 제공

개발 로드맵

모델 아키텍처

로직: Text -> Spectogram(Image) -> Music 

AI 모델: riffusion(Stable Diffusion 기반) model https://huggingface.co/riffusion/riffusion-model-v1

 

riffusion/riffusion-model-v1 · Hugging Face

This model can be loaded on the Inference API on-demand.

huggingface.co

개발 Tool:  Colab

 

추천 데이터 수집: Kaggle