일레븐랩스 사운드 AI, 음향 생성 AI 오픈소스 공개 및 사용 방법 안녕하세요~ 부루퉁입니다. 2일 전 구글이 공개한 사운드 생성 AI를 소개했었는데요. 일레븐랩스는 사운드, 음향 생성 AI모델의 API를 오픈소스로 공개했습니다.
직접 사용해 볼 수도 있으니 함께 차근차근 살펴봅시다~ 일레븐랩스가 공개한 사운드 AI 모델 소개 현재 별도의 네이밍은 없고 Video to Sound Effect Generator 로 칭하고 있습니다. 이 모델은 일레븐랩스의 Texts to Sounds Effects API의 기능을 보여주기 위해 만든 데모버전입니다.
일단 1초 간격으로 영상에서 4프레임을 추출하고, 프레임과 프롬프트를 GPT-4o로 전송해 사운드 효과 프롬프트에 대한 사용자 정의 텍스트를 생성합니다. 생성된 프롬프트를 사용해 사운드 AI모델의 API로 사운드 효과를 만듭니다.
정보가 너무 없어서 딱히 더 소개할게 없네요. 이제 직접 테스트해 봅시다.
일레븐랩스가 공개한 사운드 AI 모...
#
사운드ai
#
소리ai
#
음향ai
#
일래븐랩스
#
일레븐랩스
#
효과음ai
