YuE2, 기호 악보를 먼저 만들고 보컬·반주로 렌더링하는 음악 생성 모델 공개

로컬 오디오 모델이라 장르별 제대로 된 커버를 만들고 가사도 바꿀 수 있게 됐음. 예전 모델보다 이 점이 훨씬 쓸모 있어 보임.

데모의 "Comedy"는 영혼 없는 합성 음악처럼 들렸음. 기술적으로 인상적이어도 음악으로는 0점임.

이런 음악은 딱히 어디에 쓰는지 모르겠음. 같은 템포로 100곡을 동시에 틀기에는 괜찮을지도.

용도는 제어임. 뮤지션이 멜로디, 화성, 가사를 직접 쓰고 같은 곡의 연주와 보컬을 여러 번 렌더링해 고를 수 있음. 비전문가도 작곡안은 마음에 들지만 연주가 싫을 때 다시 만들 수 있고.

ComfyUI용 YuE2 노드도 이미 있음: https://github.com/ScryptHunter/ComfyUI-YuE2

음악 작곡을 막 시작한 시점에 이런 게 나와서 우울함. 품질이 충분히 좋아지면 사람이 들인 지식과 노동은 평가절하되고, 직접 작곡하는 사람은 취미로 사워도우를 굽는 사람 같은 존재가 될 것 같음.

창작 산업은 식당처럼 갈릴 듯함. 일상용 저가 콘텐츠는 AI가 맡고, 공연이나 바이닐처럼 경험 자체를 사는 영역은 사람과 애호가 쪽에 남을 거임.

나도 창작 직업이 어려워지는 건 슬프지만, 예술은 원래 자신과 타인에게 나누려고 하는 일이기도 함. 내 주변에는 AI 음악이나 AI 책을 일부러 찾는 사람이 아직 없음.

들어본 곡들의 보컬은 너무 명백하게 AI 같았음. 장르에 따라선 Suno가 훨씬 그럴듯하고, Suno Studio 2는 월 $24-30이면 Ableton Live 12 Suite 렌트투오운 가격대에 가까운데 소유권은 없음.

나는 음악에서 누군가가 자기 표현을 위해 만들었다는 사실을 가치 있게 봄. 끝없이 생성된 콘텐츠를 과자처럼 소비하라는 발상에는 관심이 없고 오히려 절망적임.

프롬프트로 평범한 팝을 쉽게 만들 수 있게 되면 그런 저품질 음악은 AI 생성물 속에 묻힐 거임. 결국 독특하고 좋은 작품이 더 눈에 띄고, AI를 쓰더라도 만드는 데 드는 노력은 사라지지 않을 수 있음.

이미 생성량이 너무 많아서 우리가 AI 음악과 이미지를 접하고도 모를 가능성이 큼. 알고 있는 출처만 구별할 수 있으니 생존자 편향이 생김.

AI 음악에서 걱정되는 건 취향의 파편화임. Suno로 만든 곡도 친구가 보내면 내 취향에 맞게 조금 고치고 싶어지더라. 모두가 개인 맞춤 음악만 들으면 같은 앨범이나 노래를 함께 즐기는 재미가 줄 수 있음.

AI 음악을 좋아하고 싶긴 한데, 분위기나 흥미로운 사운드 디자인을 보상하는 모델로 학습된 느낌은 아직 없음. 이 논문도 그 문제를 다루진 않음.