연구
음악 창작자가 초기 아이디어를 생각하거나 창작 중간 막힐 때, 이를 같이 해결해 주고 다양한 음악적 방향 탐색에 실질적인 도움을 주는 동료가 있다면 얼마나 좋을까? KAIST 연구진이 이런 음악 창작을 돕는 동료 작가와 같은 AI 기술을 개발했다.
KAIST(총장 이광형)는 전기및전자공학부 이성주 교수 연구팀이 AI 기반 음악 창작 지원 시스템 어뮤즈(Amuse)를 개발하였다. 이 연구 결과는 4월 26일부터 5월 1일까지 일본 요코하마에서 열린 인간-컴퓨터 상호작용 분야 세계 최고 권위의 국제학술대회인 CHI(ACM Conference on Human Factors in Computing Systems)에서 전체 논문 중 상위 1%에게만 수여되는 최우수 논문상(Best Paper Award)을 수상했다고 7일 밝혔다.
< (왼쪽부터) 카네기 멜런대 크리스 도너휴 교수, 전기및전자공학부 김예원 박사과정, 이성주 교수 >
이성주 교수 연구팀이 개발한 어뮤즈(Amuse) 시스템은 텍스트, 이미지, 오디오와 같은 다양한 형식의 영감을 입력하면 이를 화성 구조(코드 진행)로 변환해 작곡을 지원해 주는 AI 기반 시스템이다.
예를 들어, 사용자가 ‘따뜻한 여름 해변의 기억’과 같은 문구나 이미지, 사운드 클립을 입력하면, 어뮤즈는 해당 영감에 어울리는 코드 진행을 자동으로 생성해 제안한다.
기존의 생성 AI와 달리, 어뮤즈는 사용자의 창작 흐름을 존중하고, AI의 제안을 유연하게 통합·수정할 수 있는 상호작용 방식을 통해 창의적 탐색을 자연스럽게 유도한다는 점에서 차별성을 갖는다.
어뮤즈 시스템의 핵심 기술은 대형 언어 모델의 이용해 사용자의 영감으로 프롬프트에 입력한 글자 따라 이에 어울리는 음악 코드를 생성하고, 실제 음악 데이터를 학습한 AI 모델이 부자연스럽거나 어색한 결과는 걸러내는(리젝션 샘플링) 과정을 거쳐 결합한 두 가지 방법을 자연스럽게 이어 재현하는 하이브리드 생성 방식이다.
< 그림. 어뮤즈(Amuse)의 시스템 구성. 사용자 입력으로부터 음악 키워드를 추출한 뒤, 대형 언어 모델 기반 코드 진행을 생성하고 리젝션 샘플링으로 정제한다(왼쪽). 오디오 입력으로부터 코드 추출도 가능하다(오른쪽). 하단은 생성된 코드의 화성 구조를 시각화한 예시이다. >
연구팀은 실제 뮤지션들을 대상으로 한 사용자 연구를 수행하여, 어뮤즈가 단순한 음악 생성 AI가 아닌, 사람과 AI가 협업하는 창작 동반자(Co-Creative AI)로서의 가능성이 높다는 평가를 받았다.
KAIST 전기 및 전자공학부 박사과정 김예원, 이성주 교수, 카네기 멜런 대학의 크리스 도너휴(Chris Donahue) 교수가 참여한 해당 논문은 학계 및 산업계 모두의 창의적 AI 시스템 설계의 가능성을 보여주었다.
※ 논문명 : Amuse: Human-AI Collaborative Songwriting with Multimodal Inspirations DOI : https://doi.org/10.1145/3706598.3713818
※ 연구 데모 영상: https://youtu.be/udilkRSnftI?si=FNXccC9EjxHOCrm1
※ 연구 홈페이지: https://nmsl.kaist.ac.kr/projects/amuse/
이성주 교수는 “ 최근 생성형 AI 기술은 저작권이 있는 콘텐츠를 그대로 모방하여 창작자의 저작권을 침해하거나, 창작자의 의도와는 무관하게 일방향으로 결과물을 생성한다는 점에서 우려를 낳고 있다. 이에 연구팀은 이러한 흐름에 문제 의식을 가지고, 창작자가 실제로 필요로 하는 것이 무엇인지에 주목하며 창작자 중심의 AI 시스템 설계에 주안점을 두었다.”라고 말했다.
이어 ”어뮤즈는 창작자의 주도권을 유지한 채, 인공지능과의 협업 가능성을 탐색하는 시도로, 향후 음악 창작 도구와 생성형 AI 시스템의 개발에 있어 보다 창작자 친화적인 방향을 제시하는 출발점이 될 것으로 기대된다.“라고 설명했다.
이 연구는 정부(과학기술정보통신부)의 재원으로 한국연구재단의 지원을 받아 수행되었다.(RS-2024-00337007)
-
인물 김갑진 교수,‘제 6회 현우 KAIST 학술상’수상
우리 대학은 물리학과 김갑진 교수가 양자역학 분야에서의 탁월한 연구 성과를 인정받아 현우문화재단(이사장 곽수일)이 후원하는‘제6회 현우 KAIST 학술상’ 수상자로 선정됐다고 12일 밝혔다. 김갑진 교수는 양자컴퓨터를 만드는 새로운 방법을 제시한 연구 성과로 이번 학술상을 받았다. 기존 양자컴퓨터는 초전도체나 이온, 빛과 같은 복잡한 방식에 주로 의존해 왔으며, 극저온 환경이 필요해 비용과 기술적 부담이 크다는 한계가 있었다. 김 교수는 이러한 한계를 넘어, 자석처럼 우리가 비교적 쉽게 접할 수 있는 자기 성질을 가진 ‘자성 물질’을 활용해 양자컴퓨터를 구현할 수 있다는 가능성을 제시했다는 점에서 주목을 받았다. 김 교수는 자석 물질 내부의 스핀 움직임(마그논)과 빛 신호를 하나의 칩에서 결합한 ‘광자–마그논 하이브리드 칩’을 개발했다. 이를 통해 자성체 내에서 여러 양자 신호가 동시에 작동하고 서로
2026-02-12 -
인물 ‘올해의 KAIST인상’에 물리학과 이경진 교수 선정
우리 대학은 개교 55주년을 맞아 ‘올해의 KAIST인상’ 수상자로 이경진 물리학과 교수를 선정했다고 12일 밝혔다. ‘올해의 KAIST인상’은 탁월한 학술 및 연구 성과를 통해 국내외에서 KAIST의 발전과 위상 제고에 기여한 구성원에게 수여하는 상으로, 2001년 제정됐다. 제25회 수상자로 선정된 이경진 물리학과 교수는 30여 년간 당연하게 여겨져 온 스핀 전달 이론의 기존 가정을 뒤집고, ‘양자 스핀펌핑(Quantum Spin Pumping)’ 현상을 세계 최초로 규명한 공로를 인정받았다. 기존 이론이 스핀을 단순한 고전적 물리량으로 취급해 온 것과 달리, 이 교수는 실제 물질 속 스핀 역시 전자처럼 본질적인 양자적 성질을 지닌다는 점에 주목했다. 이를 검증하기 위해 이 교수는 스핀의 크기가 특정 조건에서 갑자기 변하는 독특한 성질을 지닌 철-로듐(FeRh) 자성 물질을 연구 대상으로 선택했다. 이 물
2026-02-12 -
연구 화학 원리 이해한 AI 등장...신약·신소재 개발 속도 높인다
스마트폰 배터리가 얼마나 오래 가는지, 난치병을 치료할 신약이 나올 수 있을지는 모두 재료 물질을 구성하는 원자들이 얼마나 안정적으로 결합하느냐에 달려 있다. 이 수많은 원자를 어떻게 배치해야 가장 안정적인 분자가 되는지를 찾는 과정이 ‘분자 설계’의 핵심 과정인데, 그동안은 거대한 산에서 가장 낮은 골짜기를 찾는 것처럼 어려워 막대한 시간과 비용이 필요했다. 우리 대학 연구진이 인공지능으로 이 과정을 빠르고 정확하게 해결하는 신기술을 개발했다. 우리 대학은 화학과 김우연 교수 연구팀이 분자의 안정성을 좌우하는 물리 법칙을 스스로 이해해 구조를 예측하는 인공지능 모델 ‘리만 확산 모델(R-DM)’을 개발했다고 10일 밝혔다. 이 모델의 가장 큰 특징은 분자의 ‘에너지’를 직접 고려한다는 점이다. 기존 인공지능이 분자의 모양을 단순히 흉내 냈다면, R-DM은 분자 내부에서 어떤 힘이 작용하는지를 고려하여 구조를 스
2026-02-10 -
인물 이상엽 특훈교수, 호주 퀸즐랜드대 AIBN 중개연구상 수상
우리 대학은 생명화학공학과 이상엽 특훈교수(연구부총장)가 호주 브리즈번에 위치한 퀸즈랜드대학교(University of Queensland, UQ) 산하 호주생명공학나노기술연구소(Australian Institute of Bioengineering and Nanotechnology, AIBN)로부터 2월 3일(현지시간) 중개연구상인 AIBN 메달(AIBN Translational Research Award)을 수상했다고 9일 밝혔다. AIBN 메달은 생명공학 분야에서 연구 성과를 산업과 사회적 가치로 확장한 중개연구 성과를 인정해 수여되는 상으로, 흔히 ‘연구를 연구로 끝내지 않은 성과’를 평가하는 상으로 불린다. 논문 수나 인용도보다 산업 적용성, 기술 확산, 국제 협력, 사회적 영향력을 중시하며, 합성생물학·대사공학·바이오제조 분야의 세계적 연구 허브인 AIBN이 수여하는 글로벌 중개연구 분야의 상징적 상이다. 이번 시상은 퀸즈
2026-02-09 -
행사 KAIST-NYU, AI 거버넌스 서밋 뉴욕서 개최
우리 대학은 뉴욕대학교(New York University, NYU)와 공동 주최한 ‘KAIST-NYU AI 및 디지털 거버넌스 서밋(KAIST-NYU AI and Digital Governance Summit)’이 지난 2월 6일부터 7일까지(현지 시각) 미국 뉴욕 NYU에서 개최됐다고 9일 밝혔다. 이번 서밋은 인공지능(AI)이 사회 전반에 미치는 영향이 급격히 확대되는 가운데, 기술 혁신과 안전·윤리적 책임이 조화를 이루는 실질적인 AI 거버넌스 해법을 모색하기 위해 비공개 합의 회의와 공개 토론을 결합한 방식으로 기획됐다. 서밋에는 매튜 리아오, 데이비드 차머스 NYU 교수, 비키 내쉬 옥스퍼드 인터넷 연구소 소장, 빈센트 코니쳐 카네기멜론대 교수, 이아손 가브리엘 구글 딥마인드 수석과학자, 필립 골드버그 전 주한미국대사 등 학계·산업계·시민사회를 대표하는 글로벌 AI 거버넌스 리더 60명이 참여했다. 특히 둘
2026-02-09