김승준 광주과학기술원(GIST) 융합기술학제학부 교수 연구팀이 생성형 인공지능(AI)를 이용한 3D 배경의 분위기 생성 알고리즘과 이를 효과적으로 사용할 수 있는 사용자 인터페이스(UI) 시스템, 루미무드(LumiMood)를 개발했다고 27일 밝혔다.

`LumiMood’는 디자이너들이 3D 배경을 생성하며 조명과 후처리 효과에 관련된 복잡한 수치를 직접 조정해야 하는 문제를 해결하기 위해 개발됐다. 분위기(mood)는 많은 경험과 노하우를 통해 만들 수 있는 인간의 창작 요소로서 디자이너들이 단시간에 사진을 참고해 활용하기에 한계가 있다.

‘LumiMood’ 시스템은 최근 주목받는 생성형 인공지능(AI)을 접목해 3D 배경의 분위기를 조명과 후처리 효과 파라미터를 자동으로 수정해 제안한다. 연구팀은 이미지-감정 데이터셋을 이용해 특정 감정 키워드를 입력해 이에 맞는 이미지를 생성하는 AI 모델을 학습시켰다. 이 모델을 통해 디자이너는 원하는 분위기를 자연어로 설명하고 예시 이미지를 쉽게 생성할 수 있다. 

이미지가 생성되면 ‘LumiMood’는 이미지에 부합하도록 3D 배경의 조명과 후처리 효과를 자동으로 조정한다. ‘LumiMood’ 시스템은 가장 널리 사용되는 게임 엔진인 유니티(Unity)와 함께 작동할 수 있다. 사용자 인터페이스(UI)를 가지고 있어 기존 엔진에 익숙한 사용자도 쉽게 사용할 수 있도록 개발됐다.

연구진은 또 ‘LumiMood’ 연구를 통해 AI에 의한 디자인 자동화가 디자인 과정에 미치는 영향을 분석했다. 이 결과는 현재 태동하고 있는 AI 디자인 시스템들이 사용자를 고려해 어떻게 구현되어야 하는지에 대한 방향성을 제공하는 데 활용될 수 있다.

이번 연구 성과는 학술적 가치와 우수성을 인정받아 미국 컴퓨터협회(ACM)가 주관하는 인간-컴퓨터 상호작용(HCI) 분야 권위 있는 국제 학술대회 CHI(Conference on Human Factors in Computing Systems)에서 최근 13일 발표됐다.

김승준 GIST 교수는 “캐릭터 디자인, 배경 제작, 특수 효과 등 다양한 영상예술 분야에서 AI가 자동화를 가능케 하며 비용 절감과 시간 단축 효과를 보이고 있다”며 “‘LumiMood’가 실제 작업 환경에 적용되면 디자이너들이 복잡한 파라미터를 계속 변경하면서 마음에 드는 배경 분위기 결과물을 얻기 위해 들이는 수고와 시간을 줄이는 데 도움을 주며 생산성을 향상시킬 수 있을 것”이라고 전했다.

오정석 박사과정생이 함께 수행한 이번 연구는 문화체육관광 연구개발 지원사업의 지원을 받았다. ‘LumiMood’ 연구는 2024년 인간중심 물리 시스템 설계를 위한 HCI + AI 융합연구(GIST-MIT 공동연구사업)의 지원을 받아 수행됐다.