기사 메일전송
서울대, 글자·영상·소리 동시에 처리하는 통합 AI ‘Dynin-Omni’ 개발
  • 김미경 기자
  • 등록 2026-04-07 09:09:30

기사수정
  • 하나의 모델로 이해·생성 통합…옴니모달 AI 세계 최초 구현
  • 디퓨전 방식 도입해 생성 속도 최대 5배 향상
  • 로봇·스마트기기 적용 기대…피지컬 AI 시대 앞당겨

서울대학교 공과대학 AIDAS 연구실 도재영 교수 연구팀은 글자·이미지·영상·소리를 하나의 모델이 동시에 이해하고 생성하는 차세대 통합 인공지능 ‘Dynin-Omni’를 개발했다고 밝혔다.

 

왼쪽 상단에서 시계방향으로 서울대학교 전기정보공학부 · 협동과정 인공지능전공 도재영 교수, 김재익 연구원, 김우진 연구원, 홍지환 연구원, 이예준 연구원, 현시은 연구원, 임민택 연구원, 한윤석 연구원, 김도근 연구원, 이호은 연구원, 김형근 연구원, 김진혁 연구원

이번 연구는 기존 AI가 정보 이해와 생성 기능을 분리하거나 여러 모델을 결합해 사용하던 한계를 극복한 것이 핵심이다. 연구팀은 모든 감각 정보를 하나의 구조로 통합해 동시에 처리하는 ‘완전 통합형’ AI 모델을 구현했다. 이를 통해 글자부터 영상까지 다양한 데이터를 단일 모델이 유기적으로 이해하고 생성할 수 있게 됐다.

 

Dynin-Omni는 기존 생성형 AI와 구조적으로 차별화된다. 기존 모델이 단어를 순차적으로 생성하는 방식이었다면, 이번 모델은 결과물 전체를 한 번에 구성한 뒤 정교하게 다듬는 디퓨전 방식을 적용했다. 이로 인해 영상이나 음성과 같은 대용량 데이터도 보다 빠르고 효율적으로 처리할 수 있다.

 

또한 텍스트 중심으로 다른 데이터를 해석하던 기존 방식과 달리 모든 정보를 동일한 기준으로 동시에 처리한다. 변환 과정 없이 다양한 데이터를 직접 연결함으로써 정보 간 관계를 보다 정확하게 파악할 수 있다는 설명이다. 이해와 생성 기능 역시 하나의 모델에 통합해 별도의 AI를 조합할 필요 없이 연속적인 처리 구조를 갖췄다.

 

성능 측면에서도 경쟁력을 입증했다. 연구팀에 따르면 Dynin-Omni는 19개 글로벌 벤치마크 평가에서 정보 추론, 영상 이해, 이미지 생성·편집, 음성 처리 등 다양한 분야에서 기존 통합 모델을 상회하는 결과를 기록했다. 일부 작업에서는 특정 분야에 특화된 전문 모델과 비교해도 뒤지지 않는 수준을 보였으며, 생성 속도는 기존 대비 최대 4~5배 향상됐다.

 

이번 기술은 로봇, AI 비서, 스마트 기기 등 실시간 상호작용이 요구되는 산업에서 활용도가 클 것으로 전망된다. 하나의 모델이 다양한 감각 정보를 동시에 처리할 수 있어 별도 모델 재구성 없이 다양한 환경에 적용할 수 있다는 점도 강점으로 꼽힌다.

 

도재영 교수는 “이번 연구는 AI가 정보를 이해하는 능력과 결과물을 만들어내는 능력을 하나로 합쳐 글자나 이미지 등 다양한 정보를 사람처럼 동시에 처리하는 통합 AI의 가능성을 열었다는 점에서 큰 의미가 있다”며 “앞으로는 단순히 화면 속 데이터를 처리하는 수준을 뛰어넘어 사람과 실시간으로 소통하며 현실 세계에서 직접 작동하는 지능형 로봇이나 스마트 기기처럼 우리 삶에 실질적 도움을 주는 기술로 연구를 확장해 나갈 계획”이라고 밝혔다.

 

연구팀은 향후 Dynin-Omni를 고도화해 로봇에 적용하는 ‘피지컬 AI’로 확장할 계획이다. 특히 국내 연구 생태계와 협력을 강화해 통합 옴니모달 AI 분야에서 경쟁력을 확보한다는 구상이다. 이번 연구는 한국연구재단 기초연구사업과 과학기술정보통신부, 정보통신산업진흥원의 고성능 컴퓨팅 지원사업을 통해 수행됐다.

 

0
  • 목록 바로가기
  • 인쇄


서초구
국민신문고
많이 본 뉴스더보기
  1. 계양구, 수능 수험생 특별수송지원 교통대책상황반 운영 인천광역시 계양구(구청장 박형우)는 오는 11월 19일 실시되는 2027학년도 대학수학능력시험을 앞두고 수험생의 원활한 이동과 교통편의를 위해 특별교통대책을 수립하고 교통대책상황반을 운영한다고 밝혔다.올해 계양구에서는 수험생 3,537명이 계산고 등 관내 8개 고등학교 시험장에서 시험을 치른다.구는 수험생들이 차분한 분위기에서 ..
  2. 남동구, 일자리위원회 개최…일자리 정책 성과 점검하고 미래 고용전략 구체화 인천 남동구(구청장 이병래)는 16일 `2026년 남동구 일자리위원회`를 열고 올해 추진한 일자리 정책의 주요 성과를 점검하는 한편, 민선9기 지역 일자리 정책의 발전 방향을 논의했다.남동구 일자리위원회는 지역 일자리 정책의 기본방향을 설정하고 일자리 창출을 위한 자문과 발전방안을 제안하는 기구로, 다양한 분야의 전문가들이 참여하.
  3. 코이카, 기업 지원 `IMPACT TOGETHER 2026` 개최 개발도상국 현장에서 쌓은 기술과 경험을 국내 공공사업과 해외시장 진출로 연결하기 위해 기업과 공공기관이 한자리에 모였다.코이카(KOICA·한국국제협력단)는 16일(월) 오후 서울 강남구 한국과학기술회관(ST Center)에서 `KOICA IMPACT TOGETHER 2026`을 개최했다.`기업의 성과와 현지의 변화를 잇는 파트너십`을 주제로 열린 이번 행사는 코이카...
  4. 하나은행, JYP엔터테인먼트와 손잡고 `JYP EDM 나눔 적금` 출시 하나은행(은행장 이호성)은 JYP엔터테인먼트(이하 `JYP`)와 함께 금융과 K-POP 팬덤 문화의 선한 영향력을 연계한 금융상품 `JYP EDM 나눔 적금`을 17일 출시했다고 밝혔다.이번 상품은 `세상의 모든 꿈은 소중하다(Every Dream Matters!)`는 의미를 담은 JYP의 사회공헌활동 `EDM`과 연계해, 손님이 적금 가입과 저축을 통해 자산을 형성하는 것은 물론, 나눔...
  5. 인천시교육청, 제1형 당뇨병 학생 `푸름이 캠프` 개최 인천광역시교육청(교육감 도성훈)은 14일 인하대학교 60주년기념관에서 인하대학교병원, 인하대학교와 함께 학생과 학부모를 대상으로 `2026년 제1형 당뇨병 학생 푸름이 캠프`를 개최했다.올해로 2회째를 맞은 이번 행사는 `당당하게 꿈을 그려봐`를 주제로, 학생들이 스스로 건강을 관리하는 능력을 기르고 자신의 꿈과 미래를 긍정적으로 ..
  6. 옹진군 북도면, 11월 1차 클린업데이 대청소 실시 옹진군 북도면(면장 고수영)은 지난 16일 장봉리 석산터 해안가 일대에서 클린업데이 대청소를 실시했다고 밝혔다.이번 대대적인 환경정화 활동은 캠핑객들이 버리고 간 생활쓰레기와 해양쓰레기를 수거해 깨끗한 해안 환경을 조성하고자 추진됐다.이날 현장에는 면사무소 직원 및 지역 주민 30여 명이 참여했다. 참여자들은 석산터 해안가.
  7. 서울주택도시개발공사, 구룡마을 화재 피해지역 주변 환경정화 봉사 실시 서울주택도시개발공사(SH, 사장 황상하)는 16일 구룡마을 화재 피해지역 주변에서 추가 화재 확산 방지와 2차 안전사고 예방을 위한 환경정화 봉사활동을 실시했다고 밝혔다.이날 황상하 사장을 비롯한 SH 임직원 80여 명은 화재 피해지역 주변에 방치된 생활폐기물과 쓰레기를 수거하는 등 환경정비 활동을 펼쳤다.특히 추가 화재 발생 시 주.
모바일 버전 바로가기