%ec%b4%88%ed%95%b4%ec%83%81%ed%99%94
-
한컴인스페이스와 지구관측 위성 영상 분석 인공지능 기술 협력
우리 대학 전기및전자공학부 김문철 교수 연구팀이 지난 5월 26일 국내 최초 민간 초소형 위성인 세종 1호를 발사한 한글과컴퓨터그룹의 계열사인 한컴인스페이스(대표이사 최명진)와 위성 영상정보제공 서비스 향상을 위한 협력 연구체계를 구축하는 협약을 19일 체결했다.
전기및전자공학부 김문철 교수는 세계 최고 수준의 위성 영상 해상도 향상(초해상화)기술을 보유하고 있어, 한컴인스페이스와 기술협력체계를 구축하고 세종 1호의 해상도를 2배 이상 향상할 수 있는 기술 개발에 착수한다.
민간 초소형 위성인 세종 1호 위성은 5m 해상도의 다중밴드 위성으로 농업, 산림 등 다양한 분야에서 위성영상 및 분석정보를 제공할 수 있다. 한컴인스페이스는 더 나아가 고화질 영상정보가 필요한 응용을 위해 인공지능 기술로 영상의 해상도 품질을 향상시킨다.
초해상화 기술은 영상정보를 촬영하는 플랫폼의 하드웨어적 한계를 극복하고 컴퓨터비전, 인공지능 기술을 이용해 원본영상의 품질을 향상할 수 있는 기술이다. 해외의 대표적인 상업위성정보 서비스 업체인 `플래닛 랩스(Planet Labs)'는 다수의 초소형 위성을 운영하고 있으며, 초소형 위성의 한계로 제한된 관측정보의 해상도 향상을 위해 초해상화 기술을 적용해 서비스 중이다.
최명진 한컴인스페이스 대표는 "이번 기술협력은 세종 1호 뿐만 아니라 향후 발사 예정인 후속 위성의 영상 품질이 향상될 것ˮ이라며 "이를 통해 최초 사업 목표였던 농림, 산림분야 뿐만 아니라, 초고해상도의 위성정보가 필요한 다양한 사용자를 대상으로 서비스영역을 확장할 예정ˮ이라고 밝혔다. 또한 "김문철 교수가 보유한 최고 수준의 전천후 관측 영상 레이더(이하 SAR) 위성영상 객체 탐지 분석 기술을 적용해 민간뿐만 아니라 군의 수요를 만족할 수 있는 다종영상정보의 분석, 서비스 체계의 완비를 목표로 한다ˮ고 강조했다.
김문철 교수는 "지난 6월 누리호 발사 성공으로 향후 많은 초소형 위성들이 우리 기술로 발사돼 지구궤도를 돌며 엄청난 양의 지상 영상 정보를 획득할 것ˮ이라며 "이번 기술협력을 통해 지금까지 연구해왔던 세계 최고 수준의 위성 영상 초해상도 및 SAR 영상 분석을 위한 인공지능 기술 등을 상용화하는 데 최선을 다할 것ˮ이라고 밝혔다. 또한 “최근 우리나라 인접국들에서 위성 광학/SAR 영상 분석 관련 인공지능 기술들이 매우 빠른 속도로 개발되고 있고, 우리나라는 이들 국가를 능가하는 세계 최고 수준의 기술 개발을 통해 지피지기(知彼知己)할 수 있는 능력을 확보해 주변국들의 위협에 대비할 수 있는 힘을 키워야 한다ˮ고 강조했다.
김문철 교수는 세계 최고 인공지능/컴퓨터비전 국제학술대회인 국제 컴퓨터비전 및 패턴인식 학술대회(CVPR) 및 국제 컴퓨터비전 학회(ICCV)의 메인 프로그램에서 약 3% 내외 수준에서 선별하는 우수 구두 논문으로 발표된 위성 및 자연 영상 영상 초해상화 기술들을 보유하고 있으며, SAR 영상 표적 탐지 및 식별을 위한 딥러닝 기술, SAR 영상 표적 자세 추정 딥러닝 기술, SAR 영상을 광학 영상으로 변환하는 딥러닝 기술 등을 해당 분야 최고 국제 저널에 관련 연구성과들을 발표해 오고 있어 기술력을 인정받고 있다.
2022.07.21 조회수 9801 -
한동수, 신진우 교수, 느린 인터넷 환경에서도 고화질 영상 감상 기술 개발
〈 (왼쪽부터) 김재홍, 정영목 석사과정, 여현호 박사과정, 한동수, 신진우 교수 〉
우리 대학 전기및전자공학부 신진우, 한동수 교수 연구팀이 딥러닝 기술을 이용한 인터넷 비디오 전송 기술을 개발했다.
여현호, 정영목, 김재홍 학생이 주도한 이번 연구 결과는 격년으로 개최되는 컴퓨터 시스템 분야의 유명 학술회의인 ‘유즈닉스 OSDI(USENIX OSDI)’에서 10월 10일 발표됐고 현재 국제 특허 출원을 완료했다.
이 기술은 유튜브, 넷플릭스 등에서 비디오를 사용자에게 전송할 때 사용하는 적응형 스트리밍(HTTP adaptive streaming) 비디오 전송기술과 딥러닝 기술인 심층 콘볼루션 신경망(CNN) 기반의 초해상화를 접목한 새로운 방식이다.
이는 열악한 인터넷 환경에서도 고품질, 고화질(HD)의 비디오 시청이 가능할 뿐 아니라 4K, AV/VR 등을 시청할 수 있는 새로운 기반 기술이 될 것으로 기대된다.
기존의 적응형 스트리밍은 시시각각 변화하는 인터넷 대역폭에 맞춰 스트리밍 중인 비디오 화질을 실시간으로 조절한다. 이를 위해 다양한 알고리즘이 연구되고 있으나 네트워크 환경이 좋지 않을 때는 어느 알고리즘이라도 고화질의 비디오를 감상할 수 없다는 한계가 있다.
연구팀은 적응형 스트리밍에 초해상화를 접목해 인터넷 대역폭에 의존하는 기존 적응형 스트리밍의 한계를 극복했다. 기존 기술은 비디오를 시청 시 긴 영상을 짧은 시간의 여러 비디오 조각으로 나눠 다운받는다. 이를 위해 비디오를 제공하는 서버에서는 비디오를 미리 일정 시간 길이로 나눠 준비해놓는 방식이다.
연구팀이 새롭게 개발한 시스템은 추가로 신경망 조각을 비디오 조각과 같이 다운받게 했다. 이를 위해 비디오 서버에서는 각 비디오에 대해 학습이 된 신경망을 제공하며 또 사용자 컴퓨터의 사양을 고려해 다양한 크기의 신경망을 제공한다.
제일 큰 신경망의 크기는 총 2메가바이트(MB)이며 비디오에 비해 상당히 작은 크기이다. 신경망을 사용자 비디오 플레이어에서 다운받을 때는 여러 개의 조각으로 나눠 다운받으며 신경망의 일부만 다운받아도 조금 떨어지는 성능의 초해상화 기술을 이용할 수 있도록 설계했다.
사용자의 컴퓨터에서는 동영상 시청과 함께 병렬적으로 심층 콘볼루션 신경망(CNN) 기반의 초해상화 기술을 사용해 비디오 플레이어 버퍼에 저장된 저화질 비디오를 고화질로 바꾸게 된다. 모든 과정은 실시간으로 이뤄지며 이를 통해 사용자들이 고화질의 비디오를 시청할 수 있다.
연구팀이 개발한 시스템을 이용하면 최대 26.9%의 적은 인터넷 대역폭으로도 최신 적응형 스트리밍과 같은 체감 품질(QoE, Quality of Experience)을 제공할 수 있다. 또한 같은 인터넷 대역폭이 주어진 경우에는 최신 적응형 스트리밍보다 평균 40% 높은 체감 품질을 제공할 수 있다.
이 시스템은 딥러닝 방식을 이용해 기존의 비디오 압축 방식보다 더 많은 압축을 이뤄낸 것으로 볼 수 있다. 연구팀의 기술은 콘볼루션 신경망 기반의 초해상화를 인터넷 비디오에 적용한 차세대 인터넷 비디오 시스템으로 권위 잇는 학회로부터 효용성을 인정받았다.
한 교수는 “지금은 데스크톱에서만 구현했지만 향후 모바일 기기에서도 작동하도록 발전시킬 예정이다”며 “이 기술은 현재 유튜브, 넷플릭스 등 스트리밍 기업에서 사용하는 비디오 전송 시스템에 적용한 것으로 실용성에 큰 의의가 있다”고 말했다.
이번 연구는 과학기술정보통신부 정보통신기술진흥센터(IITP) 방송통신연구개발 사업의 지원을 받아 수행됐다.
비디오 자료 링크 주소 1.
https://www.dropbox.com/sh/z2hvw1iv1459698/AADk3NB5EBgDhv3J4aiZo9nta?dl=0&lst =
□ 그림 설명
그림1. 기술이 적용되기 전 화질(좌)과 적용된 후 화질 비교(우)
그림2. 기술 개념도
그림3. 비디오 서버로부터 비디오가 전송된 후 저화질의 비디오가 고화질의 비디오로 변환되는 과정
2018.10.30 조회수 16658