%EA%B9%80%EB%AC%B8%EC%B2%A0
-
한컴인스페이스와 지구관측 위성 영상 분석 인공지능 기술 협력
우리 대학 전기및전자공학부 김문철 교수 연구팀이 지난 5월 26일 국내 최초 민간 초소형 위성인 세종 1호를 발사한 한글과컴퓨터그룹의 계열사인 한컴인스페이스(대표이사 최명진)와 위성 영상정보제공 서비스 향상을 위한 협력 연구체계를 구축하는 협약을 19일 체결했다.
전기및전자공학부 김문철 교수는 세계 최고 수준의 위성 영상 해상도 향상(초해상화)기술을 보유하고 있어, 한컴인스페이스와 기술협력체계를 구축하고 세종 1호의 해상도를 2배 이상 향상할 수 있는 기술 개발에 착수한다.
민간 초소형 위성인 세종 1호 위성은 5m 해상도의 다중밴드 위성으로 농업, 산림 등 다양한 분야에서 위성영상 및 분석정보를 제공할 수 있다. 한컴인스페이스는 더 나아가 고화질 영상정보가 필요한 응용을 위해 인공지능 기술로 영상의 해상도 품질을 향상시킨다.
초해상화 기술은 영상정보를 촬영하는 플랫폼의 하드웨어적 한계를 극복하고 컴퓨터비전, 인공지능 기술을 이용해 원본영상의 품질을 향상할 수 있는 기술이다. 해외의 대표적인 상업위성정보 서비스 업체인 `플래닛 랩스(Planet Labs)'는 다수의 초소형 위성을 운영하고 있으며, 초소형 위성의 한계로 제한된 관측정보의 해상도 향상을 위해 초해상화 기술을 적용해 서비스 중이다.
최명진 한컴인스페이스 대표는 "이번 기술협력은 세종 1호 뿐만 아니라 향후 발사 예정인 후속 위성의 영상 품질이 향상될 것ˮ이라며 "이를 통해 최초 사업 목표였던 농림, 산림분야 뿐만 아니라, 초고해상도의 위성정보가 필요한 다양한 사용자를 대상으로 서비스영역을 확장할 예정ˮ이라고 밝혔다. 또한 "김문철 교수가 보유한 최고 수준의 전천후 관측 영상 레이더(이하 SAR) 위성영상 객체 탐지 분석 기술을 적용해 민간뿐만 아니라 군의 수요를 만족할 수 있는 다종영상정보의 분석, 서비스 체계의 완비를 목표로 한다ˮ고 강조했다.
김문철 교수는 "지난 6월 누리호 발사 성공으로 향후 많은 초소형 위성들이 우리 기술로 발사돼 지구궤도를 돌며 엄청난 양의 지상 영상 정보를 획득할 것ˮ이라며 "이번 기술협력을 통해 지금까지 연구해왔던 세계 최고 수준의 위성 영상 초해상도 및 SAR 영상 분석을 위한 인공지능 기술 등을 상용화하는 데 최선을 다할 것ˮ이라고 밝혔다. 또한 “최근 우리나라 인접국들에서 위성 광학/SAR 영상 분석 관련 인공지능 기술들이 매우 빠른 속도로 개발되고 있고, 우리나라는 이들 국가를 능가하는 세계 최고 수준의 기술 개발을 통해 지피지기(知彼知己)할 수 있는 능력을 확보해 주변국들의 위협에 대비할 수 있는 힘을 키워야 한다ˮ고 강조했다.
김문철 교수는 세계 최고 인공지능/컴퓨터비전 국제학술대회인 국제 컴퓨터비전 및 패턴인식 학술대회(CVPR) 및 국제 컴퓨터비전 학회(ICCV)의 메인 프로그램에서 약 3% 내외 수준에서 선별하는 우수 구두 논문으로 발표된 위성 및 자연 영상 영상 초해상화 기술들을 보유하고 있으며, SAR 영상 표적 탐지 및 식별을 위한 딥러닝 기술, SAR 영상 표적 자세 추정 딥러닝 기술, SAR 영상을 광학 영상으로 변환하는 딥러닝 기술 등을 해당 분야 최고 국제 저널에 관련 연구성과들을 발표해 오고 있어 기술력을 인정받고 있다.
2022.07.21 조회수 7710 -
김문철 교수, 인공지능 통해 풀HD영상 4K UHD로 실시간 변환
〈 김 문 철 교수 〉
우리 대학 전기및전자공학부 김문철 교수 연구팀이 딥러닝 기술을 이용해 풀 HD 비디오 영상을 4K UHD 초고화질 영상으로 초해상화 변환할 수 있는 기술을 개발했다.
이 기술은 인공지능의 핵심 기술인 심층 콘볼루션 신경망(Deep Convolutional Neural Network, DCNN)을 하드웨어로 구현했다. 초당 60프레임의 초고해상도 4K UHD 화면을 실시간으로 생성할 수 있는 알고리즘 및 하드웨어 개발을 통해 향후 프리미엄 UHD TV, 360 VR, 4K IPTV 등에 기여할 것으로 기대된다.
이번 연구는 KAIST 전기및전자공학부 김용우, 최재석 박사과정 등이 주도했고 현재 특허 출원을 준비 중이다.
최근 영상 화질 개선 연구에 인공지능의 핵심 기술인 심층 콘볼루션 신경망을 적용시키려는 노력이 활발히 이뤄지고 있다. 그러나 이러한 심층 콘볼루션 신경망 기술은 연산 복잡도와 매우 높고 사용되는 메모리가 커 작은 규모의 하드웨어를 통해 초고해상도 영상으로 실시간 변환하는 데 한계가 있다.
기존의 프레임 단위로 영상을 처리하던 방식은 DRAM과 같은 외부 메모리 사용이 필수적인데 이로 인해 영상 데이터를 처리할 때 지나친 외부 메모리 접근으로 인한 메모리 병목현상과 전력 소모 현상이 발생했다.
김 교수 연구팀은 프레임 단위 대신 라인 단위로 데이터를 처리할 수 있는 효율적인 심층 콘볼루션 신경망 구조를 개발해 외부 메모리를 사용하지 않고도 작은 규모의 하드웨어에서 초당 60 프레임의 4K UHD 초해상화를 구현했다.
연구팀은 기존 소프트웨어 방식의 심층 콘볼루션 신경망 기반의 고속 알고리즘과 비교해 필터 파라미터를 65% 정도만 적용하고도 유사한 화질을 유지했다.
이는 딥러닝 기술을 이용한 고해상도 영상 변환 기술이 활발히 진행되는 가운데 초당 60프레임의 4K UHD 초해상화를 하드웨어로 실현한 첫 사례로 꼽힌다.
김 교수는 “이번 연구는 심층 콘볼루션 신경망이 작은 규모의 하드웨어에서 초고품질 영상 처리에 실질적으로 응요 가능한 기술임을 보인 매우 중요한 사례다”며 “현재 프리미엄 UHD TV 및 UHD 방송 콘텐츠 생성, 360도 VR 콘텐츠, 4K IPTV 서비스에 매우 효과적으로 적용할 수 있다”고 말했다.
이번 연구는 과학기술정보통신부 정보통신기술진흥센터(IITP) ICT 기초연구실지원사업의 지원을 받아 수행됐다.
□ 그림 설명
그림1. 실시간 AI(딥러닝) 기반 고속 초고해상도 업스케일링 기술
그림2.심층 신경망 AI 기반 4K UHD 60fps 실시간 초해상화 하드웨어 (FPGA)
그림3. 심층 신경망 AI 기반 4K UHD 60fps 실시간 초해상화 하드웨어 시연
2018.01.16 조회수 20135 -
KAIST, 국내대학 최초로 국제표준특허 등록
우리 학교 전기및전자공학과 김문철 교수가 개발한 영상압축기술이 차세대 고효율 영상압축기술(HEVC, High Efficiency Video Coding)의 표준특허로 등록됐다.
김 교수가 KBS와 공동 개발한 이 기술은 기업이나 연구소가 아닌 대학에서 주도적으로 표준화를 추진해 표준특허로 인정받은 국내 최초 사례다.
HEVC(H.265)는 Full HD보다 4배나 화질이 우수한 UHD(초고화질)급 해상도를 가진 TV, 스마트폰 등에 적용하기 위한 대용량 영상데이터를 효율적으로 압축하기 위해 만들어진 국제 기술표준이다. 현재 Full HD에 가장 널리 쓰이는 H.264/AVC 보다 데이터 압축효율이 두 배 정도 우수하다. 즉, 같은 수준의 영상화질을 유지하면서도 데이터 용량을 절반 정도로 줄일 수 있다.
HEVC 관련 시장은 현재 태동기이지만 최근 출시된 UHD TV와 최신 스마트폰에 적용되기 시작했고, 2016년까지 급속도로 팽창하면서 세계시장은 연간 2천억 달러 규모로 성장할 것으로 전망된다. KAIST는 이번에 등록된 표준특허로 향후 최소 100억 원의 특허 로열티를 받을 것으로 전망하고 있다.
국제표준화기구(ISO/IEC, ITU-T)는 2013년 1월 HEVC 표준을 확정했다. 또한, 세계적인 특허 풀(Pool) 라이선스 관리기업인 MPEG LA는 2014년 9월 29일 HEVC 표준특허 풀을 확정 발표했다. 김 교수는 지난 2007년 KBS와 공동으로 개발한 영상처리 기술이 HEVC 표준에 부합한다고 판단, KAIST 기술사업화센터(센터장 윤준호)와 특허분석을 통한 표준화 전략을 수립했다. 이후 MPEG LA에 수립된 전략에 따라 보유하고 있던 기술을 제안해 표준특허로 등록시키는데 성공했다.
배중면 산학협력단장은 “대학에서 개발한 세계적인 수준의 원천기술을 가지고 시장파급력이 큰 국제표준화를 달성해 아직까지 대학에서는 경험할 수 없었던 커다란 금액의 기술료 수익이 기대된다”며 “전략적 특허관리를 통해 향후 2년 이내에 50개 이상의 국내외 표준특허를 확보할 계획”이라고 말했다.
강성모 총장은 “KAIST는 뛰어난 기술력으로 애플, 지멘스, NEC 등과 함께 HEVC 표준특허 풀 창립멤버로 가입, 글로벌 톱 기업들과 어깨를 나란히 해 학교의 위상을 크게 드높였다”며 “원천기술에 대한 연구생산성을 크게 높임으로써 그동안 대학에서 시도하지 못했던 새로운 형태의 창조경제 모델을 제시했다는데 의미가 있다”고 의의를 밝혔다.
□ 영상압축기술의 발전
□ 비디오화면 화소 수 비교
2014.10.01 조회수 14051