%EC%B9%B4%EB%A9%94%EB%9D%BC
-
반도체 소자 내의 복잡한 움직임을 관측할 수 있는 초고속 카메라 개발
우리 대학 김정원 교수 연구팀이 반도체 소자 내의 미세 구조와 동적 특성을 고해상도로 측정할 수 있는 초고속 카메라 기술을 개발하였다고 밝혔다.
기존에는 볼 수 없었던 반도체 소자 내에서의 빠르고 불규칙적인 복잡한 움직임을 이제 초고속 카메라로 관측할 수 있게 되었다.
기계공학과 나용진 박사가 제 1저자로 참여하고 기계공학과 유홍기, 이정철 교수팀 및 한국표준과학연구원(KRISS) 서준호, 강주식 박사팀이 참여한 공동연구팀의 이번 논문은 국제학술지 ‘빛: 과학과 응용(Light: Science & Applications)’ [IF=20.257] 2월 15일 字에 게재됐다. (논문명: Massively parallel electro-optic sampling of space-encoded optical pulses for ultrafast multi-dimensional imaging)
최근 마이크로 및 나노 소자들의 복잡도와 기능성이 급격하게 향상됨에 따라 이들 소자 내의 미세 구조와 동적인 움직임을 실시간으로 정확하게 측정해야 할 필요성이 급증하고 있다. 미세 구조 측정 측면에서는 다양한 3차원 집적회로와 소자들의 발전으로 더 큰 웨이퍼 영역에 대해 더 높은 분해능 및 측정속도를 가지는 계측 기술이 반도체 산업에서 중요해지고 있다. 한편 동적 특성의 측정은 마이크로 및 나노 소자 내에서의 물리현상들을 이해하고 다양한 응용 분야들로 발전시키는 데 중요하다. 특히 다양한 역학 현상의 관측을 위해서는 더 높은 해상도, 더 빠른 측정속도 및 더 큰 측정범위를 필요로 하지만 기존의 측정 기술들은 여러가지 한계들을 가지고 있었다.
이번 연구는 기존의 한계를 극복한 새로운 초고속 카메라 기술을 개발하였다. 100펨토초(10조분이 1초) 정도의 매우 짧은 펄스폭을 가지는 빛 펄스를 1000개 이상의 다른 색을 가지는 펄스들로 쪼갠 후, 각기 다른 색을 가진 펄스들을 이용하여 서로 다른 공간적 위치에서의 높낮이를 정밀하게 측정할 수 있는 기술이다. 구현한 기술은 초당 2.6억개의 픽셀들에 대한 높낮이의 차이를 최고 330피코미터(30억분의 1미터) 수준까지 측정할 수 있을 정도로 빠르고 정밀하다. 연구팀은 이를 이용하여 복잡한 3차원 형상을 고속으로 정밀하고 정확하게 측정할 수 있는 초고속 카메라 기능을 선보였고, 기존의 측정 기술로는 관측하기 어렵던 복잡하고 비반복적인 고속의 동역학 현상들을 성공적으로 관측할 수 있었다.
이번에 개발한 초고속 카메라 기술의 고속 형상 이미징 속도와 높은 공간 분해능을 이용하면 반도체 공정이나 3D 프린팅 과정을 실시간으로 모니터링하며 공정을 제어할 수 있어 점점 고도화 및 집적화 되는 공정의 수율을 크게 향상시킬 수 있을 것으로 기대된다. 또한 다양한 진폭이 존재하면서 동시에 매우 빠른 순간 속도를 갖는 미세 구조의 움직임을 포착할 수 있음을 보여, 기존에 관찰하지 못했던 복잡한 비선형(nonlinear) 및 과도(transient)의 물리 현상들을 탐구하는 차세대 계측 기술로 발전할 수 있을 것으로 기대된다.
김정원 교수는 “이번 연구에서는 1차원적인 선 모양의 빛을 스캔해서 움직이는 방식으로 2차원 표면의 높낮이를 측정하였으나, 향후에는 2차원 표면의 높낮이를 스캔 없이 한번에 측정할 수 있는 방식으로 기술을 발전시킬 예정”이라고 밝혔다.
한편 이번 연구는 과학기술정보통신부와 한국연구재단이 추진하는 중견후속연구, 선도연구센터, 기초연구실 및 중견연구 사업의 지원을 받아 수행됐다.
2023.03.02 조회수 830 -
3차원 표정인식용 인공지능 라이트필드 카메라 개발
우리 대학 바이오및뇌공학과 정기훈, 이도헌 교수 공동연구팀이 근적외선 기반 라이트필드 카메라와 인공지능기술을 융합하여 얼굴의 감정표현을 구분하는 기술을 개발했다고 7일 밝혔다.
라이트필드 카메라는 일반적인 카메라와 다르게 미세렌즈 배열(Microlens arrays)을 이미지센서 앞에 삽입해 손에 들 수 있을 정도로 작은 크기이지만 한 번의 촬영으로 빛의 공간 및 방향 정보를 획득한다. 이를 통해 다시점 영상, 디지털 재초점, 3차원 영상 획득 등 다양한 영상 재구성이 가능하고 많은 활용 가능성으로 주목받고 있는 촬영 기술이다.
그러나 기존의 라이트필드 카메라는 실내조명에 의한 그림자와 미세렌즈 사이의 광학 크로스토크(Optical crosstalk)에 의해 이미지의 대비도 및 3차원 재구성의 정확도가 낮아지는 한계점이 있다.
연구팀은 라이트필드 카메라에 근적외선 영역의 수직 공진형 표면 발광 레이저(VCSEL) 광원과 근적외선 대역필터를 적용해 기존 라이트필드 카메라가 갖는 조명 환경에 따라 3차원 재구성의 정확도가 낮아지는 문제를 해결했다. 이를 통해 얼굴 정면 기준 0도, 30도, 60도 각도의 외부 조명에 대해, 근적외선 대역필터를 사용한 경우 최대 54%까지 영상 재구성 오류를 줄일 수 있었다. 또한, 가시광선 및 근적외선 영역을 흡수하는 광 흡수층을 미세렌즈 사이에 제작하면서 광학 크로스토크를 최소화해 원시 영상의 대비도를 기존 대비 약 2.1배 정도로 획기적으로 향상하는 데 성공했다.
이를 통해 기존 라이트필드 카메라의 한계를 극복하고 3차원 표정 영상 재구성에 최적화된 근적외선 기반 라이트필드 카메라(NIR-LFC, NIR-based light-field camera) 개발에 성공했다. 연구팀은 개발한 카메라를 통해 피험자의 다양한 감정표정을 가진 얼굴의 3차원 재구성 이미지를 조명 환경과 관계없이 고품질로 획득할 수 있었다.
획득한 3차원 얼굴 이미지로부터 기계 학습을 통해 성공적으로 표정을 구분할 수 있었고, 분류 결과의 정확도는 평균 85% 정도로 2차원 이미지를 이용했을 때보다 통계적으로 유의미하게 높은 정확도를 보였다. 이뿐만 아니라, 연구팀은 표정에 따른 얼굴의 3차원 거리 정보의 상호의존성을 계산한 결과를 통해, 라이트필드 카메라가 인간이나 기계가 표정을 판독할 때 어떤 정보를 활용하는지에 대한 단서를 제공할 수 있음을 확인했다.
정기훈 교수는 "연구팀이 개발한 초소형 라이트필드 카메라는 정량적으로 인간의 표정과 감정을 분석하기 위한 새로운 플랫폼으로 활용될 수 있을 것으로 기대된다ˮ며 "모바일 헬스케어, 현장 진단, 사회 인지, 인간-기계 상호작용 등의 분야에서 활용될 것ˮ이라고 연구의 의미를 설명했다.
우리 대학 바이오및뇌공학과 배상인 박사과정 졸업생이 주도한 이번 연구 결과는 국제저명학술지 `어드밴스드 인텔리전트 시스템즈(Advanced Intelligent Systems)'에 2021년 12월 16일 온라인 게재됐다. (논문명: Machine-Learned Light-Field Camera that Reads Facial Expression from High-Contrast and Illumination Invariant 3D Facial Images).
한편 이번 연구는 과학기술정보통신부 및 산업통상자원부의 지원을 받아 수행됐다.
2022.01.07 조회수 2932 -
초고속 전자카메라의 성능을 한층 더 높여
우리 대학 기계공학과 김정원 교수 연구팀이 한국원자력연구원 초고속 방사선 연구실과의 공동 연구를 통해 극초단 전자 펄스의 타이밍을 10펨토초(100조분의 1초) 안정도로 측정하고 제어하는 기술을 개발, 이를 적용해 초고속 전자카메라(전자회절장치)의 성능을 한층 더 높이는 데 성공했다고 5일 밝혔다.
이 새로운 타이밍 안정화 기술을 이용하면 초고속 전자 회절(ultrafast electron diffraction, UED) 기법의 분석 능력을 크게 개선해 그래핀 등의 2차원 물질과 같은 첨단 물질들의 새로운 성질들을 규명할 수 있는 핵심 기술이 될 것으로 기대된다.
신준호 박사(現 원자력(연))가 제1 저자로서 우리 대학 박사과정 중 수행한 연구 결과를 발표한 이번 성과는 국제학술지 `레이저 앤드 포토닉스 리뷰즈(Laser & Photonics Reviews; IF=10.655)'의 2021년 2월호 표지논문(front cover)으로 2월 11일 字 게재됐다. (논문명: Sub-10-fs timing for ultrafast electron diffraction with THz-driven streak camera)
극초단 전자 펄스를 기반으로 한 회절 분석 기법(UED)은 전자 펄스의 짧은 펄스폭(수십 펨토초)과 광속에 가까운 속도(99.2%)를 활용해 태양광 소자, 차세대 전기·전자 소재 개발 등 미래 첨단 산업 분야를 위한 연구에 활용되고 있다.
한국원자력연구원은 이미 세계에서 가장 성능이 우수한 전자카메라를 보유하고 있으며, 이 기술 개발을 통해 기존 전자 회절 기법의 분해능 개선뿐만 아니라 이전에는 불가능했던 원자 내의 전자 동역학 관측에도 도전하게 됐다.
기존의 전자 펄스의 타이밍 안정화 기술들은 전자를 생성하는 고주파 마이크로파 신호와 레이저를 개별적으로 안정화했으나, 전자 펄스 자체의 타이밍을 장시간 안정화하지는 못하는 한계점이 있었다.
연구팀은 이러한 한계들을 극복하기 위해 테라헤르츠파 스트리킹(streaking) 기술로 전자 펄스의 타이밍을 측정하고 제어하는 시스템을 구현했다.
이러한 테라헤르츠파 스트리킹 기술의 선결 조건으로 먼저 전자 펄스를 발생시키는 데 필요한 레이저와 마이크로파 신호들의 정밀한 측정과 제어가 이뤄져야 하며, 연구팀은 이를 위해 레이저와 마이크로파 간의 정밀 동기화 시스템, 광 펄스의 모니터링 시스템, 자석 기반 전자 펄스 압축 시스템 등 다양한 레이저-마이크로파-전자빔 안정화 장치들을 하나씩 구현하고 최적화했다.
최종적으로 측정한 전자 펄스와 테라헤르츠파 사이의 시간 차이는 모터를 활용해 제어하고 보정했으며, 그 결과 세계 최초로 전자 펄스의 타이밍을 5.5펨토초 수준으로 4,600초 동안 안정화할 수 있었다. 이는 기존의 세계 최고 성능보다 4배 이상 향상된 시간 안정도다.
김정원 교수는 "지속적으로 이루어지고 있는 전자 펄스의 타이밍 안정도 개선과 초고속 전자카메라의 성능 향상이 다양한 태양광 소재 개발이나 전자구름 관측 등 차세대 기초 및 산업 연구 수요를 맞출 수 있을 것ˮ이라고 전망했다.
한편 이번 연구는 한국원자력연구원 주요사업과 한국연구재단 중견연구지원사업의 지원을 받아 수행됐다.
2021.03.09 조회수 84949 -
해상도 높인 초박형 4D 카메라 개발
우리 대학 바이오및뇌공학과 정기훈 교수 연구팀이 금속 나노 광 흡수층을 통해 고해상도 4D 영상 구현이 가능한 초박형 라이트필드 카메라를 개발했다고 4일 밝혔다.
`라이트필드 카메라'는 곤충의 시각 구조에서 발견되는 형태에 착안해 미세렌즈와 대물렌즈를 결합한 진보된 형태의 카메라다. 한 번의 2차원 촬영으로 빛의 공간 뿐만 아니라 방향까지 4차원 정보를 동시에 획득한다. 그러나 기존 라이트필드 카메라는 미세렌즈 배열의 *광학 크로스토크(Optical crosstalk)로 인한 해상도 저하와 대물렌즈의 위치로 인한 크기의 한계가 존재한다.
☞ 광학 크로스토크(Optical Crosstalk): 어떤 통신회선의 전기 신호가 다른 통신회선과 전자기적으로 결합해 혼선을 일으키는 통신 용어를 크로스토크라고 하며, 광학에서는 한 렌즈를 통과한 빛이 다른 렌즈로부터 들어온 빛과 겹쳐 생기는 현상으로 영상이 중첩되어 촬영되는 것을 의미한다.
연구팀이 개발한 `4D 카메라'는 나노 두께의 광 흡수 구조를 미세렌즈 배열(Microlens arrays) 사이에 삽입해 대비도 및 해상도를 높였으며, 기존의 카메라가 가지는 외부 광원, 추가 센서 부착의 한계를 극복할 수 있다. 이러한 특징을 이용해 의료영상, 생체인식, 모바일 카메라 또는 다양한 가상현실/증강현실 카메라 분야에 적용 가능할 것으로 기대된다.
연구팀은 미세렌즈 배열의 광학 크로스토크를 제거하기 위해 200나노미터(nm) 두께 수준의 금속-유전체-금속 박막으로 이루어진 광 흡수층을 렌즈 사이에 배치하고, 대물렌즈와 미세렌즈 사이의 간격을 일정 수준으로 줄여 초박형 라이트필드 카메라를 개발하는 데 성공했다.
높은 광학적 손실성과 낮은 분산성을 갖는 크로뮴(Cr) 금속과 높은 투과율을 갖는 유리층을 나노미터 두께로 적층한 구조(Cr–SiO2–Cr)는 가시광선 영역의 빛을 완전히 흡수할 수 있다. 나노 광 흡수층을 미세렌즈 배열 사이에 배치해 미세렌즈들 사이의 광학 크로스토크를 제거하고 고 대비 및 고해상도 3차원 영상을 획득하는 데 도움을 준다.
연구팀은 광 흡수 구조를 갖는 미세렌즈 배열을 포토리소그래피(Photolithography), 리프트 오프(Lift-off), 열 재유동(Thermal reflow) 공정을 통해 양산 제작했다. 또한, 라이트필드 카메라의 전체 두께를 최소화하기 위해 미세렌즈의 방향을 이미지센서 방향의 역방향으로 배치하고 대물렌즈와 미세렌즈 사이 거리를 2.1mm 수준으로 줄여, 전체 5.1mm의 두께를 갖는다. 이는 현재까지 개발된 라이트필드 카메라 중 가장 얇은 두께다.
나노 광 흡수 구조를 갖는 미세렌즈에 의해 이미지센서에 기록되는 원시 영상은 기존 미세렌즈를 통한 영상에 비해 높은 대비도와 해상도를 가지며, 연구팀은 이를 영상처리 기법을 통해 시점 영상 및 3차원 영상으로 재구성했을 때 향상된 정확도를 가짐을 확인했다.
정기훈 교수는 "초박형이면서 고해상도의 라이트필드 카메라를 제작하는 새로운 방법을 제시했다ˮ며 "이 카메라는 생체인식, 의료 내시경, 휴대폰 카메라와 같이 다시점(Multi-view), 재초점(Refocusing)을 요구하는 초소형 영상장치로 통합돼, 초소형 4D 카메라의 새로운 플랫폼으로 활용될 것ˮ이라고 말했다.
우리 대학 바이오및뇌공학과 배상인 박사과정이 주도한 이번 연구 결과는 국제 학술지 `어드밴스드 옵티컬 머티리얼즈(Advanced Optical Materials)'에 1월 20일 字 게재됐다. (논문명: High Contrast Ultrathin Light-field Camera using inverted Microlens arrays with Metal-Insulator-Metal Optical Absorber)
한편 이번 연구는 과학기술정보통신부의 개인연구지원사업, 산업 통산 자원부의 기술혁신프로그램, 보건복지부의 보건의료기술연구개발사업으로 수행됐다.
2021.02.04 조회수 71665 -
딥러닝 기반 실시간 기침 인식 카메라 개발
우리 대학 기계공학과 박용화 교수 연구팀이 ㈜에스엠 인스트루먼트와 공동으로 실시간으로 기침 소리를 인식하고 기침하는 사람의 위치를 이미지로 표시해주는 '기침 인식 카메라'를 개발했다고 3일 밝혔다.
작년 말부터 시작된 세계적 유행성 전염병인 코로나19가 최근 미국·중국·유럽 등 세계 각국에서 재확산되는 추세로 접어들면서 비접촉방식으로 전염병을 감지하는 기술에 대한 수요가 증가하고 있다.
코로나19의 대표적인 증상이 발열과 기침인데, 현재 발열은 열화상 카메라를 이용해 직접 접촉을 하지 않고도 체온을 쉽게 판별할 수 있다. 문제는 비접촉방식으로는 기침하는 사람의 증상을 쉽사리 파악하기 어렵다는 점이다. 박 교수 연구팀은 이런 문제를 해결하기 위해 기침 소리를 실시간으로 인식하는 딥러닝 기반의 기침 인식 모델을 개발했다. 또한 열화상 카메라와 같은 원리로 기침 소리와 기침하는 사람의 시각화를 위해 기침 인식 모델을 음향 카메라에 적용, 기침 소리와 기침하는 사람의 위치, 심지어 기침 횟수까지를 실시간으로 추적하고 기록이 가능한 '기침 인식 카메라'를 개발했다.
연구팀은 기침 인식 카메라가 사람이 밀집한 공공장소에서 전염병의 유행을 감지하거나 병원에서 환자의 상태를 상시 모니터링 가능한 의료용 장비로 활용될 것으로 기대하고 있다.
연구팀은 기침 인식 모델 개발을 위해 *합성 곱 신경망(convolutional neural network, CNN)을 기반으로 *지도학습(supervised learning)을 적용했다. 1초 길이 음향신호의 특징(feature)을 입력 신호로 받아, 1(기침) 또는 0(그 외)의 2진 신호를 출력하고 학습률의 최적화를 위해 일정 기간 학습률이 정체되면 학습률 값을 낮추도록 설정했다.
이어서 기침 인식 모델의 훈련 및 평가를 위해 구글과 유튜브 등에서 연구용으로 활발히 사용 중인 공개 음성데이터 세트인 `오디오세트(Audioset)'를 비롯해 `디맨드(DEMAND)'와 `이티에스아이(ETSI)', `티미트(TIMIT)' 등에서 데이터 세트를 수집했다. 이 중 `오디오세트'는 훈련 및 평가 데이터 세트 구성을 위해 사용했고 다른 데이터 세트의 경우 기침 인식 모델이 다양한 배경 소음을 학습할 수 있도록 데이터 증강(data augmentation)을 위한 배경 소음으로 사용했다.
☞ 합성 곱 신경망(convolutional neural network): 시각적 이미지를 분석하는 데 사용되는 인공신경망(생물학의 신경망에서 영감을 얻은 통계학적 학습 알고리즘)의 한 종류
☞ 지도학습(Supervised Learning): 훈련 데이터(Training Data)로부터 하나의 함수를 유추해내기 위한 기계 학습(Machine Learning)의 한 방법
데이터 증강을 위해 배경 소음을 15%~75%의 비율로 `오디오세트'에 섞은 후, 다양한 거리에 적응할 수 있게 음량을 0.25~1.0배로 조정했다. 훈련 및 평가 데이터 세트는 증강된 데이터 세트를 9:1 비율로 나눠 구성했으며, 시험 데이터 세트는 따로 사무실에서 녹음한 것을 사용했다.
모델 최적화를 위해서는 '스펙트로그램(spectrogram)' 등 5개의 음향 특징과 7개의 최적화 기기(optimizer)를 사용해 학습을 진행하고 시험 데이터 세트의 정확도를 측정, 성능을 확인한 결과 87.4%의 시험 정확도를 얻을 수 있었다.
연구팀은 이어 학습된 기침 인식 모델을 소리를 수집하는 마이크로폰 어레이와 카메라 모듈로 구성되는 음향 카메라에 적용했다. 그 결과 수집된 데이터는 음원의 위치를 계산하는 빔 형성 과정을 거쳐 기침 인식 모델이 기침 소리로 인식할 경우 기침 소리가 난 위치에 기침 소리임을 나타내는 등고선과 라벨이 각각 표시된다.
박 교수팀은 마지막 단계로 기침 인식 카메라의 예비 테스트를 진행한 결과, 여러 잡음 환경에서도 기침 소리와 그 이외의 소리로 구분이 가능하며 기침하는 사람과 그 사람의 위치, 횟수 등을 실시간으로 추적해 현장에서의 적용 가능성을 확인했다. 이들은 추후 병원 등 실사용 환경에서 추가 학습이 이뤄진다면 정확도는 87.4%보다 더 높아질 것으로 기대하고 있다.
박용화 교수는 "코로나19가 지속적으로 전파되고 있는 상황에서 공공장소와 다수 밀집 시설에 기침 인식 카메라를 활용하면 전염병의 방역 및 조기 감지에 큰 도움이 될 것ˮ이라고 말했다. 박 교수는 이어 "특히 병실에 적용하면 환자의 상태를 24시간 기록해 치료에 활용할 수 있기 때문에 의료진의 수고를 줄이고 환자 상태를 더 정밀하게 파악할 수 있을 것ˮ 이라고 강조했다.
한편, 이번 연구는 에너지기술평가원(산업통상자원부)의 지원을 받아 수행됐다.
2020.08.03 조회수 22392 -
해상도 높인 곤충 눈 구조 초박형 카메라 개발
바이오및뇌공학과 정기훈 교수 연구팀이 고해상도 이미징을 위한 곤충 눈 구조의 초박형 카메라를 개발했다. 이 카메라는 독특한 시각 구조를 가진 제노스 페키(Xenos peckii)라는 곤충의 눈을 모사해 개발돼, 상용 카메라보다 더 얇은 렌즈 두께와 넓은 광시야각을 갖는다. 이러한 특징을 이용해 모바일, 감시 및 정찰 장비, 의료영상 기기 등 다양한 소형 카메라가 필요한 분야에 적용 가능할 것으로 기대된다.
김기수 박사과정이 주도한 이번 연구결과는 국제 학술지 ‘빛 : 과학과 응용 (Light : Science & Applications)’ 2월 27일 자 온라인판에 게재됐다. (논문명: 고대비 고해상도 이미징을 위한 생체모사 초박형 카메라, Biologically Inspired Ultrathin Arrayed Camera for High Contrast and High Resolution Imaging)
최근 초소형 및 초박형 스마트 기기의 개발로 소형화된 이미징 시스템의 수요가 커지고 있다. 그러나 기존의 카메라는 물체의 상이 일그러지거나 흐려지는 현상인 수차를 줄이기 위해 다층 렌즈 구조를 활용하기 때문에 렌즈 두께를 감소하는 데 한계가 있다. 또한, 기존의 곤충 눈을 모사한 미세렌즈 배열(Microlens arrays)은 렌즈 사이의 광학 크로스토크(Optical crosstalk)로 인해 해상도가 저해되는 단점이 있다.
연구팀은 문제 해결을 위해 제노스 페키 곤충의 시각 구조를 모사한 렌즈를 제작했고 이를 이미지 센서와 결합해 초박형 카메라를 개발했다. 곤충의 눈은 렌즈와 렌즈 사이의 빛을 차단하는 색소 세포(pigment cells)가 존재해 각 렌즈에서 결상(어떤 물체에서 나온 광선 등이 반사 굴절한 다음 다시 모여 그 물체와 닮은꼴의 상을 만드는 현상)되는 영상들 간의 간섭을 막는다. 이러한 구조는 렌즈들 사이의 광학 크로스토크를 막아 고 대비 및 고해상도 영상을 획득하는 데 도움을 준다.
연구팀은 이러한 광 차단 구조를 포토리소그래피(Photolithography) 공정으로 매우 얇게 제작해 렌즈들 사이의 광학 크로스토크를 효율적으로 차단했다. 렌즈의 두께를 최소화하기 위해 렌즈의 방향을 이미지 센서 방향인 역방향으로 배치했으며, 이를 통해 최종 개발된 카메라 렌즈의 두께는 0.74mm로 이는 10원짜리 동전 절반 정도의 두께이다. 연구팀은 카메라의 원거리에 있는 물체를 모든 렌즈에서 같은 시야각을 통해 동일한 영상을 획득하고, 이 배열 영상들은 해상도를 하나의 이미지로 합성했다. 합성된 영상은 합성 전 단일 채널 영상보다 향상된 해상도를 가짐을 확인했다.
정기훈 교수는 “실질적으로 상용화 가능한 초박형 카메라를 제작하는 방법을 개발했다”라며 “이 카메라는 영상획득이 필요한 장치에 통합돼 장치 소형화에 크게 기여할 것으로 확신한다”라고 말했다.
2020.03.23 조회수 10068 -
정기훈 교수, 곤충 눈 구조 모방한 초박형 카메라 개발
〈 왼쪽부터 장경원 박사과정, 정기훈 교수, 황순홍 박사과정 〉
우리 대학 바이오및뇌공학과 정기훈 교수 연구팀이 독특한 눈 구조를 가진 곤충인 제노스 페키(Xenos peckii)를 모사한 초박형 디지털카메라를 개발했다.
제노스 페키를 모사해 개발한 초박형 디지털카메라는 기존 이미징 시스템보다 더 얇으면서 상대적으로 넓은 광시야각과 높은 분해능을 갖는다. 감시 및 정찰 장비, 의료용 영상기기, 모바일 등 다양한 소형 이미징 시스템에 적용 가능할 것으로 기대된다.
금동민, 장경원 박사과정이 주도한 이번 연구결과는 국제 학술지 ‘빛 : 과학과 응용(Light : Science & Applications)’ 10월 24일 자에 게재됐다. (논문명: 제노스 페키의 시각기관을 모사한 초박형 디지털카메라, Xenos peckii vision inspires an ultrathin digital camera)
정 교수 연구팀은 자연계에서 발견되는 광학 구조를 모방하는 연구를 꾸준히 진행해 왔다. 반딧불이의 배 마디 구조를 분석해 광효율을 높은 LED 렌즈를 개발한 바 있고, 생체모사를 통한 무반사 기판을 제작하는 등 해당 분야를 선도하고 있다.
최근 전자기기 및 광학기기의 소형화로 초박형 디지털카메라에 대한 수요가 증가하고 있다. 그러나 기존의 카메라 모듈은 광학적 수차를 줄이기 위해 광축을 따라 복수의 렌즈로 구성돼 있어 부피가 매우 크다는 단점이 있다. 이런 모듈을 단순히 크기만 줄여 소형기기에 적용하면 분해능과 감도가 떨어지게 된다.
연구팀은 문제 해결을 위해 곤충인 제노스 페키의 시각구조를 적용한 렌즈를 제작했고 이를 이미지 센서와 결합한 초박형 디지털카메라를 개발했다.
곤충의 겹눈구조는 수백, 수천 개의 오마티디아라 불리는 아주 작은 광학 구조로 이뤄져 있다. 일반적인 겹눈구조는 수백, 수천 개의 오마티디아에서 한 개의 영상을 얻지만, 제노스 페키는 다른 곤충과는 달리 각 오마티디아에서 개별의 영상을 획득할 수 있다. 또한 오마티디아 사이에 빛을 흡수할 수 있는 독특한 구조를 가져 각 영상 간 간섭을 막는다.
연구팀이 개발한 카메라는 2mm 이내의 매우 작은 크기로 제노스 페키의 겹눈구조를 모방해 수십 개의 마이크로프리즘 어레이와 마이크로렌즈 어레이로 구성된다. 마이크로프리즘과 마이크로렌즈가 한 쌍으로 채널을 이루고 있으며 각각의 채널 사이에는 빛을 흡수하는 중합체가 존재하며 각 채널 간 간섭을 막는다.
각각의 채널은 화면의 다른 부분들을 보고 있으며 각 채널에서 관측된 영상들은 영상처리를 통해 하나의 영상으로 복원돼 넓은 광시야각과 높은 분해능을 확보할 수 있다.
정기훈 교수는 “초박형 카메라를 제작하는 새로운 방법을 제시했다”며 “이 연구는 기존의 평면 CMOS 이미지 센서 어레이에 마이크로 카메라를 완전히 장착한 초박형 곤충 눈 카메라의 첫 번째 데모이며 다양한 광학 분야에 큰 영향을 미칠 것으로 확신한다.”라고 말했다.
□ 그림 설명
그림1. (좌) 제노스 페키의 SEM 영상. (우) 형광 염색된 제노스 페키의 시각구조
그림2. (좌) MEMS 공정을 통해 제작된 마이크로프리즘 어레이의 SEM 영상. (우) 완성된 초박형 디지털 카메라의 광학 영상
그림3. (좌) Xenos peckii의 시각기관을 통해 얻은 영상. (우) 초박형 디지털 카메라를 통해 얻은 영상
2018.11.20 조회수 5556 -
김상욱 교수, 카메라 플래시로 7나노미터 반도체 패턴 제작 기술 개발
〈 김상욱 교수, 진형민 연구원 〉
우리 대학 신소재공학과 김상욱 교수 연구팀이 카메라의 플래시를 이용해 반도체를 제작하는 기술을 개발했다.
이 기술은 반도체용 7나노미터 패턴 기법으로 한 번의 플래시를 조사하는 것만으로 대면적에서 초미세 패턴을 제작할 수 있다. 향후 고효율, 고집적 반도체 소자 제작 등에 활용 가능할 것으로 기대된다.
진형민 연구원, 박대용 박사과정이 공동 1저자로 참여한 이번 연구 결과는 국제 학술지 ‘어드밴스드 머티리얼즈(Advanced Materials)’ 8월 21일자 온라인 판에 게재됐다.
4차 산업혁명의 주요 요소인 인공지능, 사물인터넷, 빅데이터 등의 기술에는 고용량, 고성능 반도체 소자가 핵심적으로 필요하다. 이러한 차세대 고집적 반도체 소자를 만들기 위해서는 패턴을 매우 작게 형성하는 리소그래피(Lithography) 기술의 개발이 필수적이다.
현재 관련 업계에서는 작은 패턴 제작에 주로 광 리소그래피(Photolithograph) 기술을 이용하고 있다. 하지만 이 기술은 10나노미터 이하의 패턴을 형성하기엔 한계가 있다.
고분자를 이용한 분자조립 패턴 기술은 공정비용이 저렴하고 10나노미터 이하 패턴 형성이 가능해 광 리소그래피를 대신할 차세대 기술로 각광받고 있다. 그러나 고온 열처리나 유독성 증기 처리에 시간이 많이 소요되기 때문에 대량 생산이 어려워 상용화에 한계가 있다.
연구팀은 고분자 분자조립 패턴 기술의 문제 해결을 위해 순간적으로 강한 빛을 내는 카메라 플래시를 활용했다. 플래시 빛을 이용하면 15 밀리 초(1밀리 초 : 천분의 1초) 내에 7나노미터의 반도체 패턴을 구현할 수 있고, 대면적에서 수십 밀리 초의 짧은 시간 내에 수 백도의 고온을 낼 수 있다.
연구팀은 이 기술을 고분자 분자 조립에 응용해 단 한 번의 플래시를 조사하는 것으로 분자 조립 패턴을 형성할 수 있음을 증명했다.
또한 연구팀은 고온 열처리 공정이 불가능한 고분자 유연 기판에도 적용이 가능함을 확인했다. 이를 통해 차세대 유연 반도체 제작에 응용할 수 있을 것으로 보인다.
연구팀은 카메라 플래시 광열 공정을 분자 조립 기술에 도입해 분자 조립 반도체기술의 실현을 앞당길 수 있는 고효율의 기술이라고 밝혔다.
연구를 주도한 김상욱 교수는 “분자조립 반도체 기술은 그 잠재성에도 불구하고 공정효율 제고가 큰 숙제로 남아 있었다”며 “이번 기술은 분자조립기반 반도체의 실용화에 획기적 해결책이 될 것이다”고 말했다.
신소재공학과 이건재 교수, 부산대학교 재료공학과 김광호 교수와의 공동으로 진행된 이번 연구는 과학기술정보통신부 리더연구자지원사업인 다차원 나노조립제어 창의연구단과 글로벌프론티어사업의 지원을 받아 수행됐다.
□ 사진 설명
사진1. 플래시 광을 이용한 반도체 패턴 형성
사진2. 플래시 광을 이용한 분자조립 패턴 형성 모식도
사진3. 다양한 가이드 패턴을 이용한 자기조립 패턴 제어와 고분자 유연기판에서의 플래시 자기조립 패턴 형성
2017.09.13 조회수 11456 -
이의진 교수, 스마트폰으로 문서 촬영 시 발생하는 회전 오류 문제 해결
〈 이의진 교수(좌)와 오정민 박사과정(우) 〉
우리 대학 산업및시스템공학과 이의진 교수 연구팀이 스마트폰 카메라로 문서를 촬영할 때 자동으로 발생하는 불규칙적인 회전 오류 현상의 원인을 밝히고 해결책을 개발했다.
연구팀은 스마트폰의 방위 추적 알고리즘의 한계가 회전 오류의 원인임을 규명했다.
이번 연구 결과는 인간-컴퓨터 상호작용 학회의 국제 학술지인 ‘인터내셔널 저널 오브 휴먼 컴퓨터 스터디(International Journal of Human-Computer Studies)’ 4월 4일자 온라인 판에 게재됐고 8월호 저널에 게재될 예정이다.
스마트폰을 통해 책자, 문서 등을 촬영해 업무에 활용하는 것은 자연스러운 일상이 됐다. 하지만 촬영한 문서가 자동으로 90도 회전하는 현상으로 인해 불편을 겪는 사람들이 많다.
특히 여러 장의 사진을 찍었을 때 각기 다른 방향으로 회전돼 일일이 스마트폰을 돌리거나 파일을 편집해야 하는 현상이 발생한다.
스마트폰으로 문서를 촬영할 때는 대부분 스마트폰과 책상 위 문서가 평행 상태이다.
이 때 스마트폰을 회전시키면 스마트폰의 방위 추적 알고리즘이 작동하지 않는다. 방위 추적 알고리즘은 기본적으로 사용자가 스마트폰을 세워서 사용한다는 가정 하에 한 방향으로 가해지는 중력가속도를 측정해 현재 방위를 추정하는 방식으로 설계됐기 때문이다.
연구팀은 실험을 통해 오류 발생 수치를 측정했다. 실험 결과 문서를 가로로 촬영 시 방위 추적 오류가 93%의 높은 확률로 발생함을 확인했다.
일반 사용자는 오류의 원인을 파악하기 어렵다. 대부분의 카메라 앱은 셔터 버튼에 있는 카메라 모양의 아이콘 방향을 통해 실시간 방위를 표시하고 있지만 이러한 기능에 대해서도 사용자들은 인지하지 못한 것으로 파악됐다.
연구팀은 스마트폰의 모션센서 데이터를 활용해 문서 촬영 중에 방위를 정확하게 추적해 문제를 해결했다.
모션센서 데이터의 핵심 기술은 두 가지로 구분할 수 있다. 일반적으로 스마트폰으로 문서를 촬영할 때는 스마트폰이 지면과 평행을 이루기 때문에 스마트폰에 장착된 중력 가속도 센서를 관측해 이러한 문서 촬영 의도를 쉽게 알 수 있다.
두 번째로 문서 촬영 중에 발생하는 스마트폰 회전은 회전 각속도를 측정하는 센서를 활용해 추적할 수 있다. 카메라 앱 실행 후에 문서 촬영을 위해 스마트폰을 회전시키기 때문에 이를 측정해 회전각이 일정 임계치를 넘으면 방위를 변경하는 것으로 파악할 수 있고 이를 통해 방향을 알 수 있는 것이다.
또한 연구팀은 문서 촬영 시 촬영자 쪽으로 스마트폰이 미세하게 기울어지는 마이크로 틸트(micro-tilt) 현상을 발견했다.
이 현상으로 인해 스마트폰으로 가해지는 중력가속도가 스마트폰 측면으로 분산된다. 눈에는 잘 보이지 않을 정도로 작은 기울기지만 모션센서 데이터를 활용해 마이크로 틸트 행동 패턴의 기계학습 알고리즘을 훈련시킬 수 있다. 이를 통해 정확한 방위 추적이 가능하다.
연구 팀의 실험 결과에 따르면 모션센서 데이터를 활용한 방위 추적 방식의 정확도는 93%로 매우 높아 안드로이드 및 iOS등 상용 스마트폰에도 적용 가능하다.
이 기술들은 기존 방위 추적 알고리즘의 사각지대였던 수평 촬영 상황에서 작동하기 때문에 기존 방위 추적 알고리즘과 겹치는 부분 없이 상호 보완적으로 작동할 수 있다.
이 교수는 “스마트폰을 활용한 문서 촬영은 필수가 됐지만 회전 오류의 원인 규명과 해결책이 어려워 불편함이 많았다”며 “모션센서 데이터를 통해 촬영의 의도를 파악하고 자동으로 오류를 바로잡는 기술은 사용자의 불편을 해결하고 문서 촬영에 특화된 다양한 응용서비스 개발의 기초가 될 것이다”고 말했다.
미래창조과학부의 지원을 통해 수행된 이번 기술 중 국내 특허 2건이 등록이 완료됐고 미국 특허가 3월 1일에 수락됐다.
□ 그림 설명
그림1. 방위 오류 발생으로 인해 생기는 불편함
그림2. 평면촬영시 발생하는 방위 오류 상태
그림3. 자이로스코프를 활용한 스마트폰 회전 추적 모식도
그림4. 마이크로틸트현상
2017.06.27 조회수 8350 -
박용근 교수, 홀로그래픽 촬영 카메라 개발
우리 대학 물리학과 박용근 교수 연구팀이 간유리(optical diffuser, 광 디퓨저)를 이용한 홀로그래픽 카메라를 개발했다.
연구팀의 홀로그래픽 카메라는 어떠한 가정도 필요 없이 일반적인 홀로그램을 측정하는 기술로 사진 찍듯 홀로그램을 측정할 수 있는 이상적인 홀로그래피에 근접한 기술이다.
이번 연구 결과는 네이처 자매지 ‘네이처 커뮤니케이션즈(Nature Communications)’ 10월 28일자 온라인 판에 게재됐다.
사진은 실제 눈으로 보는 것과 같은 원근감과 볼륨감을 표현할 수 없다. 그 이유는 현존하는 전자기기의 대역폭(~100 GHz)이 가시광의 진동수(~100 THz)에 훨씬 미치지 못하기 때문이다.
따라서 사진 기술로는 빛의 세기만 측정 가능하고, 원근감과 입체감 정보를 담은 빛의 파면 정보는 직접적으로 측정할 수 없다.
위상 문제(phase problem)라고 불리는 이 현상은 가시광 뿐 아니라 적외선, 자외선, 엑스레이 등 전자기파를 다루는 방대한 분야 전반에 큰 걸림돌로 남아 있었다.
이러한 위상 문제를 피해 간접적으로 빛의 파면을 측정하는 기술을 홀로그래피라고 한다. 그러나 이 홀로그래피 기술은 추가적인 참조 빛을 필요로 해 사진기술처럼 빠르게 전파되지 못했다.
수 세기동안 과학자들은 사진 찍듯 홀로그램을 찍기 위해 연구했으나 제안된 기술들은 대부분 특수한 입사 빛을 가정한 상황에서만 작동해 일반적인 상황에서 널리 사용되지 못했다.
연구팀은 입사 빛의 특수한 상황을 가정하는 대신 간유리를 활용해 입사 빛을 무작위로 산란시켰다. 무작위로 산란된 빛의 결맞음(파동이 간섭 현상을 보이는 성질) 정도에 대한 수학적 상관관계를 활용해 입사한 빛의 파면을 온전히 측정할 수 있음을 이론적으로 제안했다.
연구팀은 이론에 따라 렌즈 대신 간유리를 삽입한 홀로그래픽 카메라를 제작했고 실험을 통해 성공적으로 작동하는 것을 확인했다. 일상에서 쉽게 볼 수 있는 물체를 홀로그램으로 측정했고, 초점 위치를 자유자재로 바꿈으로써 이 기술이 일반적인 경우에도 작동함을 증명했다.
연구팀의 홀로그래피 카메라는 그 형태와 구성이 간단해 렌즈 대신 간유리를 카메라 센서 앞에 대는 것만으로 홀로그램의 측정이 가능해진다. 핸드폰 카메라 등에 적용해 상용화가 가능할 것으로 기대된다.
같은 원리를 활용해 다른 대역의 위상 문제도 해결할 수 있다. 특히 엑스레이 영역의 문제를 해결한다면 초고해상도 엑스레이 현미경의 구현이 가능해져 과학계 전반에 큰 발전을 가져올 수 있을 것으로 예상된다.
논문의 1저자인 이겨레 학생은 “이번 기술은 사진을 찍듯 홀로그램을 측정할 수 있는 이상적인 홀로그래픽 카메라에 가장 근접한 기술이다”며 “핸드폰 카메라 등에 쉽게 적용해 홀로그래피의 대중화가 가능할 것으로 기대된다”고 말했다.
□ 그림 설명
그림1. 제안된 홀로그래픽 카메라. 일반적인 광 디퓨저를 홀로그래픽 렌즈로서 활용
그림2. 입사한 빛의 파면 (왼쪽, incident field)과 제안된 기술로 측정된 파면 (오른쪽, retrieved field)
그림3. 일반적인 물체의 (주사위) 홀로그램
2016.11.01 조회수 10248 -
동작 인식 증강현실 스마트 안경 개발
〈 유 회 준 교수 〉
우리 대학 전기 및 전자공학과 유회준 교수 연구팀이 동작 인식이 가능한 증강 현실 전용 초저전력 스마트 안경 ‘케이 글래스 3(K-Glass 3)’를 개발했다.
유 교수 연구팀은 2014년 증강현실을 기반으로 한 케이 글래스 1, 2015년 시선추적이 가능한 케이 글래스 2에 이어 동작 인식이 가능한 3번째 버전의 케이 글래스 3를 발표했다.
이번 연구는 지난 달 31부터 5일간 미국 샌프란시스코에서 열린 국제고체회로설계학회(ISSCC)에서 발표됐다.
케이 글래스 3의 핵심 기술은 스테레오 카메라 시스템이다. 이를 통해 사용자가 가상 키보드를 타이핑하거나 가상 피아노 연주를 하는 등의 증강 현실을 체험할 수 있다.
기존 안경형 스마트 기기에서는 텍스트 전송을 위한 UI/UX(사용자 인터페이스 및 경험)가 없어 텍스트에 익숙한 사용자들에게 유용할 것으로 기대된다.
최근 대기업에서 발표되는 증강현실 기기들은 복잡한 알고리즘 처리를 위한 컴퓨터가 추가로 요구되고, 가상 아이콘 클릭 등의 심화 동작을 인식하기 위한 전용 센서를 필요로 한다.
이는 평균 3와트(W) 이상의 많은 전력을 소모시켜 스마트폰 대비 20%에 불과한 스마트 안경 시스템에서 사용하기엔 부적합하다.
그러나 케이 글래스 3의 스테레오 카메라 시스템은 복잡한 스테레오 비전 알고리즘을 초저전력 프로세서 내에서 평균 20mW의 효율로 가속하기 때문에 24시간 이상 동작 가능하다.
이는 연구팀이 저전력 딥러닝 전용 멀티코어를 모바일 기기에서 가속할 수 있도록 개발해 전용 프로세서 내에 집적했기 때문에 가능했다.
딥러닝 멀티코어는 총 7개의 고성능 코어로 구성돼 있고 사용자 동작 인식을 33ms 이내의 빠른 속도로 가속해 편리함을 증가시켰다. 또한 동작을 탐지해 사용하지 않을 때는 작동을 멈춰 초저전력으로 가속할 수 있다.
연구팀은 스마트 안경 시장이 스마트폰을 대체하기 위해선 저전력, 소형화는 물론 편리하고 직관적인 유저 인터페이스 및 경험(UI/UX) 개발이 필수적이라고 말했다.
이에 유 교수는 “케이 글래스 3는 기존 안경형 디스플레이(HMD)가 지원하지 않는 편리하고 직관적인 UI를 결합해 하나의 저전력 시스템으로 구현하는 데 성공했다”며 “미래 스마트 모바일 IT 분야에서 혁신적 변화를 주도할 것이다”고 말했다.
박성욱 박사과정 학생이 주도한 이번 연구는 유저 인터페이스 및 경험 개발 기업인 UX Factory와의 협업을 통해 진행됐다.
□ 그림 설명
그림1. 착용 이미지
그림2. 케이글래스 3 실제사진
그림3. 케이글래스 3를 통해 구현한 가상키보드,가상피아노
2016.02.25 조회수 9148 -
데이터 소비 없이 실시간으로 사진 공유한다
〈이 의 진 교수〉
우리 대학 지식서비스공학과 이의진 교수 연구팀이 실시간 사진 공유와 고용량 사진의 무료 고속 다운로드가 가능한 실시간 사진공유 시스템 ‘렛츠픽(LetsPic)’을 개발했다.
최근 스마트폰을 통해 시공간에 구애받지 않고 사진 촬영이 가능해져 여행, 현장학습, 레저 등의 그룹 활동에서 촬영과 동시에 SNS를 통해 함께 사진을 공유하는 문화가 보편화됐다.
하지만 그룹 활동 중 사진 촬영과 공유가 불편할 때도 있다. 예로 등산 동호회에서 등산 중 사진을 찍고 공유하는 과정을 살펴보면 개인이 찍은 사진을 일일이 선택하고 그룹 메신저나 SNS를 통해 전송하는 과정이 필요하다. 수신자도 원하는 사진을 수동으로 선별해서 다운로드해야한다.
또한 수십 장의 사진을 이동 중 전송하고 싶어도 데이터 요금 부담 때문에 현장에서 즉각적인 공유가 어렵다. 현장 체험 학습에서 실시간으로 사진을 공유하며 회의를 진행해야 할 때 데이터 소비의 부담은 더욱 커진다.
연구팀은 문제 해결을 위해 실시간 사진 공유와 고화질 사진의 무료 고속 다운로드가 가능한 렛츠픽(LetsPic) 시스템을 개발했다.
렛츠픽의 특징은 같은 그룹끼리 사진첩을 실시간 공유하는 커넥티드 그룹 카메라 기능에서 찾을 수 있다.
사진을 찍는 즉시 그룹 사진첩에 공유돼 그룹 활동 중 언제든 다 같이 사진을 감상할 수 있다. 그리고 구글 지도상에 사진 촬영한 흔적을 남겨 여행 경로를 공유할 수 있다.
무엇보다도 렛츠픽의 장점은 와이파이나 통신사를 거치지 않는 단말간 직접통신(D2D:device to device) 기술인 와이파이 다이렉트(Wi-Fi Direct) 기술에 최적화시켰다는 점이다.
이를 통해 200미터 이내 근거리에서는 데이터 소비 없이 고용량의 사진을 무료로 고속 다운로드할 수 있고, 통신망이 열악한 산악이나 통신비가 비싼 해외여행 중에도 부담 없이 사진을 주고받을 수 있다.
연구팀은 KAIST 캠퍼스 학생들 대상으로 기존 카메라와 커넥티드 그룹 카메라의 비교 평가를 실시했다. 그룹 카메라 앱이 다른 그룹원의 촬영 활동을 실시간으로 파악할 수 있고, 각자 원하는 사진을 D2D를 이용해 데이터 소비 없이 고속 다운로드 할 수 있어 흥미를 높여준다는 의견을 얻었다.
향후 연구팀은 고도화된 지능형 서비스 기술 개발을 통해 그룹의 상황을 인지해 촬영 결과물에서 유사 이미지를 자동 태그하거나 그룹에 맞는 베스트 사진을 자동 추출하는 등 맞춤형 서비스 기술을 추가 개발할 예정이다.
이의진 교수는 “기존 스마트폰에 존재하는 기술인 와이파이 다이렉트 기술을 최대한으로 활용한 차세대 커넥티드 그룹 카메라 시스템이다”며 “이를 통해 오프라인 그룹활동에 특화된 새로운 사용자 경험을 제공한다”고 설명했다.
이번 연구(총괄책임 KAIST 산업공학과 박준성 초빙교수)는 미래창조과학부 및 정보통신기술연구진흥센터의 정보통신-방송 연구개발사업의 지원을 받아 리코시스, 고려대, 명지대, 한경대, 경상대와 공동으로 진행됐다.
□ 그림 설명
그림1. 렛츠픽 시작화면
그림2. 와이파이 다이렉트 기술로 다른 그룹원과 직접 공유하기 위해 연결 설정하는화면
그림3. 와이파이 다이렉트 기술로 다른 그룹원의 사진을 무료 다운로드하는 사진
그림4. 사진 촬영하면서 동시에 그룹원의 사진을 실시간 공유하는 화면
그림5. 사진 촬영 한 장소를 구글맵 상에 표시해 여행 경로를 파악 가능
2016.01.13 조회수 10261