본 논문은 고부가가치의 콘텐츠인 디지털 홀로그램을 허락된 사용자만 볼 수 있도록 하는 암호화 방법을 제안한다. 본 논문에서는 프레넬 변환의 특성 즉, 회절거리를 증가시키면 객체영역이 상대적으로 회절평면 일부분에 집중되는 현상을 이용한다. 객체 에너지가 집중되는 영역만을 암호화함으로써 암호화 영역을 크게 줄여 적은 양을 암호화하고도 높은 암호화 효율을 얻는 방법을 제안한다. 그 방법으로는 홀로그램의 복원을 위한 프레넬 변환과 에너지 집중을 위한 프레넬 변환을 통하여 홀로그램 정보를 가운데로 집중시키고 이를 암호화하는 방법이다. 두 번째 프레넬 변환의 파라미터인 회절거리를 조절하여 에너지 집중정도를 결정하고, 가중치를 조절함으로써 암호화 영역의 크기를 조절하여 암호화 강도를 결정한다. 이를 위해 거리와 가중치에 따른 최적의 암호화 지점을 분석한다. 이 암호화 방법을 적용하였을 때 회절거리가 20 m 일 때 전체 영상의 0.005% ~ 0.02%만 암호화를 하여도 객체정보를 시각적으로 확인할 수 없었다. 홀로그램은 1946년 Dennis Gabor가 발명한 이후 미국, 유럽, 일본 등에서 꾸준히 연구되고 있다 [1] . 홀로그램은 공간상에3D 영상을디스플레이하는 기술로기존의3D 영상에서의 문제점들을 완전히 해결할 수 있다 [1] [2] . 홀로그램은 참조파(Reference wave)와 객체로부터 반사된 파(Object wave)간 빛의 간섭현상을 기록하는 것으로 기록 매체가 CCD(Charge Coupled Device)일경우 등디지털로기록된것을 디지털 홀로그램이라 한다 [3] . 그러나 광학적으로 간섭현상을 일으키는 이 방법으로 디지털 홀로그램을 생성하기 위해서는 정교한 광학장치를 사용하는 등 많은 제약이 따르므로 [3] , 이를 수학적으로 모델링한 CGH(Computer Ge- nerated Hologram) 방법을 많이 사용하고 있다 [3] . 그러나 CGH 방법 또한 많은 양의 계산이 필요하다. 이러한 문제점을 해결하기 위해 다양한 방법의 서비스 방법들이 연구되기도 하였다 [4] . 이처럼 홀로그램 콘텐츠는 제작부터 서비스까지 많은 비용이 소요되는 고가의 콘텐츠이기 때문에 콘텐츠 보호를 위해 여러 연구가 진행되어 왔다 [5 - 14] . 이러한 콘텐츠 보호를 위한 연구는 크게 두 가지로 분류할 수 있는데 먼저 홀로그램의 소유권을 주장하기 위한 워터마킹에 대한 연구 [5 - 9] 와 허가되지 않은 사용자가 볼 수 없도록 하기 위한 암호화연구 [10 - 14] 가 있다. 본 논문에서는 디지털 홀로그램 콘텐츠의 암호화를 목적으로 한다. 미국의 University of Connecticut의 연구팀에서는 위상 이동(Phase-shifting) 기법의 광학적 홀로그램 획득과정 중 임의의 위상 마스크(Random Phase Mask)를 이용하여 암호화 하는 방법을 개발 하였다 [10] . 성균관 대학교의 연구팀에서는 위상 이동(Phase-shifting) 기법으로 획득한 홀로그램에 임의의 위상과 가상의 광학계를 이용하여 프레넬 변환하여 암호화된 홀로그램을 획득하는 방법을 연구하였는데 [11] , 여기서는 임의의 위상과 가상의 광학계의 파라미터를 암호화 키로 사용하였다. 중국의 Zhejian 대학에서는 확장된 프레넬 변환을 이용하여 다수의 가상의 광학계와 임의의 위상을 이용하여 홀로그램을 암호화 하는 방법을 제안하였다 [12] . 본 연구팀에서는 홀로그램 도메인과 DCT 및 DWT를 홀로그램에 적용하여 부분적 암호화에 대한 연구를 진행하였고 [13] , DWT를 홀로그램에 적용한 뒤 각 밴드별 에너지를 정렬하여 큰 에너지만 부분적 암호화 하는 연구를 진행하였다 [14] . 본 논문에서는 디지털 홀로그램에 프레넬(Fresnel) 변환의 특성을 이용하여 홀로그램 정보를 일부분에 집중시켜 적은 양의데이터를 암호화하는방법을제안한다. 이방법은 프레넬 변환 거리에 따라 상대적으로 에너지가 집중되는 현상을 이용한다. 제안한 방법은 실험을 통하여 기존 연구들보다 적은 양을 암호화하여 동일한 효과를 얻을 수 있음을 보인다. 본 논문의 구성은 다음과 같다. 2장에서는 프레넬 변환과 본 논문에서 사용할 특성에 대하여 설명하고, 3장에서 본 논문에서 제안하는 암호화 방법을 설명한다. 4장에서 실험 및 그 결과를 분석하고 5장에서 실험결과를 토대로 본 논문의 결론을 맺는다. 프레넬 변환은 하나의 점광원으로부터 발생하는 전자기 파의 회절현상을 수학적으로 모델링한 것이다. 식 (1)은 모 든 광원 E ( ξ , η ,0)으로부터 z 만큼 떨어진 g ( χ , ψ , z )에서 회절결과로 생성되는 전자기파의 크기를 나타낸다. 이 식에서 k 는 파수로 2 π / λ 이고 λ 는 광원의 파장이다 [15] . 식 (1)을 이산화하면 식 (2)와 같이 나타낼 수 있는데, Δu , Δv 는 E ( u , v ,0)의 화소의 크기, Δx , Δy 는 g ( x , y , z )의 화소의 크기이고, N , M 은 E ( u , v ,0) 평면의 해상도이다 [15] . 식(2)는 Δu 와 Δx , Δv 와 Δy 의 관계식인 식(3)을 이용하면 식(4)와같이푸리에(Fourier) 변환을이용한식으로정 의할 수 있다. 여기서 Ƒ[ x ]는 x 의 푸리에 변환을 의미한다. 그림 1 은 광 평면에서 각각 z_a , z_b , z_c 만큼 떨어진 회절 평면 P_a , P_b , P_c 을 도식화한 것이다. 평면파의 진행 방향은 평면의 법선 방향이므로 평면 P_a , P_b , P_c 에 나타나는 회절 패턴의 실제 크기는 광 평면의 실제 크기와 같다. 반대로 식 (3)의 관계식에 의해 회절 평면의 화소 크기는 거리에 따라 증가하기 때문에 P_a , P_b , P_c 가 나타내는 실제 크기는 z 가 멀어질수록 커진다. 그림 2 는 1,024×1,024 크기를 갖 고 모든 화소가 흰색인 입력영상(광원평면, 그림 2 (a))을 거 리에 따라 프레넬 변환을 적용시킨 결과이다. 프레넬 변환에 사용된 입력 영상의 화소 크기는 10 μm 이고 광원의 파장은 633 nm 이다. 또한 거리는 50 cm ( 그림 2 (b)), 70 cm ( 그림 2 (c)), 100 cm ( 그림 2 (d))이며, 따라서 회절 평면의 화소의 크기는 식 (3)에 의해 각각 30.91 μm , 44.27 μm , 61.82 μm 이고, 실제 평면의 크기는 각각 31.65 ×31.65 mm ² ,44.31×44.31 mm ² ,63.3×63.3 mm ² 이다. 그림에서 볼 수 있듯이 회절평면까지의 거리가 멀어질수록 물체의 크기는 변하지 않지만 회절평면의 크기에 대비한 상대적인 물체크기는 줄 어드는 것을 볼 수 있다. 디지털 홀로그램은 CCD를 통해 획득한 간섭 패턴을 SLM(Spatial Light Modulator)과 같은 특별한 회절장치를 사용하여 복원한다. 이때 획득할 때 사용했던 참조파를 SLM에 조사하여 회절 현상에 의해 복원한다. 그러나 특별한 목적이나 시뮬레이션 용도로 프레넬 변환을 통해 회절된 결과영상을 복원하기도 한다. 그림 3 은 디지털 홀로그램을 프레넬 변환을 이용하여 영상으로 복원한 예이다. 그림 3 (b)는 복원한 프레넬 평면의 거리를 원 객체의 거리와 같게 한 경우이고, 그림 3 (a)와 (c)는 각각 원 객체의 거리보다 프레넬 평면이 가깝거나 먼 경우이다. 홀로그램에 프레넬 변환을 적용하면 앞 절에서 설명한 2D 영상에서의 특성(거리가 증가할수록 물체의 크기가 상대적으로 작아지는 특성, 즉 그림 3 (b)의 A로 표시한 영역)과 홀로그램에 의한 특성(복원 거리와 객체의 위치가 같을 경우 초점이 맞추어지는 특성, 그림 3 (b)의 B로 표시한 영역)이 존재하게 된다. 그림 4 는 본 논문에서 제안하는 홀로그램 암호화 알고리즘을 흐름도로 나타낸 것으로, 앞 장에서 설명한 프레넬 변환 특성을 이용한다. 2-3절에서 설명한 바와 같이 홀로그램에 대한 프레넬 변환의 특성으로 인하여 객체정보가 상대적으로 가운데로 집중되는 영역뿐만 아니라 객체 영역이 각각 존재하기 때문에 암호화 영역을 줄일 수 없다. 따라서 홀로그램을 Fresnel 변환으로 복원(1st Fresnel transform for reconstruction)하면 복원영상은 2D 영상이므로 여기에 프레넬 변환(2nd Fresnel transform for concentration)을 적용하면 앞서 설명한 바와 같이 복원거리(변환거리 또는 회절거리)에 따라 영상정보가 가운데로 집중된다. 그림 5 는 두 번째 프레넬 변환을 수행한 결과의 예를 보이고 있다. 이때 거리( z )를 제외한 모든 파라미터는 첫 번째 프레넬 변환의 파라미터와 같게 하여 수행한다. 그림 5 (a), (b), (c)는 복원거리를 50 cm 로 한 경우의 실수부, 허수부, 그리고 크기부이고, 그림 5 (d), (e), (f)는 복원거리를 200 cm 로 하였을 때의 실수부, 허수부, 크기부이다. 그림 5 에서 볼 수 있듯이 두 번째 프레넬 변환에서 거리를 증가시킬수록 영상 정보는 가운데로 집중된다. 다음으로 암호화 영역의 크기를 결정(Determine ciphering size)하기 위해 집중된 영역을 구하는데, 식 (5)와 (6)을 통하여 크기를 구할 수 있고 가중치(scaling factor)를 사용하여 암호화 영역을 결정한다. m , n 은 각각 집중된 영역의 가로와 세로의 크기이고, w_s 는 가중치, m_c 와 n_c 는 각각 암호화 영역의 가로와 세로의 크기이다. 암호화 영역의 크기가 결정되면 그 크기의 가운데 영역의 각 화소 중 최상위 비트만을 모아서 블록 암호화 알고리즘 [16] 을 사용하여 암호화(Encryption)를 수행하고, 그 결과를 두 번의 역 프레넬 변환(2nd Fresnel transform for concentration-1, 1st Fresnel transform for reconstruction-1)을 거쳐 암호화된 홀로그램(Encrypted hologram)을 생성한다. 두 번의 프레넬 변환의 파라미터, 암호화 영역의 크기 및 블록 암호화의 암호키를 합쳐 전체 보안키로 사용한다. 그림 6 은 암호화된 홀로그램을 복호화하는 과정을 보이고 있다. 복호화 방법은 암호화 방법과 동일하고 암호화 과정에서 구한 암호화 영역의 크기 및 프레넬 변환의 파라미터와 암호키를 사용하여 암호화와 동일한 과정으로 복호화를 수행한다. 이 때 암호화 과정에서의 프레넬 변환은 모두 동일하고, 암호화만 복호화(decryption)으로 바꾸면 된다. 제안한 암호화 방법을 검증하기 위해 표 1 에 나타낸 영상의 홀로그램을 이용하여 실험하였다. 표 1 의 테스트 영상은 텍스쳐(texture)+깊이(depth) 또는 깊이영상들로, 실험을 위하여 CGH 방법을 이용하여 디지털 홀로그램을 획득하여 사용하였다. 표 1 의 영상 획득방법 중 Vertical-rig system은 본 연구실에서 직접 제작한 디지털 홀로그램 서비스 시스템 [3] 의 영상 획득부를 뜻한다. 표 2 에 CGH를 위한 파라미터를 나타내었다. 또한 정량적 통계를 위하여 암호화된 홀로그램 및 복원된 영상의 상관성 정도를 평가하기 위해 식 (8)의 normalized cross correlation (NCC)을 사용하였다. f ( x ), g ( x )는 비교할 두 입력 영상이고, f_ave , g_ave 는 두 영상의 평균이다. 전체 홀로그램 대비 암호화되는 비율을 측정하기 위해 화소당 8비트의 M × N 입력 홀로그램에 대한 m_c × n_c 암호화 영역 내의 최상위 비트의 비율은 식 (9)와 같이 계산하였다. 그림 7 은 표 1 의 rabbit 영상을 각각 집중을 위한 프레넬 변환에서 회절거리를 각각 1 m , 5 m , 20 m 로 하고 가중치를 증가시켰을 때 원본 홀로그램의 복원 영상에 대한 암호화된 홀로그램 복원영상의 NCC 값을 보이고 있다. 그림 7 과 같이 가중치에 따라서 NCC 값이 최적의 범위까지는 줄어드는 현상을 보이다 다시 증가하는 추세를 볼 수 있다. 1 m 일 때 가중치 0.5 근처에서 최적의 NCC를 가지고, 약 0.094%의 암호화 율을 보인다. 회절거리가 5 m 일 때는 가중치 0.7~1.3 사이에서 최적의 NCC를 가지고 0.0075%~0.0252%의 암호화 율을, 20 m 일 때는 2.4~4.4 사이에서 최적의 NCC를 가지고 0.0053%~0.0181%의 암호화 율을 각각 보이고 있다. 그림 8 은 그림 7 의 1 m , 5 m , 20 m 에서 최적의 가중치를 사용하여 암호화를 수행한 뒤 복원한 영상의 예이다. 그림 8 (a)는 1 m 에서의 0.5 가중치로 암호화하고 복원한 결과이고, 그림 8 (b)과 (c)는 각각 5 m 와 20 m 에서 0.7과 2.4의 가중치로 암호화하고 복원한 결과이다. 그림 9 는 20 m 의 회절거리에서 표 1 의 영상들 중 일부를 가중치를 변화하며 암호화한 결과의 복원영상들에 대해 NCC를 구한 결과이다. 20 m 일 때 약 2.4~5.2 사이의 가중치가 최적의 구간을 보인다. 그림 10 은 4개의 실험영상을 20 m 일 때 가중치의 최적의 구간 내 2.5, 3.5, 5를 이용하여 암호화한 후 복원한 결과를 나타내었다. 그림 10 (a)는 Rabbit 영상의 홀로그램 원본을 복원한 영상이고, 그림 10 (b~d)는 홀로그램에 각각 2.5, 3.5, 5의 가중치로 암호화한 뒤 복원한 영상이다. 그림 10 (e~h)는 위 절차를 Baby영상에 적용한 결과이고, 그림 10 (i~l)은 위 절차를 Sujin 영상에 적용한 결과이다. 그림 10 (m~p)는 Billiard 영상에 적용한 결과이다. 20 m 와 2.5의 가중치를 이용할 때 0.0058%의 암호화 율을 가지고 3.5와 5일 때 각각 0.0115%, 0.0231%의 암호화율 을 갖는다. 또한 그림 10 (r~u)는 광학적으로 획득한 홀로그램으로써 사용된 참조파와 화소의 크기가 다르기 때문에 앞의 영상의 가중치를 적용할 경우 암호화 율이 다르다. 따라서 비슷한 암호화 율을 비교하기 위하여 5, 10 ,15의 가중치로 실험한 결과를 나타내었다. 그림 11 은 앞절에서 설명한 암호화한 홀로그램에 암호화키를 이용하여 복호화 한 결과와 잘못된 암호화 키를 이용하여 복호화 한 결과를 나타내었다. 그림 11 에 (a), (d), (g), (j), (m)는 암호화 하기 전 홀로그램의 복원 영상이고, (b), (e), (h), (k), (n)는 암호화 후 일치하는 암호화 키를 이용하여 복호화 한 뒤 복원한 영상이고 (c), (f), (i), (l), (o)은 일치하지 않은 암호화 키를 사용하였다. 그림 11 에서 볼 수 있듯이 허가된 암호화 키를 소유하지 않을 경우 암호화된 홀로그램을 볼 수 없다. 본 절에서는 본 논문에서 제안하는 암호화 방법과 유사한 디지털 신호처리를 이용한 암호화 방법인 [14] 의 결과와 비교한다. [14] 에서 7레벨의 DWT를 수행하여 암호화를 수행한 결과 에너지 임계치를 35%로 하였을 때 약 0.8의 NCC를 가지고, 임계치를 95%로 하였을 때 0.65의 NCC를 가진다. [14] 에서 7레벨에 35%의 임계치로 암호화를 수행하였을 때 약 0.032%의 암호화 율을 가진다. 본 논문에서 제안하는 암호화 방법으로 20 m 에서 가중치를 2.5로 하였을 때 NCC 값은 평균 0.008이고, 암호화 율은 0.0058%로 약 5배 정도 적은 데이터를 암호화하여도 높은 효율을 보인다. 본 논문에서 홀로그램을 프레넬 변환의 에너지 집중 특성을 이용하여 암호화 영역의 크기를 최소화하여 홀로그램의 정보를 효율적으로 은닉하는 방법을 제시하고, 최적의 거리가 되는 지점에 대하여 분석하였다. 홀로그램의 시험적 복원을 위한 프레넬 변환과 집중을 위한 프레넬 변환을 통하여 복원된 영상 정보를 매우 적은 영역으로 집중시키고 이를 암호화하였다. 집중을 위한 프레넬 변환의 거리에 대한 파라미터를 조절하면서 암호화 정도를 NCC를 통하여 수치적 통계를 통하여 확인하였다. 수치적 통계에 의해 20 m 일 때 가중치를 2~5일 때 최적의 정보 은닉이 가능하였고, 이는 전체 영상의 0.005%~0.02% 정도의 데이터만 암호화하여도 홀로그램을 복원 하였을 때 시각적으로 객체의 정보를 확인할 수 없었다. 따라서 제안한 방법은 고부가기치의 콘텐츠인 디지털 홀로그램에 대한 암호화 방법으로 매우 효과적으로 사용될 수 있을 것으로 기대한다. 이 윤 혁 - 2012년 : 광운대학교 전자재료공학과 졸업(공학사) - 2014년 : 광운대학교 일반대학원 졸업(공학석사) - 2014년 ~ 현재 : 광운대학교 일반대학원 박사과정(공학석사) - Orcid : http://orcid.org/0000-0001-7184-6896 - 주관심분야 : 디지털 홀로그램, SoC 설계 서 영 호 - 1999년 2월 : 광운대학교 전자재료공학과 졸업(공학사) - 2001년 2월 : 광운대학교 일반대학원 졸업(공학석사) - 2004년 8월 : 광운대학교 일반대학원 졸업(공학박사) - 2005년 9월 ~ 2008년 2월 : 한성대학교 조교수 - 2008년 3월 ~ 현재 : 광운대학교 교양학부 부교수 - Orcid : http://orcid.org/0000-0003-1046-395X - 주관심분야 : 실감미디어, 2D/3D 영상 신호처리, 디지털 홀로그램, SoC 설계 김 동 욱 - 1983년 2월 : 한양대학교 전자공학과 졸업(공학사) - 1985년 2월 : 한양대학교 공학석사 - 1991년 9월 : Georgia공과대학 전기공학과(공학박사) - 1992년 3월 ~ 현재 : 광운대학교 전자재료공학과 정교수 - 2009년 3월 ~ 현재 : 광운대학교 실감미디어 연구소 연구소장 - Orcid : http://orcid.org/0000-0001-6106-9894 - 주관심분야 : 3D 영상처리, 디지털 홀로그램, 디지털 VLSI Testability, VLSI CAD, DSP설계, Wireless Communication