KR102589623B1 - Stereo image generating device and method using 360 cam - Google Patents
Stereo image generating device and method using 360 cam Download PDFInfo
- Publication number
- KR102589623B1 KR102589623B1 KR1020220012737A KR20220012737A KR102589623B1 KR 102589623 B1 KR102589623 B1 KR 102589623B1 KR 1020220012737 A KR1020220012737 A KR 1020220012737A KR 20220012737 A KR20220012737 A KR 20220012737A KR 102589623 B1 KR102589623 B1 KR 102589623B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- stereo
- unit
- camera
- dimensional effect
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/221—Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/236—Image signal generators using stereoscopic image cameras using a single 2D image sensor using varifocal lenses or mirrors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Stereoscopic And Panoramic Photography (AREA)
Abstract
본 발명은 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 관한 것으로서, 보다 구체적으로는 360 캠을 이용한 스테레오 영상 생성 장치로서, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부; 상기 영상 촬영부의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부; 및 상기 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부를 포함하는 것을 그 구성상의 특징으로 한다.
또한, 본 발명의 특징에 따른 360 캠을 이용한 스테레오 영상 생성 방법은,
360 캠을 이용한 스테레오 영상 생성 방법으로서, (1) 영상 촬영부가 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 단계; (2) 영상 처리부가 상기 단계 (1)에서 상기 영상 촬영부를 통해 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 단계; 및 (3) 영상 재생부가 상기 단계 (2)에서 상기 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 단계를 포함하는 것을 그 구성으로 특징으로 한다.
본 발명에서 제안하고 있는 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 따르면, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부와, 영상 촬영부의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부와, 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부를 포함하여 구성함으로써, 거울로 이루어진 반사부를 통해 일반 360 카메라로 촬영하여 사이드-바이-사이드 입체 영상을 생성할 수 있도록 할 수 있다.
또한, 본 발명의 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 따르면, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부를 구성하되, 두 개의 거울이 90도로 붙여진 반사부와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부에 비춰진 물체를 촬영하는 360 카메라를 포함하여 구성함으로써, 360 모노카메라를 이용하여 입체감을 느낄 수 있는 스테레오 영상을 획득할 수 있으며, VR 헤드셋을 통해 VR 입체 영상을 제공할 수 있도록 할 수 있다.The present invention relates to a stereo image generating device and method using a 360 cam, and more specifically, to a stereo image generating device using a 360 cam, which captures images with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect. video recording department; an image processing unit that performs stitching, stereo region extraction, and side-by-side conversion processing of the image captured by the image capture unit; and an image playback unit that displays a three-dimensional image on which image processing has been completed through the image processing unit.
In addition, the method of generating a stereo image using a 360 cam according to the characteristics of the present invention includes,
A method of generating a stereo image using a 360 cam, comprising: (1) an image capture unit capturing a image with a camera using reflection of a mirror to obtain a stereo image that provides a three-dimensional effect; (2) an image processing unit performing stitching, stereo region extraction, and side-by-side conversion processing on the image captured through the image capture unit in step (1); and (3) an image reproduction unit displaying a stereoscopic image for which image processing has been completed through the image processing unit in step (2).
According to the apparatus and method for generating a stereo image using a 360 cam proposed in the present invention, an image capture unit that captures images with a camera using reflection of a mirror to obtain a stereo image that provides a three-dimensional effect, and an image captured by the image capture unit. It is composed of an image processing unit that performs stitching, stereo region extraction, and side-by-side conversion processing, and an image playback unit that displays a three-dimensional image for which image processing has been completed through the image processing unit, so that the general You can shoot with a 360 camera to create a side-by-side stereoscopic image.
In addition, according to the apparatus and method for generating a stereo image using a 360 cam of the present invention, an image capture unit is configured to capture images with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect, and the two mirrors are rotated at 90 degrees. By including an attached reflector and a 360 camera that photographs an object reflected in the mirror to capture a stereo image that provides a three-dimensional effect, a stereo image that provides a three-dimensional effect is created using a 360 monocamera. It can be acquired, and VR stereoscopic images can be provided through a VR headset.
Description
본 발명은 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 관한 것으로서, 보다 구체적으로는 거울로 이루어진 반사부를 통해 일반 360 카메라로 촬영하여 사이드-바이-사이드 입체 영상을 생성할 수 있도록 하는 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 관한 것이다.The present invention relates to a stereo image generating device and method using a 360 cam. More specifically, the present invention relates to a stereo image generating device and method using a 360 cam that can generate a side-by-side stereoscopic image by shooting with a general 360 camera through a reflection part made of a mirror. It relates to an apparatus and method for generating stereo images.
VR(Virtual Reality)은 ICT 산업의 주요 이슈로 떠오르고 있으며, IT 기업들은 VR 디바이스를 판매하여 이윤을 창출하고 있다. 그리고 VR 체험을 위한 콘텐츠를 구현하기 위해 여러 시점으로 촬영한 영상을 이어 붙여 다시점에 대한 파노라마 영상을 변환하고, 사용자의 의도에 따라 시점을 변경하여 영상을 확인할 수 있는 360 VR 영상 기술이 개발되고 있다. 하지만 현재 개발되고 있는 360 VR 영상 기술은 고용량을 가지는 영상을 360 VR 영상으로 변환하는데 소요되는 연산시간이 길어져 실시간으로 파노라마 영상을 구현하지 못하는 문제점을 가지고 있다.VR (Virtual Reality) is emerging as a major issue in the ICT industry, and IT companies are generating profits by selling VR devices. In order to implement content for VR experience, 360 VR video technology has been developed to convert panoramic images from multiple viewpoints by stitching together videos taken from multiple viewpoints, and to change viewpoints according to the user's intention to check the video. there is. However, the 360 VR video technology currently being developed has the problem of not being able to create a panoramic video in real time due to the long computation time required to convert a high-capacity video into a 360 VR video.
영상 처리 기술이 발달함에 따라, 사용자에게 보다 실감나는 영상을 제공하기 위한 기술 중 하나로 360도 영상을 제공하는 방법에 대한 연구가 활발하게 이루어지고 있다. 360도 영상을 제공하기 위해서는 실시간으로 사용자의 시선에 대응되는 360도 영상의 부분이 사용자의 양안에 투사될 수 있도록 영상 데이터를 처리하는 기술이 필요하다.As image processing technology develops, research is being actively conducted on methods to provide 360-degree images as one of the technologies to provide more realistic images to users. In order to provide 360-degree video, technology is needed to process video data so that the part of the 360-degree video corresponding to the user's gaze can be projected to both eyes of the user in real time.
한편, 360도 영상의 경우 투사 시, 이를 투사하는 광학 시스템의 특성 및 비선형적 특성으로 인해 처리되어야 하는 데이터가 방대함에 따라, 영상 처리에 많은 시간이 소요될 수 있다. 이로 인해, 실시간으로 360도 영상을 처리하기 위해서는 고성능의 GPU가 요구되거나, 다수의 프로세서가 요구될 수 있다. 이에 따라, 360도 영상 처리에 소요되는 시간 및 하드웨어로 인한 비용을 줄이기 위해 보다 효율적으로 영상 처리를 수행할 수 있는 기술 개발이 필요한 실정이다.Meanwhile, when projecting a 360-degree image, the amount of data to be processed is enormous due to the characteristics and non-linear characteristics of the optical system that projects it, so image processing may take a lot of time. For this reason, a high-performance GPU or multiple processors may be required to process 360-degree images in real time. Accordingly, there is a need to develop technology that can perform image processing more efficiently in order to reduce the time required for 360-degree image processing and the costs due to hardware.
현재 VR(Virtual Reality)을 위한 실사 촬영을 할 때 360도 카메라를 사용한다. 그러나 이는 모노 디스플레이 이다. 즉, VR을 통해 보더라도 양안의 영상이 완전히 동일한 영상을 시청하게 된다. 따라서 입체감을 느낄 수 없으며, 입체감을 느끼기 위해서는 좌우 영상이 다른 스테레오 영상을 얻어야 하는 한계가 따르는 문제가 있었다. 대한민국 등록특허공보 제10-1066542호, 및 등록특허공보 제10-0779634호가 선행기술 문헌으로 개시되고 있다.Currently, 360-degree cameras are used when shooting live action for VR (Virtual Reality). However, this is a mono display. In other words, even when viewed through VR, the images in both eyes are completely identical. Therefore, there was a problem that a three-dimensional effect could not be felt, and in order to feel a three-dimensional effect, a stereo image with different left and right images had to be obtained. Republic of Korea Patent Publication No. 10-1066542 and Korean Patent Registration No. 10-0779634 are disclosed as prior art documents.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부와, 영상 촬영부의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부와, 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부를 포함하여 구성함으로써, 거울로 이루어진 반사부를 통해 일반 360 카메라로 촬영하여 사이드-바이-사이드 입체 영상을 생성할 수 있도록 하는, 360 캠을 이용한 스테레오 영상 생성 장치 및 방법을 제공하는 것을 그 목적으로 한다.The present invention was proposed to solve the above-mentioned problems of the previously proposed methods, and includes an image capture unit that captures images with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect, and an image capture unit that captures images with a camera. It is comprised of an image processing unit that performs stitching, stereo region extraction, and side-by-side conversion processing of the image, and an image playback unit that displays a three-dimensional image whose image processing has been completed through the image processing unit, thereby creating a reflection unit made of a mirror. The purpose is to provide an apparatus and method for generating a stereo image using a 360 cam, which allows generating a side-by-side stereoscopic image by shooting with a general 360 camera.
또한, 본 발명은, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부를 구성하되, 두 개의 거울이 90도로 붙여진 반사부와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부에 비춰진 물체를 촬영하는 360 카메라를 포함하여 구성함으로써, 360 모노카메라를 이용하여 입체감을 느낄 수 있는 스테레오 영상을 획득할 수 있으며, VR 헤드셋을 통해 VR 입체 영상을 제공할 수 있도록 하는, 360 캠을 이용한 스테레오 영상 생성 장치 및 방법을 제공하는 것을 또 다른 목적으로 한다.In addition, the present invention consists of an image capture unit that takes pictures with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect, and includes a reflection unit with two mirrors attached at 90 degrees, and a stereo image that provides a three-dimensional effect. By including a 360 camera that takes pictures of objects reflected in the reflection part made of the mirror, it is possible to obtain stereo images that provide a three-dimensional effect using a 360 monocamera, and VR stereoscopic images through a VR headset. Another purpose is to provide an apparatus and method for generating a stereo image using a 360 cam.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 360 캠을 이용한 스테레오 영상 생성 장치는,A stereo image generating device using a 360 cam according to the characteristics of the present invention to achieve the above object,
360 캠을 이용한 스테레오 영상 생성 장치로서,A stereo image generating device using a 360 cam,
입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부;An image capture unit that captures images with a camera using reflections from mirrors to obtain stereo images that provide a three-dimensional effect;
상기 영상 촬영부의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부; 및an image processing unit that performs stitching, stereo region extraction, and side-by-side conversion processing of the image captured by the image capture unit; and
상기 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부를 포함하는 것을 그 구성상의 특징으로 한다.Its structural feature is that it includes an image playback unit that displays a three-dimensional image whose image processing has been completed through the image processing unit.
바람직하게는, 상기 영상 촬영부는,Preferably, the image capture unit,
거울로 이루어진 반사부; 및a reflector made of a mirror; and
입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부에 비춰진 물체를 촬영하는 360 카메라를 포함하여 구성할 수 있다.It can be configured to include a 360 camera that photographs an object reflected in the reflection portion made of the mirror in order to capture a stereo image that provides a three-dimensional effect.
더욱 바람직하게는, 상기 반사부는,More preferably, the reflection unit,
입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 카메라를 통해 촬영되는 두 개의 거울이 배치되는 구조로 구성될 수 있다.It can be composed of a structure in which two mirrors are placed, photographed through a 360 camera to capture stereo images that provide a three-dimensional effect.
더욱 더 바람직하게는, 상기 반사부는,Even more preferably, the reflecting unit,
두 게의 거울이 배치되는 구조로 구성하되, 두 개의 거울을 90도로 붙여 상기 360 카메라 근처에 배치하여 설치될 수 있다.It consists of a structure in which two mirrors are arranged, and can be installed by attaching the two mirrors at 90 degrees and placing them near the 360 camera.
바람직하게는, 상기 360 카메라는,Preferably, the 360 camera,
거울로 이루어진 반사부를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성될 수 있다.It can be composed of a 360-degree monocamera for shooting stereo images that provide a three-dimensional effect through a reflection unit made of mirrors.
더욱 바람직하게는, 상기 360 카메라는,More preferably, the 360 camera,
거울로 이루어진 반사부를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성하되, 180도의 화각을 갖는 2개의 어안 렌즈(fish eye lens)를 포함할 수 있다.It consists of a 360-degree monocamera for shooting stereo images that provide a three-dimensional effect through a reflection part made of mirrors, and may include two fish eye lenses with a 180-degree angle of view.
더욱 바람직하게는, 상기 영상 처리부는,More preferably, the image processing unit,
상기 영상 촬영부내 360 카메라의 어안 렌즈를 통해 촬영되는 영상을 스티칭 처리하는 스티칭 처리부;a stitching processing unit that stitches an image captured through a fisheye lens of a 360 camera within the video capturing unit;
상기 스티칭 처리부를 통해 스티칭 처리된 영상으로부터 스테레오 영역을 추출하는 영역 추출부; 및a region extraction unit that extracts a stereo region from the image stitched through the stitching processing unit; and
상기 영역 추출부를 통해 추출되는 스테레오 영역에 대해 사이드 바이 사이드 형태로 변환하는 영상 편집을 수행하는 형식 변환부를 포함하여 구성할 수 있다.It may be configured to include a format conversion unit that performs video editing by converting the stereo region extracted through the region extraction unit into side-by-side format.
더욱 더 바람직하게는, 상기 영상 처리부는,Even more preferably, the image processing unit,
상기 360 카메라의 두 개의 어안 렌즈를 통해 촬영되는 좌안 영상과 우안 영상의 처리를 통해 입체감을 느낄 수 있는 좌우 영상이 다른 스테레오 영상을 획득하도록 기능할 수 있다.Through processing of the left-eye image and the right-eye image captured through the two fisheye lenses of the 360 camera, the left and right images that provide a three-dimensional effect can function to obtain different stereo images.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 360 캠을 이용한 스테레오 영상 생성 방법은,The method of generating a stereo image using a 360 cam according to the characteristics of the present invention to achieve the above object is,
360 캠을 이용한 스테레오 영상 생성 방법으로서,A method of generating a stereo image using a 360 cam,
(1) 영상 촬영부가 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 단계;(1) A step where the image capture unit captures images with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect;
(2) 영상 처리부가 상기 단계 (1)에서 상기 영상 촬영부를 통해 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 단계; 및(2) an image processing unit performing stitching, stereo region extraction, and side-by-side conversion processing on the image captured through the image capture unit in step (1); and
(3) 영상 재생부가 상기 단계 (2)에서 상기 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 단계를 포함하는 것을 그 구성으로 특징으로 한다.(3) The image reproduction unit is characterized in that it includes a step of displaying the stereoscopic image for which the image processing has been completed through the image processing unit in step (2).
바람직하게는, 상기 단계 (1)에서의 영상 촬영부는,Preferably, the image capturing unit in step (1),
거울로 이루어진 반사부; 및a reflector made of a mirror; and
입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부에 비춰진 물체를 촬영하는 360 카메라를 포함하여 구성할 수 있다.It can be configured to include a 360 camera that photographs an object reflected in the reflection portion made of the mirror in order to capture a stereo image that provides a three-dimensional effect.
더욱 바람직하게는, 상기 반사부는,More preferably, the reflection unit,
입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 카메라를 통해 촬영되는 두 개의 거울이 배치되는 구조로 구성될 수 있다.It can be composed of a structure in which two mirrors are placed, photographed through a 360 camera to capture stereo images that provide a three-dimensional effect.
더욱 더 바람직하게는, 상기 반사부는,Even more preferably, the reflecting unit,
두 게의 거울이 배치되는 구조로 구성하되, 두 개의 거울을 90도로 붙여 상기 360 카메라 근처에 배치하여 설치될 수 있다.It consists of a structure in which two mirrors are arranged, and can be installed by attaching the two mirrors at 90 degrees and placing them near the 360 camera.
바람직하게는, 상기 360 카메라는,Preferably, the 360 camera,
거울로 이루어진 반사부를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성될 수 있다.It can be composed of a 360-degree monocamera for shooting stereo images that provide a three-dimensional effect through a reflection unit made of mirrors.
더욱 바람직하게는, 상기 360 카메라는,More preferably, the 360 camera,
거울로 이루어진 반사부를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성하되, 180도의 화각을 갖는 2개의 어안 렌즈(fish eye lens)를 포함할 수 있다.It consists of a 360-degree monocamera for shooting stereo images that provide a three-dimensional effect through a reflection part made of mirrors, and may include two fish eye lenses with a 180-degree angle of view.
더욱 바람직하게는, 상기 단계 (2)에서의 영상 처리부는,More preferably, the image processing unit in step (2),
상기 영상 촬영부내 360 카메라의 어안 렌즈를 통해 촬영되는 영상을 스티칭 처리하는 스티칭 처리부;a stitching processing unit that stitches an image captured through a fisheye lens of a 360 camera within the video capturing unit;
상기 스티칭 처리부를 통해 스티칭 처리된 영상으로부터 스테레오 영역을 추출하는 영역 추출부; 및a region extraction unit that extracts a stereo region from the image stitched through the stitching processing unit; and
상기 영역 추출부를 통해 추출되는 스테레오 영역에 대해 사이드 바이 사이드 형태로 변환하는 영상 편집을 수행하는 형식 변환부를 포함하여 구성할 수 있다.It may be configured to include a format conversion unit that performs video editing by converting the stereo region extracted through the region extraction unit into side-by-side format.
더욱 더 바람직하게는, 상기 영상 처리부는,Even more preferably, the image processing unit,
상기 360 카메라의 두 개의 어안 렌즈를 통해 촬영되는 좌안 영상과 우안 영상의 처리를 통해 입체감을 느낄 수 있는 좌우 영상이 다른 스테레오 영상을 획득하도록 기능할 수 있다.Through processing of the left-eye image and the right-eye image captured through the two fisheye lenses of the 360 camera, the left and right images that provide a three-dimensional effect can function to obtain different stereo images.
본 발명에서 제안하고 있는 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 따르면, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부와, 영상 촬영부의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부와, 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부를 포함하여 구성함으로써, 거울로 이루어진 반사부를 통해 일반 360 카메라로 촬영하여 사이드-바이-사이드 입체 영상을 생성할 수 있도록 할 수 있다.According to the apparatus and method for generating a stereo image using a 360 cam proposed in the present invention, an image capture unit that captures images with a camera using reflection of a mirror to obtain a stereo image that provides a three-dimensional effect, and an image captured by the image capture unit. It is composed of an image processing unit that performs stitching, stereo region extraction, and side-by-side conversion processing, and an image playback unit that displays a three-dimensional image for which image processing has been completed through the image processing unit, so that the general You can shoot with a 360 camera to create a side-by-side stereoscopic image.
또한, 본 발명의 360 캠을 이용한 스테레오 영상 생성 장치 및 방법에 따르면, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부를 구성하되, 두 개의 거울이 90도로 붙여진 반사부와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부에 비춰진 물체를 촬영하는 360 카메라를 포함하여 구성함으로써, 360 모노카메라를 이용하여 입체감을 느낄 수 있는 스테레오 영상을 획득할 수 있으며, VR 헤드셋을 통해 VR 입체 영상을 제공할 수 있도록 할 수 있다.In addition, according to the apparatus and method for generating a stereo image using a 360 cam of the present invention, an image capture unit is configured to capture images with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect, and the two mirrors are rotated at 90 degrees. By including an attached reflector and a 360 camera that photographs an object reflected in the mirror to capture a stereo image that provides a three-dimensional effect, a stereo image that provides a three-dimensional effect is created using a 360 monocamera. It can be acquired, and VR stereoscopic images can be provided through a VR headset.
도 1은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 구성을 기능블록으로 도시한 도면.
도 2는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 구성을 기능블록으로 도시한 도면.
도 3은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 설치 구성을 개략적으로 도시한 도면.
도 4는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 촬영 원리를 개략적으로 도시한 도면.
도 5는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 구성을 기능블록으로 도시한 도면.
도 6은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 촬영 영상을 도시한 도면.
도 7은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 스티칭 처리 영상을 도시한 도면.
도 8은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 스테레오 영역 추출 영상을 도시한 도면.
도 9는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 사이드 바이 사이드 형태로 편집하는 영상을 도시한 도면.
도 10은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 방법의 흐름을 도시한 도면.Figure 1 is a diagram showing the configuration of a stereo image generating device using a 360 cam according to an embodiment of the present invention in functional blocks.
Figure 2 is a diagram illustrating the configuration of an image capture unit of a stereo image generating device using a 360 cam according to an embodiment of the present invention in functional blocks.
Figure 3 is a diagram schematically showing the installation configuration of the image capture unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention.
Figure 4 is a diagram schematically showing the principles of the image capture unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention.
Figure 5 is a diagram illustrating the configuration of an image processing unit of a stereo image generating device using a 360 cam according to an embodiment of the present invention in functional blocks.
FIG. 6 is a diagram illustrating a captured image of an image capture unit of a stereo image generating device using a 360 cam according to an embodiment of the present invention.
Figure 7 is a diagram showing a stitching processed image of the image processing unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention.
Figure 8 is a diagram showing a stereo region extracted image of the image processing unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention.
FIG. 9 is a diagram illustrating an image edited in a side-by-side format by the image processing unit of a stereo image generating device using a 360 cam according to an embodiment of the present invention.
Figure 10 is a diagram illustrating the flow of a stereo image generation method using a 360 cam according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일한 부호를 사용한다.Hereinafter, with reference to the attached drawings, preferred embodiments will be described in detail so that those skilled in the art can easily practice the present invention. However, when describing preferred embodiments of the present invention in detail, if it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the gist of the present invention, the detailed description will be omitted. In addition, the same symbols are used throughout the drawings for parts that perform similar functions and actions.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’ 되어 있다고 할 때, 이는 ‘직접적으로 연결’ 되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’ 되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’ 한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.Additionally, throughout the specification, when a part is said to be 'connected' to another part, this is not only the case when it is 'directly connected', but also when it is 'indirectly connected' with another element in between. Includes. Additionally, ‘including’ a certain component does not mean excluding other components, but rather including other components, unless specifically stated to the contrary.
도 1은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 구성을 기능블록으로 도시한 도면이고, 도 2는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 구성을 기능블록으로 도시한 도면이며, 도 3은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 설치 구성을 개략적으로 도시한 도면이고, 도 4는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 촬영 원리를 개략적으로 도시한 도면이며, 도 5는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 구성을 기능블록으로 도시한 도면이다. 도 1 내지 도 5에 각각 도시된 바와 같이, 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치(100)는, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부(110)와, 영상 촬영부(110)의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부(120)와, 영상 처리부(120)를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부(130)를 포함하여 구성될 수 있다. 이하에서는 첨부된 도면을 참조하여 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 구성에 대해 설명하기로 한다.Figure 1 is a diagram showing the configuration of a stereo image generating device using a 360 cam according to an embodiment of the present invention in functional blocks, and Figure 2 is a diagram showing the configuration of a stereo image generating device using a 360 cam according to an embodiment of the present invention. This is a diagram showing the configuration of the image capture unit using functional blocks. Figure 3 is a diagram schematically showing the installation configuration of the image capture unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention, and Figure 4 is a diagram showing the configuration of the image capture unit. It is a diagram schematically showing the shooting principle of the image capture unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention, and Figure 5 is an image of the stereo image generating device using a 360 cam according to an embodiment of the present invention. This diagram shows the configuration of the processing unit in functional blocks. As shown in FIGS. 1 to 5, the stereo
도 6은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 촬영부의 촬영 영상을 도시한 도면이고, 도 7은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 스티칭 처리 영상을 도시한 도면이며, 도 8은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 스테레오 영역 추출 영상을 도시한 도면이고, 도 9는 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치의 영상 처리부의 사이드 바이 사이드 형태로 편집하는 영상을 도시한 도면이다.Figure 6 is a diagram showing a captured image of the image capture unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention, and Figure 7 is a diagram showing a stereo image generating device using a 360 cam according to an embodiment of the present invention. is a diagram showing a stitching processed image of the image processing unit, FIG. 8 is a diagram showing a stereo region extracted image of the image processing unit of the stereo image generating device using a 360 cam according to an embodiment of the present invention, and FIG. This is a diagram showing an image edited in a side-by-side format in the image processing unit of a stereo image generating device using a 360 cam according to an embodiment of the invention.
영상 촬영부(110)는, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 구성이다. 이러한 영상 촬영부(110)는 도 2 내지 도 4에 각각 도시된 바와 같이, 거울로 이루어진 반사부(111)와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부(111)에 비춰진 물체를 촬영하는 360 카메라(112)를 포함하여 구성할 수 있다.The
또한, 반사부(111)는 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 카메라(112)를 통해 촬영되는 두 개의 거울이 배치되는 구조로 구성될 수 있다. 이러한 반사부(111)는 두 게의 거울이 배치되는 구조로 구성하되, 두 개의 거울을 90도로 붙여 상기 360 카메라(112) 근처에 배치하여 설치될 수 있다.In addition, the
또한, 360 카메라(112)는 거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성될 수 있다. 이러한 360 카메라(112)는 거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성하되, 180도의 화각을 갖는 2개의 어안 렌즈(fish eye lens)를 포함할 수 있다.Additionally, the 360
또한, 영상 촬영부(110)는 두 개의 거울로 이루어진 반사부(111)와 두 개의 어안 렌즈를 포함하는 360 카메라(112)를 이용하는 구조로, 거울의 반사를 이용하여 일반적인 360도 카메라를 입체(양안 시: 스테레오 스콥) 카메라로 기능하도록 할 수 있다.In addition, the
영상 처리부(120)는, 영상 촬영부(110)의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 구성이다. 이러한 영상 처리부(120)는 도 5에 도시된 바와 같이, 영상 촬영부(110)내 360 카메라(112)의 어안 렌즈를 통해 촬영되는 영상을 스티칭 처리하는 스티칭 처리부(121)와, 스티칭 처리부(121)를 통해 스티칭 처리된 영상으로부터 스테레오 영역을 추출하는 영역 추출부(122)와, 영역 추출부(122)를 통해 추출되는 스테레오 영역에 대해 사이드 바이 사이드 형태로 변환하는 영상 편집을 수행하는 형식 변환부(123)를 포함하여 구성할 수 있다. 여기서, 영상 처리부(120)는 상기 360 카메라(112)의 두 개의 어안 렌즈를 통해 촬영되는 좌안 영상과 우안 영상의 처리를 통해 입체감을 느낄 수 있는 좌우 영상이 다른 스테레오 영상을 획득하도록 기능할 수 있다.The
영상 재생부(130)는, 영상 처리부(120)를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 구성이다. 이러한 영상 재생부(130)는 VR의 입체 영상을 시청할 수 있는 VR 헤드셋의 형태로 구성될 수 있다. 여기서, 영상 재생부(130)는 VR 헤드셋을 이용하여 시청할 경우 입체 영상을 보게 된다.The
도 10은 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 방법의 흐름을 도시한 도면이다. 도 10에 도시된 바와 같이, 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 방법은, 영상 촬영부가 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 단계(S110), 영상 처리부가 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 단계(S120), 및 영상 재생부가 영상 처리가 완료된 입체 영상을 디스플레이 하는 단계(S130)를 포함하여 구현될 수 있다.Figure 10 is a diagram illustrating the flow of a method for generating a stereo image using a 360 cam according to an embodiment of the present invention. As shown in FIG. 10, the method of generating a stereo image using a 360 cam according to an embodiment of the present invention includes the step of filming with a camera using the reflection of a mirror to obtain a stereo image in which the image capture unit can feel a three-dimensional effect. (S110), a step in which the image processing unit performs stitching, stereo region extraction, and side-by-side conversion processing of the captured image (S120), and a step in which the image playback unit displays the three-dimensional image on which image processing has been completed (S130) It can be implemented including.
단계 S110에서는, 영상 촬영부(110)가 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영한다. 이러한 단계 S110에서의 영상 촬영부(110)는 도 2 내지 도 4에 각각 도시된 바와 같이, 거울로 이루어진 반사부(111)와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부(111)에 비춰진 물체를 촬영하는 360 카메라(112)를 포함하여 구성할 수 있다.In step S110, the
또한, 반사부(111)는 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 카메라(112)를 통해 촬영되는 두 개의 거울이 배치되는 구조로 구성될 수 있다. 이러한 반사부(111)는 두 게의 거울이 배치되는 구조로 구성하되, 두 개의 거울을 90도로 붙여 상기 360 카메라(112) 근처에 배치하여 설치될 수 있다.In addition, the
또한, 360 카메라(112)는 거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성될 수 있다. 이러한 360 카메라(112)는 거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성하되, 180도의 화각을 갖는 2개의 어안 렌즈(fish eye lens)를 포함할 수 있다.Additionally, the 360
단계 S120에서는, 영상 처리부(120)가 단계 S110에서 영상 촬영부(110)를 통해 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행한다. 이러한 단계 S120에서의 영상 처리부(120)는 도 5에 도시된 바와 같이, 영상 촬영부(110)내 360 카메라(112)의 어안 렌즈를 통해 촬영되는 영상을 스티칭 처리하는 스티칭 처리부(121)와, 스티칭 처리부(121)를 통해 스티칭 처리된 영상으로부터 스테레오 영역을 추출하는 영역 추출부(122)와, 영역 추출부(122)를 통해 추출되는 스테레오 영역에 대해 사이드 바이 사이드 형태로 변환하는 영상 편집을 수행하는 형식 변환부(123)를 포함하여 구성할 수 있다. 여기서, 영상 처리부(120)는 상기 360 카메라(112)의 두 개의 어안 렌즈를 통해 촬영되는 좌안 영상과 우안 영상의 처리를 통해 입체감을 느낄 수 있는 좌우 영상이 다른 스테레오 영상을 획득하도록 기능할 수 있다.In step S120, the
단계 S130에서는, 영상 재생부(130)가 단계 S120에서 영상 처리부(120)를 통해 영상 처리가 완료된 입체 영상을 디스플레이 한다. 이러한 단계 S130에서의 영상 재생부(130)는 VR의 입체 영상을 시청할 수 있는 VR 헤드셋의 형태로 구성될 수 있다. 여기서, 영상 재생부(130)는 VR 헤드셋을 이용하여 시청할 경우 입체 영상을 보게 된다.In step S130, the
상술한 바와 같이, 본 발명의 일실시예에 따른 360 캠을 이용한 스테레오 영상 생성 장치 및 방법은, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부와, 영상 촬영부의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부와, 영상 처리부를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부를 포함하여 구성함으로써, 거울로 이루어진 반사부를 통해 일반 360 카메라로 촬영하여 사이드-바이-사이드 입체 영상을 생성할 수 있도록 할 수 있으며, 특히, 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부를 구성하되, 두 개의 거울이 90도로 붙여진 반사부와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부에 비춰진 물체를 촬영하는 360 카메라를 포함하여 구성함으로써, 360 모노카메라를 이용하여 입체감을 느낄 수 있는 스테레오 영상을 획득할 수 있으며, VR 헤드셋을 통해 VR 입체 영상을 제공할 수 있도록 할 수 있게 된다.As described above, the apparatus and method for generating a stereo image using a 360 cam according to an embodiment of the present invention includes an image capture unit that captures images with a camera using reflection of a mirror to obtain a stereo image that provides a three-dimensional effect; It is composed of an image processing unit that performs stitching, stereo region extraction, and side-by-side conversion processing of the image captured by the image capture unit, and an image playback unit that displays a three-dimensional image for which image processing has been completed through the image processing unit. It is possible to create a side-by-side stereoscopic image by shooting with a general 360 camera through a reflection part made up of a mirror. In particular, an image is captured with a camera using the reflection of a mirror to obtain a stereo image that gives a three-dimensional effect. A 360 monocamera is formed by forming a photographing unit that includes a reflecting unit in which two mirrors are attached at 90 degrees, and a 360 camera that photographs objects reflected in the reflecting unit made of mirrors in order to capture stereo images that provide a three-dimensional effect. It is possible to obtain stereo images that provide a three-dimensional effect, and it is possible to provide VR stereoscopic images through a VR headset.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.The present invention described above can be modified or applied in various ways by those skilled in the art, and the scope of the technical idea according to the present invention should be determined by the claims below.
100: 본 발명의 일실시예에 따른 스테레오 영상 생성 장치
110: 영상 촬영부
111: 반사부
112: 360 카메라
120: 영상 처리부
121: 스티칭 처리부
122: 영역 추출부
123: 형식 변환부
130: 영상 재생부
S110: 영상 촬영부가 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 단계
S120: 영상 처리부가 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 단계
S130: 영상 재생부가 영상 처리가 완료된 입체 영상을 디스플레이 하는 단계100: Stereo image generating device according to an embodiment of the present invention
110: Video recording unit
111: reflection part
112: 360 camera
120: Image processing unit
121: Stitching processing unit
122: Area extraction unit
123: Format conversion unit
130: Video playback unit
S110: A step where the video recording unit takes pictures with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect.
S120: A step in which the image processing unit performs stitching, stereo region extraction, and side-by-side format conversion processing of the captured image.
S130: Step of the video playback unit displaying the three-dimensional image for which image processing has been completed
Claims (16)
입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 영상 촬영부(110);
상기 영상 촬영부(110)의 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 영상 처리부(120); 및
상기 영상 처리부(120)를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 영상 재생부(130)를 포함하되,
상기 영상 촬영부(110)는,
거울로 이루어진 반사부(111)와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부(111)에 비춰진 물체를 촬영하는 360 카메라(112)를 포함하여 구성하고,
상기 반사부(111)는,
입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 카메라(112)를 통해 촬영되는 두 개의 거울이 배치되는 구조로 구성되며,
상기 반사부(111)는,
두 개의 거울이 배치되는 구조로 구성하되, 두 개의 거울을 90도로 붙여 상기 360 카메라(112) 근처에 배치하여 설치되고,
상기 영상 처리부(120)는,
상기 영상 촬영부(110)내 360 카메라(112)의 어안 렌즈를 통해 촬영되는 영상을 스티칭 처리하는 스티칭 처리부(121)와, 상기 스티칭 처리부(121)를 통해 스티칭 처리된 영상으로부터 스테레오 영역을 추출하는 영역 추출부(122)와, 상기 영역 추출부(122)를 통해 추출되는 스테레오 영역에 대해 사이드 바이 사이드 형태로 변환하는 영상 편집을 수행하는 형식 변환부(123)를 포함하여 구성하며,
상기 영상 재생부(130)는,
VR의 입체 영상을 시청할 수 있는 VR 헤드셋의 형태로 구성되는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 장치.
A stereo image generating device 100 using a 360 cam,
An image capture unit 110 that captures images with a camera using reflections from mirrors to obtain stereo images that provide a three-dimensional effect;
an image processing unit 120 that performs stitching, stereo region extraction, and side-by-side conversion processing on the image captured by the image capturing unit 110; and
It includes an image playback unit 130 that displays a three-dimensional image for which image processing has been completed through the image processing unit 120,
The image capture unit 110,
It includes a reflector 111 made of a mirror, and a 360 camera 112 that photographs an object reflected in the reflector 111 made of a mirror to capture a stereo image that provides a three-dimensional effect,
The reflector 111 is,
It consists of a structure in which two mirrors are placed, which are photographed through a 360 camera 112 to capture stereo images that provide a three-dimensional effect.
The reflector 111 is,
It consists of a structure in which two mirrors are arranged, and the two mirrors are installed by attaching them at 90 degrees and placing them near the 360 camera 112,
The image processing unit 120,
A stitching processing unit 121 that stitches an image captured through the fisheye lens of the 360 camera 112 in the image capturing unit 110, and extracting a stereo area from the image stitched through the stitching processing unit 121. It includes a region extraction unit 122 and a format conversion unit 123 that performs video editing by converting the stereo region extracted through the region extraction unit 122 into a side-by-side format,
The video playback unit 130,
A stereo image generating device using a 360 cam, characterized in that it is configured in the form of a VR headset capable of viewing stereoscopic images in VR.
거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성되는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 장치.
The method of claim 1, wherein the 360 camera 112,
A stereo image generating device using a 360 cam, characterized in that it consists of a 360 monocamera for shooting a stereo image that provides a three-dimensional effect through a reflection unit 111 made of a mirror.
거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성하되, 180도의 화각을 갖는 2개의 어안 렌즈(fish eye lens)를 구비하는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 장치.
The method of claim 5, wherein the 360 camera 112,
It consists of a 360 monocamera for shooting stereo images that provide a three-dimensional effect through a reflection unit 111 made of a mirror, and is characterized by being equipped with two fish eye lenses with a 180-degree angle of view, A stereo image generation device using a 360 cam.
상기 360 카메라(112)의 두 개의 어안 렌즈를 통해 촬영되는 좌안 영상과 우안 영상의 처리를 통해 입체감을 느낄 수 있는 좌우 영상이 다른 스테레오 영상을 획득하도록 기능하는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 장치.
The method of claim 5, wherein the image processing unit 120,
Stereo using a 360 cam, characterized in that it functions to obtain different stereo images of left and right images that can provide a three-dimensional effect through processing of the left-eye image and right-eye image captured through the two fisheye lenses of the 360 camera 112. Image generating device.
(1) 영상 촬영부(110)가 입체감을 느낄 수 있는 스테레오 영상을 얻기 위해 거울의 반사를 이용하여 카메라로 촬영하는 단계;
(2) 영상 처리부(120)가 상기 단계 (1)에서 상기 영상 촬영부(110)를 통해 촬영된 영상의 스티칭, 스테레오 영역 추출, 및 사이드 바이 사이드 형식의 변환 처리를 수행하는 단계; 및
(3) 영상 재생부(130)가 상기 단계 (2)에서 상기 영상 처리부(120)를 통해 영상 처리가 완료된 입체 영상을 디스플레이 하는 단계를 포함하되,
상기 단계 (1)에서의 영상 촬영부(110)는,
거울로 이루어진 반사부(111)와, 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위해 상기 거울로 이루어진 반사부(111)에 비춰진 물체를 촬영하는 360 카메라(112)를 포함하여 구성하고,
상기 반사부(111)는,
입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 카메라(112)를 통해 촬영되는 두 개의 거울이 배치되는 구조로 구성되며,
상기 반사부(111)는,
두 개의 거울이 배치되는 구조로 구성하되, 두 개의 거울을 90도로 붙여 상기 360 카메라(112) 근처에 배치하여 설치되고,
상기 단계 (2)에서의 영상 처리부(120)는,
상기 영상 촬영부(110)내 360 카메라(112)의 어안 렌즈를 통해 촬영되는 영상을 스티칭 처리하는 스티칭 처리부(121)와, 상기 스티칭 처리부(121)를 통해 스티칭 처리된 영상으로부터 스테레오 영역을 추출하는 영역 추출부(122)와, 상기 영역 추출부(122)를 통해 추출되는 스테레오 영역에 대해 사이드 바이 사이드 형태로 변환하는 영상 편집을 수행하는 형식 변환부(123)를 포함하여 구성하며,
상기 단계 (3)에서의 영상 재생부(130)는,
VR의 입체 영상을 시청할 수 있는 VR 헤드셋의 형태로 구성되는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 방법.
A method (100) for generating a stereo image using a 360 cam,
(1) The image capture unit 110 captures images with a camera using the reflection of a mirror to obtain a stereo image that provides a three-dimensional effect;
(2) the image processing unit 120 performing stitching, stereo region extraction, and side-by-side conversion processing on the image captured through the image capture unit 110 in step (1); and
(3) a step of the image reproduction unit 130 displaying a three-dimensional image for which image processing has been completed through the image processing unit 120 in step (2),
The image capture unit 110 in step (1),
It includes a reflector 111 made of a mirror, and a 360 camera 112 that photographs an object reflected in the reflector 111 made of a mirror to capture a stereo image that provides a three-dimensional effect,
The reflector 111 is,
It consists of a structure in which two mirrors are placed, which are photographed through a 360 camera 112 to capture stereo images that provide a three-dimensional effect.
The reflector 111 is,
It consists of a structure in which two mirrors are arranged, and the two mirrors are installed by attaching them at 90 degrees and placing them near the 360 camera 112,
The image processing unit 120 in step (2),
A stitching processing unit 121 that stitches an image captured through the fisheye lens of the 360 camera 112 in the image capturing unit 110, and extracting a stereo area from the image stitched through the stitching processing unit 121. It includes a region extraction unit 122 and a format conversion unit 123 that performs video editing by converting the stereo region extracted through the region extraction unit 122 into a side-by-side format,
The video playback unit 130 in step (3),
A stereo image generation method using a 360 cam, characterized in that it is configured in the form of a VR headset capable of viewing stereoscopic images in VR.
거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성되는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 방법.
The method of claim 9, wherein the 360 camera 112,
A method of generating a stereo image using a 360 cam, characterized in that it consists of a 360 monocamera for shooting a stereo image that provides a three-dimensional effect through a reflection unit 111 made of a mirror.
거울로 이루어진 반사부(111)를 통해 입체감을 느낄 수 있는 스테레오 영상을 촬영하기 위한 360 모노카메라로 구성하되, 180도의 화각을 갖는 2개의 어안 렌즈(fish eye lens)를 구비하는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 방법.
The method of claim 13, wherein the 360 camera 112,
It consists of a 360 monocamera for shooting stereo images that provide a three-dimensional effect through a reflection unit 111 made of a mirror, and is characterized by being equipped with two fish eye lenses with a 180-degree angle of view, How to create a stereo image using a 360 cam.
상기 360 카메라(112)의 두 개의 어안 렌즈를 통해 촬영되는 좌안 영상과 우안 영상의 처리를 통해 입체감을 느낄 수 있는 좌우 영상이 다른 스테레오 영상을 획득하도록 기능하는 것을 특징으로 하는, 360 캠을 이용한 스테레오 영상 생성 방법.The method of claim 13, wherein the image processing unit 120,
Stereo using a 360 cam, characterized in that it functions to obtain different stereo images of left and right images that can provide a three-dimensional effect through processing of the left-eye image and right-eye image captured through the two fisheye lenses of the 360 camera 112. How to create video.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220012737A KR102589623B1 (en) | 2022-01-27 | 2022-01-27 | Stereo image generating device and method using 360 cam |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220012737A KR102589623B1 (en) | 2022-01-27 | 2022-01-27 | Stereo image generating device and method using 360 cam |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20230115816A KR20230115816A (en) | 2023-08-03 |
| KR102589623B1 true KR102589623B1 (en) | 2023-10-16 |
Family
ID=87568202
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220012737A KR102589623B1 (en) | 2022-01-27 | 2022-01-27 | Stereo image generating device and method using 360 cam |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102589623B1 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100779634B1 (en) | 2003-06-20 | 2007-11-26 | 니폰 덴신 덴와 가부시끼가이샤 | Virtual visual point image generating method and 3-d image display method and device |
| KR101066542B1 (en) | 2008-08-11 | 2011-09-21 | 한국전자통신연구원 | Method for generating vitual view image and apparatus thereof |
| KR101391951B1 (en) * | 2013-02-04 | 2014-05-07 | 주식회사 고글텍 | Single lens camera and method for taking side by side stereo pictures |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102031485B1 (en) * | 2018-03-15 | 2019-10-11 | 세종대학교산학협력단 | Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors |
-
2022
- 2022-01-27 KR KR1020220012737A patent/KR102589623B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100779634B1 (en) | 2003-06-20 | 2007-11-26 | 니폰 덴신 덴와 가부시끼가이샤 | Virtual visual point image generating method and 3-d image display method and device |
| KR101066542B1 (en) | 2008-08-11 | 2011-09-21 | 한국전자통신연구원 | Method for generating vitual view image and apparatus thereof |
| KR101391951B1 (en) * | 2013-02-04 | 2014-05-07 | 주식회사 고글텍 | Single lens camera and method for taking side by side stereo pictures |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20230115816A (en) | 2023-08-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10979693B2 (en) | Stereoscopic 3D camera for virtual reality experience | |
| Yu | A light-field journey to virtual reality | |
| US20200358996A1 (en) | Real-time aliasing rendering method for 3d vr video and virtual three-dimensional scene | |
| Matsuyama et al. | 3D video and its applications | |
| KR20150068299A (en) | Method and system of generating images for multi-surface display | |
| US7660472B2 (en) | System and method for managing stereoscopic viewing | |
| Devernay et al. | Stereoscopic cinema | |
| US20080158345A1 (en) | 3d augmentation of traditional photography | |
| JP4712872B2 (en) | Multidimensional imaging system and method | |
| TW201351959A (en) | Method of stereo 3D image synthesis and related camera | |
| JP2016504828A (en) | Method and system for capturing 3D images using a single camera | |
| WO2014119965A1 (en) | Method for photographing side-by-side stereoscopic images and monocular camera therefor | |
| KR102589623B1 (en) | Stereo image generating device and method using 360 cam | |
| TW201327019A (en) | Capturing a perspective-flexible, viewpoint-synthesizing panoramic 3D image with a multi-view 3D camera | |
| US10757396B2 (en) | Adding new imaging capabilities to smart mobile device | |
| KR102019879B1 (en) | Apparatus and method for acquiring 360 VR images in a game using a virtual camera | |
| Mori et al. | An overview of augmented visualization: observing the real world as desired | |
| JP7202449B2 (en) | Optical Arrangement for Generating Virtual Reality Stereoscopic Images | |
| JP7011728B2 (en) | Image data output device, content creation device, content playback device, image data output method, content creation method, and content playback method | |
| Richardt et al. | Video for virtual reality | |
| JP2006129225A (en) | Stereoscopic video image display device and method | |
| KR20190112407A (en) | Operating method for Holoportation contents | |
| CN110749993B (en) | Method and device for adding novel image function to intelligent mobile equipment | |
| US20220165190A1 (en) | System and method for augmenting lightfield images | |
| Rastogi et al. | StereoCam3D (An Android App. That Lets You Capture Realtime 3D Pics And Videos) |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |