Nothing Special   »   [go: up one dir, main page]

KR20230007237A - An advertising sign management and trading platform using AR - Google Patents

An advertising sign management and trading platform using AR Download PDF

Info

Publication number
KR20230007237A
KR20230007237A KR1020220081159A KR20220081159A KR20230007237A KR 20230007237 A KR20230007237 A KR 20230007237A KR 1020220081159 A KR1020220081159 A KR 1020220081159A KR 20220081159 A KR20220081159 A KR 20220081159A KR 20230007237 A KR20230007237 A KR 20230007237A
Authority
KR
South Korea
Prior art keywords
billboard
advertisement
module
management
information
Prior art date
Application number
KR1020220081159A
Other languages
Korean (ko)
Inventor
임성현
허지성
Original Assignee
주식회사 애니랙티브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 애니랙티브 filed Critical 주식회사 애니랙티브
Priority to PCT/KR2022/009634 priority Critical patent/WO2023282570A1/en
Publication of KR20230007237A publication Critical patent/KR20230007237A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/907Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/909Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0273Determination of fees for advertising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

The present invention relates to an advertising sign management and trading platform using augmented reality (AR). More specifically, the present invention relates to a platform which is able to manage and trade a generated AR advertising sign and create profits. To this end, according to the present invention, the advertising sign management and trading platform using AR comprises: an AR advertising sign operator server generating an AR advertisement corresponding to an advertising plan provided from an advertiser terminal, and directing to display the generated AR advertisement on an AR advertising sign; and a DB storing the information on the advertising plan provided from the advertiser terminal, AR advertisement corresponding to the advertising plan, or the point with the AR advertising sign installed.

Description

AR을 이용한 광고판 관리 및 거래 플랫폼{An advertising sign management and trading platform using AR}An advertising sign management and trading platform using AR}

본 발명은 AR을 이용한 광고판 관리 및 거래 플랫폼에 관한 것으로, 더욱 상세하게는 생성한 AR 광고판을 관리 및 거래가 가능하여 수익 창출이 가능한 플랫폼에 관한 것이다. The present invention relates to a platform for managing and trading billboards using AR, and more particularly, to a platform capable of generating revenue by managing and trading generated AR billboards.

VR(Virtual Reality) 기술은 현실 세계의 객체나 배경 등을 CG(Computer Graphic) 영상으로 제공하며, AR(Augmented Reality) 기술은 실제 사물 영상 위에 가상으로 만들어진 CG 영상을 함께 제공하며, MR(Mixed) 기술은 현실 세계에 가상 객체들을 섞고 결합시켜서 제공하는 컴퓨터 그래픽 기술이다. 상술한 VR, AR, MR 등을 모두 간단히 XR(extended reality) 기술로 지칭되기도 한다.VR (Virtual Reality) technology provides CG (Computer Graphic) images of objects or backgrounds in the real world, AR (Augmented Reality) technology provides CG images created virtually on top of real object images, and MR (Mixed) Technology is a computer graphics technology that mixes and combines virtual objects in the real world. All of the aforementioned VR, AR, MR, and the like are simply referred to as XR (extended reality) technologies.

AR 기술은 현실세계에 가상의 디지털 이미지를 입히는 방식이다. 눈으로 실제 세계를 볼 수 있다는 점에서 눈을 가린 채 그래픽 영상만 보여주는 가상현실(VR)과는 구별된다. 실내에서만 쓸 수 있는 VR 기기와 달리 AR 글래스는 안경처럼 걸어 다니면서 사용할 수 있어 활용성이 휠씬 다양하다.AR technology is a method of overlaying virtual digital images on the real world. It is different from virtual reality (VR), which shows only graphic images while blindfolded, in that you can see the real world with your eyes. Unlike VR devices that can only be used indoors, AR glasses can be used while walking around like glasses, making them more versatile.

최근 들어 차량의 네비게이션 서비스에서 고객들의 니즈에 따라 POI를 활용한 다양한 기술들이 등장하고 있다. 사용자가 AR 글래스를 착용하고 운전을 하는 경우, 이미지로부터 POI의 실제 외형을 인지하여 POI 모양(Shape) 정보를 제공해 주는 기술들도 등장하고 있다. 다양한 증강현실 기반 서비스에서 POI 모양을 AR 이미지로 실제 영상 위에 매칭시켜서 보여줄 수 있다.Recently, various technologies using POI are appearing in vehicle navigation services according to customer needs. When a user wears AR glasses and drives, technologies that provide POI shape information by recognizing the actual appearance of the POI from the image are also emerging. In various augmented reality-based services, POI shapes can be matched with AR images on real images and displayed.

다만, 종래 기술의 경우, 움직이는 영상에서의 AR 이미지와 POI 영역의 매칭시 성능 저하의 문제가 발생한다. 구체적으로, AR 이미지와 POI 영역의 정확도가 낮아서 AR 이미지가 POI 영역이 아닌 위치에 디스플레이 되므로, 사용자는 이에 대한 불편함을 느끼게 된다.However, in the case of the prior art, a problem of performance degradation occurs when matching an AR image in a moving video with a POI area. Specifically, since the accuracy of the AR image and the POI area is low, the AR image is displayed at a location other than the POI area, and thus the user feels inconvenience.

또한, 현재 차량을 탑승한 승객을 포함한 사용자의 흥미를 유발하기 위한 AR을 이용한 광고판에 대한 다양한 기술이 개발되고 있다.In addition, various technologies for billboards using AR are currently being developed to arouse interest from users including passengers on board.

한국등록특허 제10-2185614호(발명의 명칭: Ar 광고 간판 컨텐츠를 제공하는 시스템 및 방법)Korean Patent Registration No. 10-2185614 (Title of Invention: System and Method for Providing Ar Advertising Signboard Contents) 한국공개특허 제2019-0107286호(발명의 명칭: 차량용 광고 제공 장치 및 차량용 광고 제공 방법)Korean Patent Publication No. 2019-0107286 (Title of Invention: Device for providing advertisement for vehicle and method for providing advertisement for vehicle)

본 발명이 해결하고자 하는 과제는 AR 광고판을 생성하는 방안을 제안함에 있다The problem to be solved by the present invention is to propose a method of generating an AR billboard.

본 발명이 해결하고자 하는 다른 과제는 자세가 변경되더라도 정해진 위치에 광고판이 표출되도록 하는 방안을 제안함에 있다.Another problem to be solved by the present invention is to propose a method of displaying a billboard at a predetermined location even when a posture is changed.

본 발명이 해결하고자 하는 또 다른 과제는 AR 광고판을 관리 및 거래할 수 있는 방안을 제안함에 있다.Another problem to be solved by the present invention is to propose a method for managing and trading AR billboards.

본 발명이 해결하고자 하는 또 다른 과제는 수익 창출이 가능한 AR 광고판을 제안함에 있다.Another problem to be solved by the present invention is to propose an AR billboard capable of generating revenue.

이를 위해 본 발명의 AR을 이용한 광고판 관리 및 거래 플랫폼은 광고주 단말로부터 제공받은 광고 시안을 광고 시안에 대응되는 AR 광고를 생성하고, 생성한 AR 광고를 AR 광고판에 표출되도록 지시하는 AR 광고판 운영사 서버; 및 상기 광고주 단말로부터 제공받은 광고 시안, 광고 시안에 대응되는 AR 광고 또는 AR 광고판이 설치된 지점에 대한 정보를 저장하는 DB를 포함한다.To this end, the billboard management and trading platform using AR of the present invention generates an AR advertisement corresponding to the advertisement draft provided from the advertiser terminal, and directs the generated AR advertisement to be displayed on the AR billboard. An AR billboard operator server; and a DB for storing information about the advertisement draft provided from the advertiser terminal, the AR advertisement corresponding to the advertisement draft, or the location where the AR billboard is installed.

본 발명에 따른 AR 광고판 관리 및 거래 플랫폼은 가상의 AR 광고판을 이용하여 수익을 창출할 수 있으며, 또한, 일반 광고판과 동일하게 거래가 가능하다는 장점이 있다. 특히, 차량 내에 AR 광고를 시청할 수 있는 단말을 설치하는 경우, 차량을 운행하는 차량 운행사 역시 별도의 광고비를 지급받을 수 있다.The AR billboard management and trading platform according to the present invention has the advantage of being able to generate revenue using virtual AR billboards and also being able to trade in the same way as general billboards. In particular, when a terminal capable of viewing AR advertisements is installed in a vehicle, a vehicle operator operating the vehicle may also receive a separate advertisement fee.

특히 본 발명은 이동하는 차량의 자세에 변경되는 경우 차량의 기준으로 객체의 상대적인 위치가 변경되더라도 변경된 객체의 위치에 산출하여 AR 광고판을 정해진 위치 정확하게 매칭되도록 출력하여 사용자의 신뢰성을 높일 수 있다In particular, the present invention, when the posture of a moving vehicle changes, even if the relative position of the object with respect to the vehicle is changed, the user's reliability can be increased by calculating the position of the changed object and outputting the AR billboard to accurately match the predetermined position.

이외에도 본 발명은 AR 광고판 주변의 사용자의 위치 정보를 실시간으로 분석하여 광고 효과를 극대화할 수 있는 장점이 있다.In addition, the present invention has the advantage of maximizing the advertisement effect by analyzing the location information of the user around the AR billboard in real time.

도 1은 본 발명의 일실시 예에 따른 AR 광고판의 표출 형태를 도시하고 있다.
도 2는 본 발명의 일실시 예에 따른 AR(Augmented Reality) 엔진 모듈의 구성을 도시하고 있다.
도 3은 본 발명의 일실시 예에 따른 AR 플랫폼의 구성을 도시하고 있다.
도 4는 본 발명의 일실시 예에 따른 AR 서비스 시스템의 구성도이다.
도 5는 본 발명의 일실시 예에 따른 중계 단말의 구성을 도시하고 있다.
도 6은 본 발명의 일실시 예에 따른 AR 메인서버의 구성을 도시하고 있다.
도 7은 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 지원하는 광고판 형태를 도시하고 있다.
도 8은 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 제안하는 서비스 모델을 도시하고 있다.
도 9는 본 발명에서 제안하는 광고판의 형태를 도시하고 있다.
도 10은 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 수수료를 정산하는 과정을 도시하고 있다.
1 illustrates an expression form of an AR billboard according to an embodiment of the present invention.
2 illustrates the configuration of an Augmented Reality (AR) engine module according to an embodiment of the present invention.
3 illustrates the configuration of an AR platform according to an embodiment of the present invention.
4 is a configuration diagram of an AR service system according to an embodiment of the present invention.
5 illustrates a configuration of a relay terminal according to an embodiment of the present invention.
6 shows the configuration of an AR main server according to an embodiment of the present invention.
7 illustrates a billboard type supported by the AR billboard management and trading platform according to an embodiment of the present invention.
8 illustrates a service model proposed by the AR billboard management and trading platform according to an embodiment of the present invention.
9 shows a form of a billboard proposed in the present invention.
10 illustrates a process of settling fees in the AR billboard management and transaction platform according to an embodiment of the present invention.

전술한, 그리고 추가적인 본 발명의 양상들은 첨부된 도면을 참조하여 설명되는 바람직한 실시 예들을 통하여 더욱 명백해질 것이다. 이하에서는 본 발명의 이러한 실시 예를 통해 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.The foregoing and additional aspects of the present invention will become more apparent through preferred embodiments described with reference to the accompanying drawings. Hereinafter, these embodiments of the present invention will be described in detail so that those skilled in the art can easily understand and reproduce them.

도 1은 본 발명의 일실시 예에 따른 AR 광고판의 표출 형태를 도시하고 있다. 이하 도 1을 이용하여 본 발명의 일실시 예에 따른 AR 광고판의 표출 형태에 대해 알아보기로 한다.1 illustrates an expression form of an AR billboard according to an embodiment of the present invention. Hereinafter, the expression form of the AR billboard according to an embodiment of the present invention will be described using FIG. 1 .

도 1에 의하면, AR 광고판은 차량이나 유동인구가 많은 거리 또는 인구 밀집 지역에 설치되는 것이 바람직하다. 본 발명에서 제안하는 AR 광고판은 실제 거리상에 설치되는 광고판이 아니라 가상의 광고판이다. According to FIG. 1, it is preferable that the AR billboard is installed on a street or a densely populated area with a large number of vehicles or floating population. The AR billboard proposed in the present invention is not a billboard installed on a real street, but a virtual billboard.

AR 광고판 관리 및 거래 플랫폼은 사용자의 위치정보를 활용한 통계자료를 제공하므로, 식당뿐만 아니라 다양한 분야의 광고 제공이 가능하다. 이를 위해 본 발명에서 제안하는 AR 광고판 관리 및 거래 플랫폼은 사용자의 위치 정보를 수집 및 분석하며, 필요한 경우 외부 서버로부터 사용자의 위치 정보를 포함한 다양한 정보를 제공받을 수 있다.The AR billboard management and trading platform provides statistical data using user location information, so it is possible to provide advertisements in various fields, not just restaurants. To this end, the AR billboard management and trading platform proposed in the present invention collects and analyzes the user's location information, and can receive various information including the user's location information from an external server if necessary.

또한, 본 발명은 표출되는 광고를 시청하는 차량 또는 사용자의 자세가 변경되더라도 정확한 위치에 표출되어야 한다. 즉, 차량 또는 사용자의 자세(위치)가 변경되는 경우, AR 광고판은 차량이나 사용자의 위치가 상관없이 실제 광고판과 동일하게 정해진 지점에 고정된 형태로 표출되어야 한다. 물론 차량이나 사용자와 상관없이 AR 광고판 자체 설정된 프로그램에 의해 광고판의 위치가 변경되는 경우에는 논외로 한다. 따라서 본 발명은 AR 광고판을 생성하는 방안에 대해 살펴본 후 AR 광고판을 거래하는 거래 플랫폼에 대해 알아보기로 한다.In addition, according to the present invention, even if the posture of a vehicle or user viewing an advertisement displayed is changed, it must be displayed in an accurate position. That is, when the posture (position) of the vehicle or the user is changed, the AR billboard must be displayed in a fixed form at the same fixed point as the actual billboard regardless of the position of the vehicle or the user. Of course, it is out of the question if the position of the AR billboard is changed by a program set by the AR billboard itself, regardless of the vehicle or user. Therefore, in the present invention, a method of generating an AR billboard will be looked at, and then a trading platform for trading AR billboards will be discussed.

도 2는 본 발명의 일실시 예에 따른 AR(Augmented Reality) 엔진 모듈의 구성에 대해 살펴보기로 한다. 이하 도 2를 이용하여 본 발명의 일실시 예에 따른 AR 엔진 모듈의 구성에 대해 상세하게 알아보기로 한다. 본 발명은 AR 엔진 모듈을 이용하여 AR 광고판을 구현한다.2 will look at the configuration of an AR (Augmented Reality) engine module according to an embodiment of the present invention. Hereinafter, the configuration of the AR engine module according to an embodiment of the present invention will be described in detail using FIG. 2 . The present invention implements an AR billboard using an AR engine module.

본 발명과 관련하여 AR 엔진 모듈(200)은 정보수집 모듈(210), AR 맵핑 모듈(220) 및 AR 렌더링/객체관리 모듈(230)을 포함한다. 물론 상술한 구성 이외에 다른 구성이 본 발명에서 제안하는 AR 엔진 모듈(200)에 포함될 수 있으며, 해당 AR 엔진 모듈은 차량 내에 설치되는 중계 단말 또는 AR 메인서버 중 적어도 어느 하나의 서버에 설치될 수 있다. 이하에서는 이동하는 객체가 차량인 경우에 대해 설명하기로 하나, 이동하는 객체가 사용자 단말인 경우에도 동일하게 적용될 수 있다.In relation to the present invention, the AR engine module 200 includes an information collection module 210, an AR mapping module 220, and an AR rendering/object management module 230. Of course, other configurations other than the configuration described above may be included in the AR engine module 200 proposed in the present invention, and the AR engine module may be installed in at least one of a relay terminal installed in a vehicle or an AR main server. . Hereinafter, a case where the moving object is a vehicle will be described, but the same may be applied even when the moving object is a user terminal.

정보 수집 모듈(210)은 차량의 위치 및 이동하는 주변 영상을 수집한다. 정보 수집 모듈(210)은 차량에 장착된 카메라를 이용하여 촬영한 영상에서 AI-ML(인공지능-머신러닝) 기반으로 POI 객체를 검출, 구분(classification) 또는 분할하는 기능을 수행한다. 또한, 정보 수집 모듈(210)은 RTK, GPS, 자이로센서 또는 라이다 센서 등 차량에 장착된 복수의 센서를 이용하여 지능형 운전자 보조 시스템(ADAS Advanced Driver Assistance System)을 구현한다.The information collection module 210 collects the location of the vehicle and moving surrounding images. The information collection module 210 performs a function of detecting, classifying, or segmenting a POI object based on AI-ML (Artificial Intelligence-Machine Learning) in an image captured using a camera mounted on a vehicle. In addition, the information collection module 210 implements an ADAS Advanced Driver Assistance System using a plurality of sensors mounted on a vehicle, such as RTK, GPS, gyro sensor, or lidar sensor.

레이더를 이용한 객체 감지는 송신된 전파가 수신되는데 소요되는 시간을 측정하여 물체를 감지하는 방식이다. 레이더는 사각지대 감지, 차선 변경 보조, 전방 충돌 경고 및 자동 비상 제동 등 다양한 분야에 적용된다.Object detection using radar is a method of detecting an object by measuring the time required for a transmitted radio wave to be received. Radar is applied to various fields such as blind spot detection, lane change assistance, forward collision warning and automatic emergency braking.

라이다는 레이더와 유사한 원리로 작동하지만, 주변 환경의 고해상도 3D 이미지를 생성하기 위해 라이다를 발사하여 산란되거나, 반사되는 라이더가 돌아오는 시간과 강도, 주파수의 변화, 편광 상태의 변화 등으로 측정 물체와의 거리, 속도, 형상 등 물리적인 성질을 측정한다.LiDAR works on a principle similar to radar, but it fires lidar to create a high-resolution 3D image of the surrounding environment and measures the time and intensity of scattered or reflected lidar returns, changes in frequency, and changes in polarization state. It measures physical properties such as distance, speed, and shape to an object.

이외에도, 본 발명은 차량의 내부에 카메라를 설치하며, 설치된 카메라를 이용하여 사용자의 시선을 추적한다. 즉, 정보 수집 모듈은 차량의 내부에 설치된 카메라를 이용하여 사용자의 눈을 촬영하며, 촬영된 사용자의 눈을 분석하여 사용자의 시선을 추적한다.In addition, the present invention installs a camera inside the vehicle, and tracks the user's gaze using the installed camera. That is, the information collection module captures the user's eyes using a camera installed inside the vehicle, analyzes the user's eyes, and tracks the user's gaze.

AR 맵핑 모듈(220)은 카메라의 공간분석 기법을 이용하여 도로의 특징(도로면, 차선), 교통 표지판, 교통신호 등과 같은 2D 위치 정보를 3D 공간상의 좌표로 변환한다. 이에 대해서는 후술하기로 한다.The AR mapping module 220 converts 2D location information such as road characteristics (road surfaces, lanes), traffic signs, traffic signals, etc. into coordinates on a 3D space by using a spatial analysis technique of a camera. This will be described later.

AR 렌더링/객체관리 모듈(230)은 다양한 AR 정보를 화면에 실시간 디스플레이 하기 위해 실시간 렌더링을 수행한다. 즉, 본 발명에서 제안하는 디스플레이는 다양한 형태로 구현될 수 있으며, 이에 따라 구현하고자 하는 디스플레이 형태에 따라 상이한 기법으로 렌더링을 수행한다. 일 예로, 빔 프로젝터를 이용하여 AR 영상의 출력을 원할 경우에는 빔 프로젝터에서 AR 영상 출력 가능하도록 렌더링을 수행한다.The AR rendering/object management module 230 performs real-time rendering to display various AR information on the screen in real time. That is, the display proposed in the present invention can be implemented in various forms, and accordingly, rendering is performed with different techniques depending on the display form to be implemented. For example, when AR images are to be output using a beam projector, rendering is performed so that AR images can be output by the beam projector.

도 3은 본 발명의 일실시 예에 따른 AR 엔진 플랫폼의 구성을 도시하고 있다. 이하 도 3을 이용하여 본 발명의 일실시 예에 따른 AR 엔진 플랫폼에 대해 상세하게 알아보기로 한다. 상술한 바와 같이 AR 플랫폼은 차량 내에 설치되는 중계 단말 또는 AR 메인서버 중 적어도 어느 하나의 서버에 설치되어 구성될 수 있다.3 illustrates the configuration of an AR engine platform according to an embodiment of the present invention. Hereinafter, an AR engine platform according to an embodiment of the present invention will be described in detail using FIG. 3 . As described above, the AR platform may be installed and configured in at least one of a relay terminal installed in a vehicle and an AR main server.

본 발명에서 제안하는 AR 광고판을 정해진(설정된) 지점에 매칭되도록 출력하기 위해서는 상술한 바와 같이 정보 수집 모듈(310), AR 맵핑 모듈(320) 및 AR 렌더링/객체 관리 모듈(330)을 포함한다.In order to output the AR billboard proposed in the present invention to be matched to a predetermined (set) point, the information collection module 310, the AR mapping module 320, and the AR rendering/object management module 330 are included as described above.

정보 수집 모듈(310)은 영상기반 객체구분모듈(AR Classification Module)(311), AR 위치 획득모듈(AR Location Module)(312), AR 센서(AR Sensor)(313), 인터페이스 관리모듈(Sensor Signal/Data Interface Manager Module)(314)을 포함한다. The information collection module 310 includes an image-based object classification module (AR Classification Module) 311, an AR location acquisition module (AR Location Module) 312, an AR sensor (AR Sensor) 313, an interface management module (Sensor Signal /Data Interface Manager Module) (314).

영상기반 객체구분모듈(311)은 차선, 표지판 또는 교통신호 등 객체를 검출하여 구분하는 기능을 수행한다. AR 위치 획득모듈(312)은 GPS, RTK 등을 이용하여 차량의 현재 위치를 산출한다.The image-based object classification module 311 performs a function of detecting and classifying objects such as lanes, signs, or traffic signals. The AR location acquisition module 312 calculates the current location of the vehicle using GPS, RTK, and the like.

AR 센서(313)는 자이로 센서, 가속도 센서 등을 포함하며, AR 센서(313)를 이용하여 객체와의 거리, 객체의 위치 등을 산출한다. AR 센서(313)는 차량에 장착된 라이더, 레이더, ADAS 등을 사용하지 못하는 경우, 전방에 설치된 카메라로부터 지상실측정보(Ground Truth) 기반 도로 맵핑 정보를 획득하여 차량의 Roll, Pitch , Yaw 값을 획득한다.The AR sensor 313 includes a gyro sensor, an acceleration sensor, and the like, and uses the AR sensor 313 to calculate a distance to an object, a position of the object, and the like. The AR sensor 313 acquires ground truth-based road mapping information from a camera installed in the front when the lidar, radar, ADAS, etc. Acquire

이에 대해 구체적으로 살펴보면, 차량에 장착된 AR 위치 획득모듈(312)인 GPS, RTK로부터 획득된 정보를 기반으로 구면 좌표계의 위치 정보를 평면 좌표계의 위치 정보인 (X, Y) 좌표를 산출한다. 본 발명은 상술한 바와 같이 GPS, RTK 중 어느 하나로부터 위치 정보를 획득하는 것이 아니라, 2개의 모듈로부터 위치 정보를 획득하여 차량의 Roll, Pitch, Yaw 값을 획득한다.Looking at this in detail, based on the information obtained from the GPS and RTK, which are the AR position acquisition modules 312 installed in the vehicle, the position information of the spherical coordinate system is calculated as (X, Y) coordinates, which is the position information of the planar coordinate system. As described above, the present invention does not acquire location information from any one of GPS and RTK, but obtains location information from two modules to obtain roll, pitch, and yaw values of the vehicle.

GPS 좌표인 구면 좌표를 네비게이션 좌표인 평면 좌표로 변환하는 과정은 다음과 같이 진행된다.The process of converting spherical coordinates, which are GPS coordinates, to planar coordinates, which are navigation coordinates, proceeds as follows.

먼저 GPS 좌표를 제1 좌표로 변환하며, 제1 좌표를 제2 좌표로 변환한다. 이후 제2 좌표를 카메라 좌표로 변환한다. 일 예로 제1 좌표는 ECEF 좌표(Earth-centered Earth-fixed coordinate)일 수 있으며, 제2 좌표는 네비게이션 좌표인 ENU 좌표일 수 있다.First, the GPS coordinates are converted into first coordinates, and the first coordinates are converted into second coordinates. Then, the second coordinates are converted into camera coordinates. For example, the first coordinates may be ECEF coordinates (Earth-centered Earth-fixed coordinates), and the second coordinates may be navigation coordinates, ENU coordinates.

본 발명은 이동하는 차량에 설치된 정보 출력장치를 이용하여 설정된 지점에 AR 광고판이 매칭되도록 출력하는 것을 목표로 한다. 본 발명과 관련하여 차량은 이동하는 고정된 위치를 유지하는 것이 아니라, 주행하는 도로의 상태, 주행 방향, 주행 속도 등에 따라 차량의 자세가 달라지며, 이에 따라 차량에서 바라보는 설정된 지점의 상대적인 좌표를 달라지게 된다. 따라서, 본 발명은 차량의 자세를 고려한 설정된 지점의 카메라 좌표를 산출하며, 산출된 설정된 지점의 카메라 좌표를 고려하여 AR 광고판을 출력한다. 본 발명에서 제안하는 카메라 좌표는 카메라에서 바라보는 AR 광고판을 매칭하는 설정된 지점의 좌표이다.An object of the present invention is to output an AR billboard to be matched to a set point using an information output device installed in a moving vehicle. In relation to the present invention, the vehicle does not maintain a fixed position to move, but the attitude of the vehicle changes according to the condition of the road, driving direction, driving speed, etc., and accordingly, the relative coordinates of the set point viewed from the vehicle It will be different. Accordingly, the present invention calculates the camera coordinates of a set point considering the posture of the vehicle, and outputs an AR billboard considering the calculated camera coordinates of the set point. The camera coordinates proposed in the present invention are the coordinates of a set point matching the AR billboard viewed from the camera.

이하에서는 제2 좌표를 카메라 좌표로 변환하는 방법에 대해 알아보기로 한다. 제2 좌표를 카메라 좌표로 변환하기 위해 카메라 투영 행렬에 제2 좌표 벡터를 곱한다. 카메라 투영 행렬에 제2 좌표 벡터를 곱하면 결과는 벡터 [v0, v1, v2, v3]가 된다. 이후 x = (0.5 + v0 / v3) * widthOfCameraView 및 y = (0.5 - v1 / v3) * heightOfCameraView이다. 제2 좌표 벡터는 [n -e u 1]이고, 카메라 투영 행렬은 원래 카메라 투영 행렬과 회전 행렬을 곱한 결과이다.Hereinafter, a method of converting the second coordinates into camera coordinates will be described. To convert the second coordinates into camera coordinates, the camera projection matrix is multiplied by the second coordinate vector. When the second coordinate vector is multiplied by the camera projection matrix, the result is the vector [v0, v1, v2, v3]. Since x = (0.5 + v0 / v3) * widthOfCameraView and y = (0.5 - v1 / v3) * heightOfCameraView. The second coordinate vector is [n -e u 1], and the camera projection matrix is the result of multiplying the original camera projection matrix by the rotation matrix.

카메라 투영 행렬은 다음과 같다.The camera projection matrix is:

Figure pat00001
Figure pat00001

회전 행렬은 차량에 장착된 센서로부터 획득할 수 있다. 본 발명은 GPS 좌표를 네비게이션 좌표로 변환하며, 이후 네비게이션 좌표를 카메라 좌표로 변환한다.The rotation matrix can be obtained from a sensor mounted on the vehicle. The present invention converts GPS coordinates into navigation coordinates, and then converts navigation coordinates into camera coordinates.

AR 3D 맵핑모듈(322)은 지상실측정보(Ground Truth) 기반으로 지형을 인식한다. 또한, AR 3D 맵핑모듈(322)은 인공지능기반 객체 분류 기술을 이용하여 도로 주변의 주요 형태를 인식한다. 일 예로 AR 3D 맵핑모듈(322)은 도로 주변의 주요 형태인 차선, 인도, 표지판, 문자인식, 주변의 차량, 사람, 오토바이 등을 인식한다.The AR 3D mapping module 322 recognizes the terrain based on ground truth. In addition, the AR 3D mapping module 322 recognizes major shapes around the road using artificial intelligence-based object classification technology. For example, the AR 3D mapping module 322 recognizes lanes, sidewalks, signs, text recognition, surrounding vehicles, people, motorcycles, and the like, which are major shapes around the road.

이하에서는 인공지능을 이용하여 객체를 분류하여 주변 공간을 인식하는 방법에 대해 간략하게 알아보기로 한다.Hereinafter, a method of recognizing the surrounding space by classifying objects using artificial intelligence will be briefly described.

비전(Vision)은 본 발명에서 제안하는 AR 엔진에 필요한 기본 SDK(Software Development Kit) 이다. 비전은 카메라 배열, 객체 검출/구분/분할, 차선 특징 추출, 기타 인터페이스를 가능하게 한다.Vision is a basic SDK (Software Development Kit) required for the AR engine proposed in the present invention. Vision enables camera arrays, object detection/classification/segmentation, lane feature extraction, and other interfaces.

비전은 비전 코어에서 실행되는 실시간 추론을 액세스한다. 비전 AR은 맞춤형 증강 현실을 구현하는데 사용되는 비전(Vision)용 애드온 모듈이다. 비전 AR은 차선 재질(lane material), 차선 구조(lane geometry), 차선가림(Occlusion), 사용자 지정 객체 등 사용자의 경로를 시각화한다. 비전 세이프티(Vision Safety)는 과속, 주변 차량, 자전거 이용자, 보행자, 차선 이탈 등에 대한 맞춤형 경고를 생성하는데 사용되는 Vision용 애드온 모듈이다.Vision accesses real-time inference running on the Vision Core. Vision AR is an add-on module for Vision used to implement custom augmented reality. Vision AR visualizes the user's path, including lane material, lane geometry, occlusion, and custom objects. Vision Safety is an add-on module for Vision that is used to create custom warnings for speeding, nearby vehicles, cyclists, pedestrians, lane departure, and more.

상술한 비전 코어(Vision core)는 모든 기계 학습 모델을 포함하는 시스템의 핵심 로직이며, Vision을 프로젝트로 가져오면, Vision core가 자동으로 제공된다.The aforementioned Vision core is the core logic of the system including all machine learning models, and when Vision is imported into a project, Vision core is automatically provided.

AR 3D 스페이스 모듈(323)은 인공지능으로 획득된 공간인식과 3D 지형정보 매쉬업 서비스를 이용하여 실제 차량의 위치를 3D 지형정보에 맵핑한다. 이에 대해 구체적으로 살펴보면, 차량의 전방에 위치한 전방 카메라의 촬영한 영상으로부터 차량의 정확한 헤딩값을 산출하며, 주변의 주요 객체의 위치좌표를 이용하여 차량의 실시간 위치를 보정한다. 이를 위해 AR 3D 스페이스 모듈(323)은 차량이 주행하는 주행 경로 상의 주요 객체(표지판, 신호등 등)에 대한 위치좌표를 저장한다. 헤딩값의 주요 포인트로는 교차점, 분기점 등이 포함된다.The AR 3D space module 323 maps the location of a real vehicle to 3D terrain information by using space recognition obtained by artificial intelligence and a 3D terrain information mash-up service. In detail, an accurate heading value of the vehicle is calculated from an image captured by a front camera located in front of the vehicle, and the real-time location of the vehicle is corrected using the location coordinates of surrounding main objects. To this end, the AR 3D space module 323 stores the location coordinates of major objects (signs, traffic lights, etc.) on the driving route along which the vehicle travels. The main points of the heading value include intersection points, divergence points, etc.

맵핑한 3D 지형정보에 차량에 설치된 카메라로부터 촬영된 영상으로부터 실제 차량의 위치 추정 및 카메라 인식 범위 내에서 미리 로딩된 데이터를 기준으로 사전에 설정 지점의 AR 광고판을 인식해 두어 렌더링 시 해당 위치를 지날 때 즉시 출력할 수 있도록 한다.Based on data pre-loaded within the camera recognition range and estimating the location of the actual vehicle from the image taken from the camera installed in the vehicle on the mapped 3D terrain information, the AR billboard at the set point is recognized in advance to pass the location during rendering. to be able to print immediately.

AR 렌더링 및 객체관리 모듈(330)은 AR 렌더링 및 객체를 관리한다. AR 렌더링은 표준화된 위치인식 아이콘을 출력하면 사용자의 브랜드 및 프리미엄 등록 여부에 따라 저폴리곤, 고폴리곤 형태의 3D 정보를 제공하여 사용자의 호기심을 끌 수 있도록 한다. 객체관리 모듈은 각 지형지표를 3x3 미터로 고유한 단어조합의 이름을 가지는 ID로 명명하며, 해당 ID 마다의 메타데이터를 관리한다.The AR rendering and object management module 330 manages AR rendering and objects. When AR rendering outputs a standardized location-aware icon, it provides 3D information in the form of low-polygon or high-polygon depending on the user's brand and premium registration to attract the user's curiosity. The object management module names each topographical indicator as an ID having a unique word combination of 3x3 meters and manages metadata for each corresponding ID.

AR 맵핑 모듈은 부가정보를 출력하는 디스플레이의 형태에 따라 부가정보를 POI에 맵핑한다. AR 맵핑 모듈은 AR 와핑(Warping)모듈(321), AR 3D 맵핑모듈(322), 3D space 매핑 모듈(323)을 포함한다.The AR mapping module maps additional information to POIs according to the shape of a display outputting the additional information. The AR mapping module includes an AR warping module 321, an AR 3D mapping module 322, and a 3D space mapping module 323.

즉, AR 맵핑 모듈은 AR 와핑(Warping)모듈, AR 3D 맵핑모듈, 3D 스페이스 맵핑모듈을 포함하며, 이외에도 3D 객체 관리모듈(324)을 포함한다.That is, the AR mapping module includes an AR warping module, an AR 3D mapping module, and a 3D space mapping module, as well as a 3D object management module 324.

AR 플랫폼은 다양한 형태의 디스플레이 모듈을 포함한다. 디스플레이 모듈은 AR HUD 뷰 모듈(331), AR overlay 뷰 모듈(332), AR camera 뷰 모듈(333) 등 다양한 형태로 구현될 수 있다. 이외에도 AR 렌더링 및 객체관리 모듈(330)은 AR 뷰를 관리는 AR 뷰 관리모듈(334)을 포함한다.The AR platform includes various types of display modules. The display module may be implemented in various forms such as an AR HUD view module 331, an AR overlay view module 332, and an AR camera view module 333. In addition, the AR rendering and object management module 330 includes an AR view management module 334 for managing AR views.

도 4는 본 발명의 일실시 예에 따른 AR 서비스 시스템의 구성도이다. 이하 도 4를 이용하여 본 발명의 일실시 예에 따른 AR 서비스 시스템에 대해 알아보기로 한다.4 is a configuration diagram of an AR service system according to an embodiment of the present invention. Hereinafter, an AR service system according to an embodiment of the present invention will be described using FIG. 4 .

AR 서비스 시스템은 중계 단말(500), AR 메인서버(600) 및 연동 시스템(400)을 포함한다. 물론 상술한 구성 이외에 다른 구성이 본 발명에서 제안하는 AR 서비스 시스템에 포함될 수 있다.The AR service system includes a relay terminal 500, an AR main server 600, and an interworking system 400. Of course, other configurations other than the above configuration may be included in the AR service system proposed in the present invention.

중계 단말(500)은 차량에 설치되거나, 단말 형태로 구현될 수 있다. 일 예로 중계 단말은 다양한 정보를 수집할 수 있는 센서와 연결되어 있거나 내장된 구성이라면 이에 포함된다.The relay terminal 500 may be installed in a vehicle or implemented in the form of a terminal. For example, a relay terminal is included if it is connected to or embedded in a sensor capable of collecting various information.

중계 단말(500)은 GPS 또는 RTK를 이용하여 위치를 측위하며, 중계 단말(500)이 장착된 차량의 최적의 위치(자세)를 판단한다. 또한, 중계 단말(500)은 카메라로부터 수집된 영상을 이용하여 영상 기반 3D 위치를 측위한다. 중계 단말(500)에 상세한 기능에 대해서는 도 5에서 설명하기로 한다. The relay terminal 500 determines the location using GPS or RTK, and determines the optimal position (posture) of the vehicle on which the relay terminal 500 is mounted. In addition, the relay terminal 500 measures an image-based 3D location using images collected from a camera. Detailed functions of the relay terminal 500 will be described with reference to FIG. 5 .

AR 메인서버(600)는 GPS 또는 RTK를 이용하여 산출한 측위 또는 카메라로부터 수집된 영상을 이용한 VPS(Visual Positioning Service) 기반 측위를 AR 3D에 매핑하는 기능을 수행한다. AR 메인서버의 상세한 동작에 대해서는 도 6에서 살펴보기로 한다.The AR main server 600 performs a function of mapping positioning calculated using GPS or RTK or positioning based on VPS (Visual Positioning Service) using images collected from cameras to AR 3D. The detailed operation of the AR main server will be described in FIG. 6 .

연동시스템(400)은 AR 메인서버(500)와 연결되며, AR 메인서버(500)로 필요한 데이터 또는 정보를 제공한다. 연동시스템(400)은 AI 데이터 허브(외부 오픈 데이터포털)(401), 컨텐츠 제공서버(광고 컨텐츠 등)(403), 지도 데이터 제공서버(3D 모델, 공간정보)(405), 공공데이터 제공서버(주요 시설물 정보)(407)를 포함할 수 있다. AI 데이터 허브(401)는 AR 메인서버로 도시 데이터를 제공하며, 컨텐츠 제공서버(403)는 AR 메인서버로 동영상/ 이미지를 제공한다. 또한, 3D 공간지도 데이터 제공서버(405)는 AR 메인서버로 3D 모델링 지도데이터를 제공하며, 공공데이터 제공서버(407)는 AR 메인서버로 보정용 위치 데이터인 주요 시설물(가로등, 신호등 등)에 대한 데이터를 제공한다.The interworking system 400 is connected to the AR main server 500 and provides necessary data or information to the AR main server 500. The interworking system 400 includes an AI data hub (external open data portal) 401, a content providing server (advertising content, etc.) 403, a map data providing server (3D model, spatial information) 405, and a public data providing server. (Main facility information) 407 may be included. The AI data hub 401 provides city data to the AR main server, and the content providing server 403 provides video/images to the AR main server. In addition, the 3D space map data providing server 405 provides 3D modeling map data to the AR main server, and the public data providing server 407 is the AR main server to provide information about major facilities (street lights, traffic lights, etc.) that are location data for correction. Provide data.

도 5는 본 발명의 일실시 예에 따른 중계 단말의 구성을 도시하고 있다. 이하 도 5를 이용하여 본 발명의 일실시 예에 따른 중계 단말의 구성에 대해 상세하게 알아보기로 한다.5 illustrates a configuration of a relay terminal according to an embodiment of the present invention. Hereinafter, the configuration of a relay terminal according to an embodiment of the present invention will be described in detail using FIG. 5 .

상술한 바와 같이 중계 단말은 GPS 또는 RTK를 이용하여 위치를 측위하는 구성과 영상을 이용하여 위치를 보정하는 구성, 3D 맵핑하는 구성 및 차량의 최적 위치를 판단하여 출력하는 구성으로 구분된다. 이하에서는 해당 구성에 대해 순차적으로 알아보기로 한다.As described above, the relay terminal is divided into a configuration for locating a location using GPS or RTK, an configuration for correcting a location using an image, a configuration for 3D mapping, and a configuration for determining and outputting the optimum location of a vehicle. In the following, the configuration will be sequentially described.

입력모듈(521)은 기기 정보 또는 회원정보를 입력하며, 어플리케이션 설정과 관련된 기능을 등록한다. The input module 521 inputs device information or member information and registers functions related to application settings.

UI 매니저(관리)모듈(501)은 AR 정보 연동을 위한 서비스 및 사용자 ID를 관리한다. UI 관리모듈(501)은 입력모듈이 입력한 정보에 따라 사용자를 관리하거나, 서비스를 지원한다. 물론 UI 관리모듈(501)은 입력모듈(521)로 필요한 정보를 입력할 수 있도록 UI를 지원한다.The UI manager (management) module 501 manages services and user IDs for linking AR information. The UI management module 501 manages users or supports services according to information input by the input module. Of course, the UI management module 501 supports the UI so that necessary information can be input through the input module 521 .

AR 위치 획득모듈(503)은 GPS 또는 RTK 연결 여부 및 연결에 따른 위도/경도를 획득한다. AR 센서(505)는 가속도센서, 자이로센서 또는 컴퍼스(compass) 등을 포함하며, 중계 단말이 장착된 차량의 방향, 속도, 가속도 등을 획득한다.The AR location acquisition module 503 obtains whether or not GPS or RTK connection is established and latitude/longitude according to the connection. The AR sensor 505 includes an acceleration sensor, a gyro sensor, or a compass, and acquires the direction, speed, acceleration, and the like of a vehicle equipped with a relay terminal.

AR 위치 획득모듈(503) 및 AR 센서(505)에서 획득한 정보는 위치 판단/보정모듈(523)로 제공된다. 위치 판단/보정모듈(523)은 GPS, RTK 또는 VPS 순으로 우선순위를 판단하여 차량의 위도 및 경도를 결정한다. 물론 위치 판단/보정모듈(523)은 후술할 영상기반 위치확인 맵핑모듈에서 맵핑된 객체의 특징점(VPS)을 제공받아 차량의 위도 및 경도를 결정한다.Information obtained from the AR location acquisition module 503 and the AR sensor 505 is provided to the location determination/correction module 523. The location determination/correction module 523 determines the latitude and longitude of the vehicle by prioritizing GPS, RTK, or VPS in order. Of course, the position determination/correction module 523 determines the latitude and longitude of the vehicle by receiving the feature point (VPS) of the object mapped in the image-based positioning mapping module to be described later.

AR 방향 자세 획득모듈(507)은 위치 판단/보정모듈(523)에서 판단한 차량의 위치 및 경도를 이용하여 차량의 방향 및 자세 정보를 획득한다. 즉, AR 방향 자세 획득모듈(507)은 자이로 센서 또는 가속도 센서 또는 IMU(Inertial Measurement Unit) 등으로부터 수집된 정보를 이용하여 차량의 방향 및 자세 정보를 획득한다.The AR direction and attitude acquisition module 507 obtains vehicle direction and attitude information using the vehicle position and longitude determined by the position determination/correction module 523 . That is, the AR direction and attitude acquisition module 507 obtains vehicle direction and attitude information by using information collected from a gyro sensor, an acceleration sensor, or an inertial measurement unit (IMU).

객체 판단모듈(527)은 카메라로부터 획득된 영상으로부터 도로, 인도, 상점 또는 건물 등 객체를 판단한다. AR 카메라 뷰 관리모듈(517)은 AR 화면 제공을 위해 카메라의 화각(FOV)과 AR 카메라, 즉 실세계 카메라 영상좌표를 3D 공간 내 카메라 좌표로 변환하는 파라미터를 생성하며, 디지털 트윈/미러 환경 내 3D 좌표를 맵핑한다.The object determination module 527 determines an object such as a road, a sidewalk, a store, or a building from an image obtained from a camera. The AR camera view management module 517 creates parameters for converting the field of view (FOV) of the camera and AR camera, that is, real-world camera image coordinates, into camera coordinates in the 3D space to provide an AR screen, and creates a 3D image within the digital twin/mirror environment. Map coordinates.

영상기반 객체 구분모듈(515)은 카메라에서 촬영된 영상에서 AI 기술을 이용하여 도로, 인도, 횡단보도, 표지판, 사람, 자동차 등 객체를 구분한다.The image-based object classification module 515 classifies objects such as roads, sidewalks, crosswalks, signs, people, and cars using AI technology from images captured by the camera.

영상기반 위치확인 맵핑모듈(513)은 AR 서버에 저장된 포인트 클라우드 정보를 위도/경도 기반 정의된 반경 내 데이터를 수신/다운로드하여 디바이스 메모리에 저장하며, 실시간으로 카메라 입력영상과 특징점을 맵핑한다. 즉, 영상기반 위치확인 맵핑모듈(513)은 카메라로부터 입력된 영상에서 구분된 표지판, 신호등, 횡단보드의 특징점을 기저장된 객체의 특징점에 매핑한다. The image-based positioning mapping module 513 receives/downloads the point cloud information stored in the AR server within a defined radius based on latitude/longitude, stores it in the device memory, and maps camera input images and feature points in real time. That is, the image-based positioning mapping module 513 maps feature points of signs, traffic lights, and crossing boards classified from images input from the camera to feature points of pre-stored objects.

AR 로컬캐싱 처리 동기화 알고리즘 모듈(531)은 정해진 반경 내 또는 일정 구역기반 저장된 AR 맵핑 데이터를 기반으로 AR 메인서버 데이터와 비교 확인하여 동기화를 결정한다.The AR local caching processing synchronization algorithm module 531 determines synchronization by comparing and checking the AR mapping data stored within a predetermined radius or based on a certain area with the AR main server data.

AR 3D 객체 부가정보 수신모듈(509)은 AR 메인서버로부터 부가정보를 포함한 3D 및 미디어 데이터를 수신받아 로컬 저장소에 저장하며, AR 화면에 표출할 수 있도록 부가정보를 로딩한다.The AR 3D object additional information receiving module 509 receives 3D and media data including additional information from the AR main server, stores them in a local storage, and loads the additional information so that it can be displayed on the AR screen.

AR 오버레이 뷰 모듈(511)은 카메라가 바라보는 시야각 및 정보 출력장치의 위치에 따라 변화되는 위치 자세에 따라 3D 및 미디어 데이터를 병합하여 출력한다.The AR overlay view module 511 merges and outputs 3D and media data according to a position and posture that change according to a viewing angle of a camera and a position of an information output device.

AR 화면 출력모듈(525)은 콘텐츠와 병합된 오버레이뷰, UI 및 지도를 함께 출력한다.The AR screen output module 525 outputs the overlay view, UI, and map merged with the content.

이와 같이 본 발명은 이동하는 차량의 위치 및 자세를 고려하여 객체에 부가정보를 정확하게 매칭되도록 출력하는 방안을 제안한다.As such, the present invention proposes a method of accurately matching and outputting additional information to an object in consideration of the position and posture of a moving vehicle.

도 6은 본 발명의 일실시 예에 따른 AR 메인서버의 구성을 도시하고 있다. 이하 도 6을 이용하여 본 발명의 일실시 예에 따른 AR 메인서버의 구성에 대해 상세하게 알아보기로 한다.6 shows the configuration of an AR main server according to an embodiment of the present invention. Hereinafter, the configuration of the AR main server according to an embodiment of the present invention will be described in detail using FIG. 6 .

GPS 위치기반 컨텐츠 요청모듈(605)은 중계 단말로부터 요청된 GPS 위치 및 방향 데이터 기반으로 제공될 AR 컨텐츠의 위치기반 데이터 요청을 위한 쿼리를 제작한다.The GPS location-based content request module 605 creates a query for requesting location-based data of AR content to be provided based on the GPS location and direction data requested from the relay terminal.

AR 서비스 가능영역 확인모듈(603)은 GPS 위치기반 컨텐츠 요청모듈(605)에서 작성된 쿼리 기반 공공데이터 또는 3D 데이터를 확인하여 기본적으로 위도/경도/방향 기반 정보제공이 가능한 영역인지, 부가적으로 VPS 기반 정보제공이 가능한 영역인지 확인한다.The AR service available area confirmation module 603 checks the query-based public data or 3D data created in the GPS location-based content request module 605, and determines whether the latitude/longitude/direction-based information can be provided by default, and additionally VPS. Check whether the provision of basic information is possible.

사용자 맞춤형정보 처리시스템(601)은 공공데이터, 3D 데이터 기반 다양한 POI 정보를 기반으로 사용자의 서비스 설정에 따라 데이터 필터링 조건을 설정한다.The user-customized information processing system 601 sets data filtering conditions according to user service settings based on various POI information based on public data and 3D data.

위도/경도 기반 공공데이터 연동모듈(621)은 개인화 필터 조건에 따른 관련 데이터를 공공데이터(도로, 교차로 정보 등)로부터 수집하여 송신 데이터로 정렬한다.The latitude/longitude based public data linking module 621 collects related data according to personalization filter conditions from public data (road, intersection information, etc.) and arranges them as transmission data.

위도/경도 기반 3D 데이터 연동모듈(623)은 AR 화면에 위치기반 3D 입체 구현을 위해 3D 빌딩 등 AI 데이터 허브로부터 도시 데이터를 수집하여 3D 지도에 반영한다.The latitude/longitude based 3D data linkage module 623 collects city data from AI data hubs such as 3D buildings and reflects them on a 3D map in order to implement a location-based 3D stereoscopic image on an AR screen.

AR 서비스 컨텐츠 관리 모듈(625)은 AR 서비스 컨텐츠를 관리하는 시스템으로 내부서버(또는 정보 출력장치) 제공용 미디어 데이터의 등록/수정/삭제/조회/파일 업로드/다운로드 기능을 수행한다.The AR service contents management module 625 is a system for managing AR service contents and performs registration/modification/deletion/inquiry/file upload/download functions of media data for provision of an internal server (or information output device).

3D 공간지도 스캔모듈(633)은 시각 기반 위치 파악을 할 경우, 실제 장소에서 확보한 파노라마 영상을 기반으로 특징점을 추출하여 이를 서버에 저장한다.The 3D space map scan module 633 extracts feature points based on a panoramic image obtained from a real place and stores them in a server when time-based positioning is performed.

3D 공간지도 연산모듈(631)은 추출된 특징점을 기반으로 이동된 특징점의 위치 관계를 통해 3D 공간 내 해당 특징점들을 포인트 클라우드 라이브러리(PCL)로 저장한다.The 3D space map calculation module 631 stores the corresponding feature points in the 3D space as a point cloud library (PCL) through the positional relationship of the moved feature points based on the extracted feature points.

3D 공간지도 DB(629)는 저장된 PCL이 실제 세계의 위도/경도 위치에 정밀하게 맵핑하여 3D 공간지도를 구축함으로써 영상기반 위치추적으로 활용된다.The 3D space map DB 629 is used for image-based positioning by constructing a 3D space map by precisely mapping the stored PCL to the latitude/longitude position of the real world.

위치파악 데이터 전송모듈(611)은 내부서버(또는 정보 출력장치)의 카메라 기반 VPS를 위한 PCL 데이터 구역별 전송한다.The positioning data transmission module 611 transmits PCL data for each area of the camera-based VPS of the internal server (or information output device).

AR 서비스 제공용 3D 데이터 변환 및 미디어 처리시스템(627)은 AR 화면에 3D 입체 처리를 위한 3D 빌딩 등 디지털트윈(미러월드 데이터)로부터 3D 모델 및 공간정보를 기반으로 데이터를 준비한다.The 3D data conversion and media processing system 627 for AR service provision prepares data based on 3D models and spatial information from digital twins (mirror world data) such as 3D buildings for 3D stereoscopic processing on AR screens.

AR 서비스 처리모듈(607)은 디바이스에서 요청된 UI 레이어 서비스 설정에 따라 증강 스트리트(Street)/시이니지(Signage)/시설물/메세지 데이터를 전송한다.The AR service processing module 607 transmits augmented street/signage/facility/message data according to UI layer service settings requested by the device.

이외에도 AR 메인서버(600)는 회원 및 권한 관리모듈(609), 모니터링모듈(613) 또는 관리모듈(635)을 포함한다.In addition, the AR main server 600 includes a member and authority management module 609, a monitoring module 613, or a management module 635.

이하에서는 본 발명에서 제안하는 AR 광고판을 관리 및 거래하는 것이 가능한 플랫폼에 대해 알아보기로 한다. 본 발명에서 제안하는 AR 광고판 관리 및 거래 플랫폼은 ① AR 광고판 생성 후 광고판 구매 희망자에게 AR 광고판의 소유권 판매 ② AR 광고 계약을 위한 통계자료 및 광고 게재 수수료 산출 ③ 광고판 구매 희망자간 AR 광고판의 소유권 거래 등을 지원한다. 특히, AR 광고 계약을 위한 통계자료 및 광고 게재 수수료 산출은 AR 광고판별로 광고 효율을 파악할 수 있는 위치정보 분석 제공, AR 광고 템플릿 제공 및 검수, AR 광고 게재 및 AR 광고비 중개 등을 지원한다. 또한, 제휴 사용자간 AR 광고판의 소유권 거래는 AR 광고판에 대한 가격 정보를 공개하여 가상자산화하며, 특히, 가상자산을 지키는 보안 시스템을 제공한다.Hereinafter, a platform capable of managing and trading AR billboards proposed in the present invention will be described. The AR billboard management and trading platform proposed in the present invention ① sells the ownership of the AR billboard to a person who wants to purchase the billboard after creating an AR billboard ② calculates the statistics data and advertisement posting fee for the AR advertisement contract ③ trades the ownership of the AR billboard between those who wish to purchase the billboard supports In particular, statistics for AR advertisement contracts and calculation of advertisement posting fees support location information analysis to determine advertisement efficiency by AR advertisement, provision and inspection of AR advertisement templates, AR advertisement posting and AR advertisement cost mediation. In addition, the ownership transaction of the AR billboard between affiliated users discloses the price information of the AR billboard to become a virtual asset, and in particular, provides a security system to protect the virtual asset.

도 7은 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 지원하는 광고판 형태를 도시하고 있다. 이하 도 7을 이용하여 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 지원하는 광고판 형태에 대해 알아보기로 한다.7 illustrates a billboard type supported by the AR billboard management and trading platform according to an embodiment of the present invention. Hereinafter, a billboard type supported by the AR billboard management and trading platform according to an embodiment of the present invention will be described using FIG. 7 .

도 7에 의하면, AR 광고판 관리 및 거래 플랫폼에서 지원하는 광고판은 가상의 광고판 형태를 지원한다. Referring to FIG. 7 , a billboard supported by the AR billboard management and trading platform supports a virtual billboard type.

도 7은 본 발명의 다른 실시예에 의한 AR 광고판 관리 및 거래 플랫폼에서 지원하는 광고 표출 방식을 도시하고 있다. 도 1에서 제안하는 AR 광고판 관리 및 거래 플랫폼은 가상의 광고판에 광고를 표출(게재)하는 반면, 도 7에서 제안하는 광고는 POI에 대한 정보를 제공하는 방식으로 광고를 표출한다. 특히, 도 7은 이동수단에 의해 이동하는 상태에서 광고를 표출하며, 이전에 표출된 광고는 스택형 배너 형태로 표출된다. 사용자는 필요한 경우 스택형 배너에 표시된 광고 중 원하는 광고를 확인할 수 있다. 물론 이전에 표출되는 광고는 스택형 배터 형태 이외에 다른 형태로 표출 가능하다.7 illustrates an advertisement presentation method supported by an AR billboard management and trading platform according to another embodiment of the present invention. The AR billboard management and trading platform proposed in FIG. 1 displays (posts) advertisements on a virtual billboard, while the advertisement proposed in FIG. 7 displays advertisements in a manner that provides information about POI. In particular, FIG. 7 displays an advertisement while moving by a moving means, and the previously displayed advertisement is displayed in the form of a stacked banner. If necessary, the user can check a desired advertisement among advertisements displayed on the stacked banner. Of course, previously displayed advertisements can be displayed in other forms besides the stacked batter form.

도 7에 의하면, 스택형 배너에 스타벅스, 자금성, 베스킨31, 서울시청 관련 광고가 표출되어 있으며, 사용자는 표출된 광고 중 상세 정보를 원하는 광고에 대해서는 다양한 방식 중 어느 하나의 방식으로 요청하여 확인할 수 있다. 스택형 배너에 표시되는 광고는 이동수단이 이동함에 따라 업데이트된다. 또한, 광고판은 사용자가 이동하는 경로 상에 위치한 광고를 중심으로 게재함으로 사용자의 광고 표출 효과를 높일 수 있다.Referring to FIG. 7, advertisements related to Starbucks, Forbidden City, Baskin 31, and Seoul City Hall are displayed on the stacked banner, and the user requests and confirms the advertisement desired for detailed information among the displayed advertisements in one of various ways. can The advertisement displayed on the stacked banner is updated as the vehicle moves. In addition, the billboard can increase the effect of displaying advertisements by users by centrally displaying advertisements located on the user's moving path.

도 8은 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 제안하는 서비스 모델을 도시하고 있다. 도 8에 의하면, AR 광고판 관리 및 거래 플랫폼은 플랫폼 내에서 AR 광고판을 거래하거나 관리하는 것이 가능하다. 즉, AR 광고판을 생성한 분양자는 AR 광고판 관리 및 거래 플랫폼을 이용하여 피분양자(광고판 구매 희망자)에게 분양한다. 분양되는 AR 광고판은 거래 환경에 따라 분양대금 등 상이한 형태로 분양된다. 거래 환경은 유동인구, 위치, 크기 등을 포함한다.8 illustrates a service model proposed by the AR billboard management and trading platform according to an embodiment of the present invention. Referring to FIG. 8 , the AR billboard management and trading platform can trade or manage AR billboards within the platform. That is, the seller who created the AR billboard sells it to the buyer (those who wish to purchase the billboard) by using the AR billboard management and trading platform. The AR billboards to be sold are sold in different forms, such as the sales price, depending on the transaction environment. The trading environment includes foot traffic, location, size, etc.

광고판을 분양받은 피분양자는 AR 광고판에 광고를 표출할 광고주를 모집한다. 피분양자는 광고주와 광고 계약을 체결하며, 광고 계약이 완료되면 해당 AR 광고판에 광고를 게재한다. 이를 위해 AR 광고판 관리 및 거래 플랫폼은 광고비 정산 프로그램을 포함하며, 포함된 광고비 정산 프로그램을 이용하여 광고비를 이해관계인들에게 정산한다. 물론 피분양자는 분양받은 AR 광고판을 재판매할 수 있음은 자명하다.The buyer who has received the billboard recruits advertisers to display advertisements on the AR billboard. The seller signs an advertisement contract with the advertiser, and when the advertisement contract is completed, the advertisement is posted on the AR billboard. To this end, the AR billboard management and trading platform includes an advertising cost settlement program, and uses the included advertising cost settlement program to settle advertising costs to interested parties. Of course, it is self-evident that the buyer can resell the AR billboard that has been sold.

도 9는 본 발명에서 제안하는 광고판의 형태를 도시하고 있다. 도 9에 의하면, 광고판은 다양한 형상이나 정보를 포함할 수 있다. 일 예로 제1 유형은 해당 광고물의 대표 아이콘, 상점명, 연락처, 상세링크, 대표 아이콘 또는 이미지 중 적어도 어느 하나를 포함한다. 제2 유형은 비행선, 상점명, 거리, 연락처, 이미지 중 적어도 어느 하나를 포함한다. 이외에도 다양한 유형으로 광고판을 구성할 수 있다.9 shows a form of a billboard proposed in the present invention. Referring to FIG. 9 , a billboard may include various shapes or information. For example, the first type includes at least one of a representative icon, store name, contact information, detailed link, representative icon, or image of a corresponding advertisement. The second type includes at least one of airship, store name, distance, contact information, and image. In addition, billboards can be configured in various types.

도 10은 본 발명의 일실시 예에 따른 AR 광고판 관리 및 거래 플랫폼에서 수수료를 정산하는 과정을 도시하고 있다. 이하 도 10을 이용하여 AR 광고판 관리 및 거래 플랫폼에서 수수료를 정산하는 과정에 대해 상세하게 알아보기로 한다.10 illustrates a process of settling fees in the AR billboard management and transaction platform according to an embodiment of the present invention. Hereinafter, using FIG. 10, the process of managing the AR billboard and settling the fee in the transaction platform will be described in detail.

특히, 도 10은 본 발명에서 제안하는 AR 광고판 관리 및 거래 플랫폼에서 광고를 게재하는 과정을 도시하고 있다. In particular, FIG. 10 illustrates a process of posting an advertisement in the AR billboard management and trading platform proposed in the present invention.

광고주 단말은 AR 광고판 관리 및 거래 플랫폼으로 광고 시안을 제공한다.(S1000)The advertiser terminal provides advertisement drafts to the AR billboard management and trading platform. (S1000)

AR 광고판 관리 및 거래 플랫폼은 AR 광고를 표출할 AR 운영사(AR 운영사 서버)로 AR 광고를 표출하기 위한 AR 광고 프로그램 설치를 요청한다. 본 발명과 관련하여 AR 운영사는 버스 운행회사, 택시 운행회사 등과 같은 이동수단을 운영하는 회사를 포함한다. 이외에도 AR 운영사는 이동수단 이외에 다른 장비를 운영하는 회사가 포함된다.(S1010)The AR billboard management and trading platform requests the installation of an AR advertisement program to display AR advertisements to the AR operator (AR operator server) that will display AR advertisements. In relation to the present invention, AR operators include companies that operate means of transportation, such as bus operating companies and taxi operating companies. In addition, AR operators include companies that operate equipment other than means of transportation (S1010).

AR 광고판 관리 및 거래 플랫폼은 AR 운영사로부터 운행하는 이동수단의 위치 정보를 포함한 승객 정보 등을 제공받으며, 제공받은 정보를 기반으로 시설 운용 수수료를 산출한다. 즉, 이동수단이 광고효과가 높은 경로를 운행하거나, 이동수단을 이용하여 승객의 수가 많은 경우에는 상대적으로 높은 운용 수수료가 산출된다. 이외에도 AR 광고판 관리 및 거래 플랫폼은 다양한 방식으로 시설 운용 수수료를 산출하는 것이 가능하다.The AR billboard management and transaction platform receives passenger information, including the location information of the means of transportation operated by the AR operator, and calculates facility operation fees based on the information provided. That is, when the means of transportation travels on a route with high advertising effect or the number of passengers using the means of transportation is large, a relatively high operating fee is calculated. In addition, the AR billboard management and trading platform can calculate facility operation fees in various ways.

또한, 필요한 경우, AR 광고판 관리 및 거래 플랫폼은 사용자 단말로 제공할 AR 광고 어플리케이션을 저장하며, 필요한 경우 사용자 단말로 AR 광고 어플리케이션을 제공한다. 사용자 단말은 제공받은 AR 광고 어플리케이션을 다운로드받아 설치한다.In addition, if necessary, the AR billboard management and trading platform stores the AR advertisement application to be provided to the user terminal, and provides the AR advertisement application to the user terminal if necessary. The user terminal downloads and installs the provided AR advertisement application.

AR 광고판 관리 및 거래 플랫폼는 설치된 AR 광고판에 광고를 게재한다. 사용자는 사용자 단말을 이용하여 AR 광고를 시청하거나, 이동수단 상에 설치된 표시수단을 이용하여 AR 광고를 시청한다. 물론 사용자는 상술한 바와 같이 상세 정보 확인이 요구되는 광고에 대해서는 다양한 방식 중 어느 하나의 방식을 이용하여 요청한다.(S1020)The AR billboard management and trading platform places advertisements on installed AR billboards. A user watches an AR advertisement using a user terminal or uses a display means installed on a means of transportation to watch an AR advertisement. Of course, as described above, the user requests an advertisement for which detailed information confirmation is required using one of various methods. (S1020)

본 발명은 도면에 도시된 일실시 예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. Although the present invention has been described with reference to one embodiment shown in the drawings, this is only exemplary, and those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. .

200: AR 엔진 모듈 210, 310: 정보수집 모듈
220, 320: AR 맵핑 모듈 230, 330: AR 렌더링/객체관리 모듈
400: 연동시스템 500: 중계 단말
600: AR 메인서버
200: AR engine module 210, 310: information collection module
220, 320: AR mapping module 230, 330: AR rendering/object management module
400: interworking system 500: relay terminal
600: AR main server

Claims (7)

광고주 단말로부터 제공받은 광고 시안을 광고 시안에 대응되는 AR 광고를 생성하고, 생성한 AR 광고를 AR 광고판에 표출되도록 지시하는 AR 광고판 운영사 서버; 및
상기 광고주 단말로부터 제공받은 광고 시안, 광고 시안에 대응되는 AR 광고 또는 AR 광고판이 설치된 지점에 대한 정보를 저장하는 DB를 포함함을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
an AR billboard operator server that generates an AR advertisement corresponding to the advertisement draft provided from the advertiser terminal and instructs the AR advertisement to be displayed on the AR billboard; and
A billboard management and trading platform using AR, characterized in that it includes a DB for storing information about the advertisement draft provided from the advertiser terminal, the AR advertisement corresponding to the advertisement draft, or the location where the AR billboard is installed.
제 1항에 있어서, 상기 AR 광고판 운영사 서버에 의해 운영되는 AR 광고판은 중계 단말에 의해 출력되며,
상기 중계 단말은 사용자에 의해 소지되거나 또는 운행차량 내부에 설치됨을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
The method of claim 1, wherein the AR billboard operated by the AR billboard operator server is output by a relay terminal,
The relay terminal is a billboard management and trading platform using AR, characterized in that carried by the user or installed inside the operating vehicle.
제 2항에 있어서, 상기 AR 광고판은 상기 AR 광고판 운영사 서버를 통해 거래됨을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
The platform of claim 2, wherein the AR billboard is transacted through the AR billboard operator server.
제 2항에 있어서, 상기 AR 광고판은,
현재 위치에서 광고 게재를 요청한 POI는 상기 POI 상에 가상으로 출력하며,
이전 위치에서 광고를 제재한 POI는 스택형 배너로 출력함을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
The method of claim 2, wherein the AR billboard,
The POI requested to display the advertisement at the current location is virtually output on the POI,
A billboard management and trading platform using AR, characterized in that the POI, which sanctioned the advertisement in the previous position, is output as a stacked banner.
제 2항에 있어서, 상기 AR 광고판 운영사 서버는,
상기 중계 단말의 자세가 변경되는 경우에도 설치된 지점상에 AR 광고판이 출력됨을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
The method of claim 2, wherein the AR billboard operator server,
A billboard management and trading platform using AR, characterized in that an AR billboard is output on the installed point even when the posture of the relay terminal is changed.
제 5항에 있어서, 상기 AR 광고판 운영사 서버는,
상기 AR 광고판을 출력할 수 있는 중계 단말의 위치 정보 및 상기 중계 단말이 설치된 운행차량의 이용객 정보를 수집함을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
The method of claim 5, wherein the AR billboard operator server,
A billboard management and trading platform using AR, characterized in that for collecting location information of a relay terminal capable of outputting the AR billboard and user information of a vehicle in which the relay terminal is installed.
제 5항에 있어서, 상기 AR 광고판 운영사 서버는,
상기 AR 광고판에 의해 출력되는 광고의 가격 또는 광고비를 정산함을 특징으로 하는 AR을 이용한 광고판 관리 및 거래 플랫폼.
The method of claim 5, wherein the AR billboard operator server,
A billboard management and trading platform using AR, characterized in that the price or advertising cost of the advertisement output by the AR billboard is settled.
KR1020220081159A 2021-07-05 2022-07-01 An advertising sign management and trading platform using AR KR20230007237A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2022/009634 WO2023282570A1 (en) 2021-07-05 2022-07-05 Advertisement board management and trading platform using ar

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210087569 2021-07-05
KR20210087569 2021-07-05

Publications (1)

Publication Number Publication Date
KR20230007237A true KR20230007237A (en) 2023-01-12

Family

ID=84923727

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220081159A KR20230007237A (en) 2021-07-05 2022-07-01 An advertising sign management and trading platform using AR

Country Status (1)

Country Link
KR (1) KR20230007237A (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190107286A (en) 2019-07-04 2019-09-19 엘지전자 주식회사 Advertisement providing apparatus for vehicle and method for operating the same
KR102185614B1 (en) 2020-05-11 2020-12-02 (주)코리아 싸인 System and method for providing ar advertisting signage conten

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190107286A (en) 2019-07-04 2019-09-19 엘지전자 주식회사 Advertisement providing apparatus for vehicle and method for operating the same
KR102185614B1 (en) 2020-05-11 2020-12-02 (주)코리아 싸인 System and method for providing ar advertisting signage conten

Similar Documents

Publication Publication Date Title
US11365976B2 (en) Semantic label based filtering of objects in an image generated from high definition map data
US12051235B2 (en) Machine learning a feature detector using synthetic training data
US10331957B2 (en) Method, apparatus, and system for vanishing point/horizon estimation using lane models
US12038298B2 (en) Generating navigation instructions
US11501104B2 (en) Method, apparatus, and system for providing image labeling for cross view alignment
US20110103651A1 (en) Computer arrangement and method for displaying navigation data in 3d
US8649610B2 (en) Methods and apparatus for auditing signage
US8218943B2 (en) CV tag video image display device provided with layer generating and selection functions
CN102183261B (en) Method for re-using photorealistic 3D landmarks for nonphotorealistic 3D maps
US8781736B2 (en) Data-driven traffic views with continuous real-time rendering of traffic flow map
US20110109618A1 (en) Method of displaying navigation data in 3d
US11525695B2 (en) Smart glass for vehicles
KR20230007237A (en) An advertising sign management and trading platform using AR
WO2023282570A1 (en) Advertisement board management and trading platform using ar
KR102482829B1 (en) Vehicle AR display device and AR service platform
WO2009126159A1 (en) Methods and apparatus for auditing signage

Legal Events

Date Code Title Description
E902 Notification of reason for refusal