Nothing Special   »   [go: up one dir, main page]

KR20130028317A - Mobile terminal for position tracking, appratus providing position tracking service and position tracking system - Google Patents

Mobile terminal for position tracking, appratus providing position tracking service and position tracking system Download PDF

Info

Publication number
KR20130028317A
KR20130028317A KR1020110091790A KR20110091790A KR20130028317A KR 20130028317 A KR20130028317 A KR 20130028317A KR 1020110091790 A KR1020110091790 A KR 1020110091790A KR 20110091790 A KR20110091790 A KR 20110091790A KR 20130028317 A KR20130028317 A KR 20130028317A
Authority
KR
South Korea
Prior art keywords
information
location
portable terminal
server
client device
Prior art date
Application number
KR1020110091790A
Other languages
Korean (ko)
Other versions
KR101689040B1 (en
Inventor
김범열
Original Assignee
엘에스산전 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘에스산전 주식회사 filed Critical 엘에스산전 주식회사
Priority to KR1020110091790A priority Critical patent/KR101689040B1/en
Publication of KR20130028317A publication Critical patent/KR20130028317A/en
Application granted granted Critical
Publication of KR101689040B1 publication Critical patent/KR101689040B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W64/00Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H04W64/006Locating users or terminals or network equipment for network management purposes, e.g. mobility management with additional information processing, e.g. for direction or speed determination
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/90Services for handling of emergency or hazardous situations, e.g. earthquake and tsunami warning systems [ETWS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Emergency Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Public Health (AREA)
  • Telephonic Communication Services (AREA)
  • Alarm Systems (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

PURPOSE: A portable terminal for location tracking, a location tracking service providing device thereof, and a location tracking system thereof are provided to perform indoor and outdoor real time location tracking by using a portable terminal including a GPS(Global Positioning System) module and a Wi-Fi module. CONSTITUTION: A GPS module(302) receives satellite location information. A Wi-Fi module(301) scans surrounding APs(Access Point). The Wi-Fi module receives network identification information from one or more APs. If a location state of a portable terminal is indoor based on the network identification information and receiving signal strength information of the APs, the portable terminal transmits the network identification information and the receiving signal strength information to a server. If the location state is outdoor, the portable terminal transmits the satellite location information to the server. [Reference numerals] (300) Antenna; (301) Wi-Fi module; (302) GPS module; (303) Acceleration sensor; (306) Battery; (308) Name tag(embedded GPS+WiFi+LCD); (309) Watch(embedded electronic watch+GPS+WiFi); (310) Child pager

Description

위치 추적용 휴대용 단말기, 위치 추적 서비스 제공 장치 및 위치 추적 시스템{MOBILE TERMINAL FOR POSITION TRACKING, APPRATUS PROVIDING POSITION TRACKING SERVICE AND POSITION TRACKING SYSTEM}Location tracking portable terminal, location tracking service providing device and location tracking system {MOBILE TERMINAL FOR POSITION TRACKING, APPRATUS PROVIDING POSITION TRACKING SERVICE AND POSITION TRACKING SYSTEM}

본 발명은 실시간 위치 추적으로 어린이의 등하교 길에서 발생 할 수 있는 유괴 및 납치와 같은 긴급 상황이 발생했을 때 효과적으로 대상 어린이의 위치정보를 부모나 관련 공공기관에 제공하여 이에 대응 할 수 있는 서비스를 제공하기 위한 것이다.The present invention provides a service that can effectively respond to the location information of the target child to parents or related public organizations when an emergency situation such as abduction and kidnapping that can occur on the way to and from school children by real-time location tracking It is to.

최근 들어, 어린이의 납치 및 유괴와 같은 어린이를 대상으로 한 각종 범죄와 미아발생 등이 증가함에 따라 어린이를 둔 부모들은 자녀들이 외출할 경우 항시 불안한 마음으로 기다릴 수 밖에 없었다. 이러한 불안감을 해소하고자 자녀들이 외출할 경우에는 휴대폰 등을 주어 자녀와 수시로 통화하거나 부모가 함께 외출하였다.Recently, as crimes and childbirths inflicted on children such as kidnapping and kidnapping of children have increased, parents with children had to wait with anxiety at all times when their children went out. In order to relieve such anxiety, when children go out, they often talk with their children by giving them mobile phones, or parents go out together.

한편, 사람의 위치 추적과 관련한 서비스로는 휴대폰을 이용하여 위치를 추적하는 기술과 GPS 단말기를 이용하여 위치를 추적하는 기술이 알려져 있다.On the other hand, as a service related to the location of a person, a technology for tracking a location using a mobile phone and a location tracking using a GPS terminal are known.

그런데 휴대폰을 이용할 경우에는 정확한 위치 추적이 어려움과 아울러 휴대폰을 소지해야 하기 때문에 어린 자녀들의 경우 적합하지 않고, GPS 단말기를 이용한 위치 추적의 경우도 별도의 GPS 단말기를 보유해야 하므로 비용이 많이 들고 서비스가 한정되는 문제점이 있다.However, when using a mobile phone, accurate location tracking is difficult and it is not suitable for young children because it is necessary to carry a mobile phone. There is a limited problem.

이를 해결하기 위한 기술은 GPS 또는 지그비를 이용하여 어린이의 위치추적 서비스를 제공하는 것이다. The technique to solve this problem is to provide a location tracking service for children using GPS or Zigbee.

GPS의 경우, 실내(제 2상태)에서는 위치추적 서비스가 불가하므로 교실 내의 학생의 이동 및 범죄에 노출되었을 때 대상 학생의 위치파악이 어려운 문제점이 있다.In the case of GPS, since the location tracking service is not available indoors (second state), it is difficult to determine the location of the target student when exposed to the movement and crime of the student in the classroom.

도 1은 지그비(Zigbee) 기반의 어린이 보호 시스템의 개념도이다.1 is a conceptual diagram of a Zigbee-based child protection system.

지그비 단말기(11)는 지그비 리더기(12)에 신호를 보내고, 지그비 리더기(12)는 지그비 망(13)과 게이트웨이(14)를 통해 서버(15)와 통신하며, 서버는 통신망(16)를 통해 관련기관(17), 학부모 PC(18) 또는 학부모 휴대폰(19)으로 위치 정보를 전송한다. 이 경우, RSSI(Received Singnal strength indication, 수신 신호 세기) 방식을 이용하여 위치 추적을 한다.The Zigbee terminal 11 sends a signal to the Zigbee reader 12, the Zigbee reader 12 communicates with the server 15 via the Zigbee network 13 and the gateway 14, the server via the communication network 16 The location information is transmitted to the related organization 17, the parent PC 18 or the parent mobile phone (19). In this case, location tracking is performed using RSSI (Received Singnal Strength Indication).

그러나, 지그비를 통한 RSSI의 방식의 경우, 가장 정확하다는 핑거프린팅 방법을 사용을 할 경우 리더간 설치 거리가 30m를 유지해야 2~5m의 정확도를 유지 할 수 있지만 만일 100m가 넘을 갈 경우, 특정구간에 대하여 30m 이상의 정확도까지도 보장 할 수 없는 상황이 발생 한다. 따라서, 지그비 리더기가 조밀하게 설치가 되야지만 위치추적의 정확도를 높일 수가 있는 문제점이 있다.However, in the case of RSSI through ZigBee, when using the most accurate fingerprinting method, the distance between readers should be 30m to maintain accuracy of 2 ~ 5m, but if more than 100m, There is a situation that can not be guaranteed even up to 30m accuracy. Therefore, the Zigbee reader should be installed densely, but there is a problem that can increase the accuracy of the position tracking.

또한, 긴급상황에 대한 호출 방법으로 어린이 안심 서비스에서 사용하는 방법은 어린이 안심 존이라고 해서 특정 지역을 벗어나는 경우 및 SOS 버튼을 사용하여 이벤트를 발생시켜 대상어린이의 부모나 관련 공공기관에 위치정보를 제공하여 이에 대응하도록 하는 방법을 사용한다. 하지만 대상 어린이가 SOS 버튼을 조작을 못하고 유괴를 당해 범죄자의 차에 실려 안전존을 빠져나간 뒤에 응급 이벤트가 발생되면 그 이 후의 위치추적이 불가능하므로 이에 대응하는 데 충분한 시간을 가지지 못하는 문제점이 있다.In addition, as a method of calling an emergency, the child reassurance service is called a child reassurance zone, and the location is provided to the parent of the target child or related public agency by generating an event using the SOS button. To use the corresponding method. However, when the target child fails to operate the SOS button and is abducted in the car of the criminal and exits the safety zone, if an emergency event occurs, since the location tracking is impossible, there is a problem in that it does not have enough time to cope with it.

그리고, 추적 대상에 대한 위치정보를 알았다 하더라도 추적 대상의 현황을 위치 정보로만 파악할 뿐이므로, SOS시 긴급 상황이 정확하게 어떤 상황인지를 파악하기 어려운 문제점이 있다.In addition, even if the location information of the tracking target is known, only the current status of the tracking target is detected only by the location information. Therefore, it is difficult to accurately determine what kind of situation is the emergency situation during SOS.

본 발명은 상기와 같은 문제점을 해결하기 위하여, GPS 모듈과 Wi-Fi 모듈이 결합된 휴대용 단말기를 이용하여 실내외 실시간 위치추적을 가능하게 하는 것을 목적으로 한다. 이를 통해, 대상이 실내 어디에 있든지 위치추적이 가능하게 하며, GPS를 내장하여 실외서도 GPS가 가지고 있는 위치추적의 정확도를 보장하게 하는 것을 목적으로 한다. 또한, 가속도센서를 부착하여 위치계산의 데이터에 사용될 뿐만 아니라 대상이 납치되어 차 안에서 이동 시 가속도 센서가 작동하여 실시간으로 위치정보를 대상의 부모 및 관련 기관에게 SOS 신호 및 위치정보를 제공하는 것을 목적으로 한다. 그리고, 네트워크 카메라 또는 CCTV와 연계되어 보호대상에 대한 화면정보를 제공하는 것을 목적으로 한다.In order to solve the above problems, an object of the present invention is to enable indoor and outdoor real-time location tracking by using a portable terminal combined with a GPS module and a Wi-Fi module. Through this, it is possible to track the location wherever the subject is indoors, and the built-in GPS to ensure the accuracy of the location tracking GPS even outdoors. In addition, the acceleration sensor is attached to not only used for the data of position calculation, but also to provide SOS signal and position information to the target parent and related organizations in real time by operating the acceleration sensor when the object is kidnapped and moved in the car. It is done. In addition, the object of the present invention is to provide screen information on a protected object in connection with a network camera or CCTV.

본 발명의 일 실시예에 따른 위치 추적용 휴대용 단말기는 위성위치정보를 수신하는 제1모듈; 및 주변에 위치한 AP를 스캔하여, 적어도 하나의 AP로부터 네트워크 식별 정보를 수신하는 제2모듈을 포함하고, 상기 네트워크 식별 정보 및 상기 AP로부터의 수신 신호 세기 정보에 기초한 휴대용 단말기의 위치 상태가 실내인 경우, 상기 수신된 네트워크 식별 정보와 수신 신호 세기 정보가 서버로 전송되며, 상기 위치 상태가 실외인 경우, 상기 위성위치정보가 상기 서버로 전송된다A portable terminal for tracking a location according to an embodiment of the present invention includes a first module for receiving satellite location information; And a second module configured to scan APs located in the vicinity and to receive network identification information from at least one AP, wherein the location of the portable terminal based on the network identification information and the received signal strength information from the AP is indoor. In this case, the received network identification information and received signal strength information are transmitted to a server, and when the location state is outdoors, the satellite location information is transmitted to the server.

또한, 본 발명의 일 실시예에 따른 위치 추적 서비스 제공 장치는 서비스 제공 장치에 있어서, 휴대용 단말기로부터 주변 AP의 네트워크 식별 정보 및 수신 신호 세기 정보, 또는 위성위치정보를 수신하는 수신부; 및 상기 휴대용 단말기의 위치 상태가 실내인 경우, 상기 수신된 주변 AP의 네트워크 식별 정보 및 수신 신호 세기 정보를 이용하여 상기 휴대용 단말기의 위치를 계산하는 위치 계산부를 포함한다.In addition, the location tracking service providing apparatus according to an embodiment of the present invention, the service providing apparatus, comprising: a receiving unit for receiving network identification information, received signal strength information, or satellite location information of the neighboring AP from the portable terminal; And a location calculator configured to calculate a location of the portable terminal using the received network identification information and the received signal strength information of the neighboring AP when the location state of the portable terminal is indoor.

그리고, 본 발명의 일 실시예에 따른 위치 추적 시스템은 주변 AP를 스캔하여 적어도 하나의 AP의 네트워크 식별 정보를 수신하고, 상기 수신된 식별 정보와 수신 신호 세기에 기초한 위치 상태가 실내인 경우 상기 수신된 정보 및 수신 신호 세기를 전송하고, 실외인 경우 위성위치정보를 전송하는 휴대용 단말기; 상기 휴대용 단말기로부터 전송된 네트워크 식별 정보, 수신 신호 세기 정보 및 위성위치정보 중 적어도 하나를 위치 추적 서비스 제공 장치로 송신하는 AP; 및 상기 AP로부터 수신된 정보 및 상기 단말기의 위치 상태가 실내인지 여부에 기초하여 상기 휴대용 단말기의 위치를 계산하고, 클라이언트 장치의 요청에 따라 상기 계산된 위치 정보를 제공하는 서버를 포함한다.The location tracking system according to an embodiment of the present invention scans a neighboring AP to receive network identification information of at least one AP, and when the location state based on the received identification information and the received signal strength is indoors, the reception is performed. A portable terminal for transmitting the received information and the received signal strength, and for transmitting the satellite location information in the outdoor; An AP for transmitting at least one of network identification information, received signal strength information, and satellite location information transmitted from the portable terminal to a location tracking service providing apparatus; And a server that calculates the location of the portable terminal based on the information received from the AP and whether the location status of the terminal is indoor, and provides the calculated location information according to a request of a client device.

본 발명의 일 실시예에 따르면 보호대상 어린이가 교실 내 어디에 있든지 위치추적이 가능한 효과가 있으며, GPS를 내장하여 실외에서도 GPS가 가지고 있는 위치추적의 정확도를 보장 할 수 있는 효과가 있다. 또한, 가속도센서를 부착하여 위치계산의 데이터에 사용될 뿐만 아니라 보호대상 어린이가 납치되어 차 안에서 이동시에 가속도 센서가 작동하여 실시간으로 위치정보를 대상 어린이의 부모 및 관련 기관에게 SOS 신호 및 위치정보를 제공 할 수 있는 효과가 있다. 그리고, 네트워크 카메라 또는 CCTV와 연계되어 보호대상에 대한 화면정보를 제공 할 수 있는 효과가 있다. According to an embodiment of the present invention, the child to be protected has a location tracking effect wherever the child is in the classroom, and has an effect of ensuring the accuracy of location tracking that the GPS has in the outdoors by embedding the GPS. In addition, the acceleration sensor is attached to the data of the position calculation, and the child is protected and the acceleration sensor is activated when moving in the car to provide the SOS signal and location information to the parents and related organizations of the child in real time. It can work. In addition, there is an effect that can provide the screen information for the protection target in connection with the network camera or CCTV.

도 1은 지그비 위치추적 시스템 구성도이다.
도 2는 본 발명에 따른 위치추적 시스템의 일 실시예 구성도이다.
도 3은 본 발명에 따른 휴대용 단말기의 일 실시예 구성도이다.
도 4는 본 발명에 따른 휴대용 단말기의 일 실시예 동작 흐름도이다.
도 5는 본 발명에 따른 위치 추적 서비스 제공 장치의 일 실시예 구성도이다.
1 is a configuration diagram of a Zigbee location tracking system.
2 is a block diagram of an embodiment of a location tracking system according to the present invention.
3 is a block diagram of an embodiment of a portable terminal according to the present invention.
4 is a flowchart illustrating an embodiment of a portable terminal according to the present invention.
5 is a configuration diagram of an embodiment of a location tracking service providing apparatus according to the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 실시예에 따른 위치 추적 시스템을 상세히 설명한다.Hereinafter, with reference to the accompanying drawings will be described in detail the position tracking system according to an embodiment of the present invention.

도 2는 본 발명에 따른 위치추적 시스템의 일 실시예 구성도이고, 도3은 본 발명에 따른 휴대용 단말기의 구성도이다.2 is a configuration diagram of an embodiment of a location tracking system according to the present invention, Figure 3 is a block diagram of a portable terminal according to the present invention.

휴대용 단말기는 위치 추적을 위한 휴대용 단말기로서 본 발명의 일 실시예에 따르면 RTLS TAG(Real Time Location System TAG)(20)일 수 있다.The portable terminal is a portable terminal for location tracking and may be an RTLS Real Time Location System TAG (RTLS) 20 according to an embodiment of the present invention.

RTLS TAG(20)는 위성위치정보를 수신하는 제1모듈 및 AP로부터 네트워크 식별 정보를 수신하는 제2모듈을 포함한다. 여기서, 제1모듈은 위성으로부터 GPS정보를 수신하는 GPS모듈(302)일 수 있으며, 제2모듈은 AP(Access Point)와의 근거리 무선 통신을 위한 통신 모듈로서 WI-FI 모듈(301) 일 수 있다.The RTLS TAG 20 includes a first module for receiving satellite position information and a second module for receiving network identification information from the AP. Here, the first module may be a GPS module 302 for receiving GPS information from a satellite, and the second module may be a WI-FI module 301 as a communication module for short-range wireless communication with an access point (AP). .

따라서, RTLS TAG(20)와 AP는 근거리 무선 통신, 예컨대 WiFi에 의해 연결될 수 있으나, 이에 한정되지는 않는다. 여기서 근거리 무선 통신이라 함은 AP로부터 수십 미터 범위 이내의 커버리지를 갖는 통신 방식을 말한다. Accordingly, the RTLS TAG 20 and the AP may be connected by short-range wireless communication, for example, WiFi, but are not limited thereto. Here, the short range wireless communication refers to a communication method having coverage within a range of several tens of meters from the AP.

그리고, AP는 복수개 이상일 수도 있으며, AP와 위치 추적 서비스 제공 장치는 유선 또는 무선으로 연결될 수 있다. AP는 본 발명 일 실시예에 따라 무선AP(22) 일 수 있다.In addition, the AP may be a plurality or more, and the AP and the location tracking service providing apparatus may be connected by wire or wirelessly. The AP may be a wireless AP 22 according to an embodiment of the present invention.

또한, 본 발명에 따른 위치 추적 서비스 제공 장치는 상기 무선AP(22)와 인터넷망(23)으로 연결되는 서버일 수 있으며, 이하 통합 관리 서버(26)라 한다.In addition, the location tracking service providing apparatus according to the present invention may be a server connected to the wireless AP 22 and the Internet network 23, hereinafter referred to as integrated management server 26.

통합 관리 서버(26)는 상기 무선AP(22)를 통해 RTLS TAG(20)로부터 위치정보, 긴급 신호, 가속도 정보 등을 수신부를 통해 수신할 수 있다. 이러한 수신부는 인터넷 망 기반의 TCP/IP 인터페이스(57)일 수 있다.The integrated management server 26 may receive the location information, the emergency signal, the acceleration information, and the like from the RTLS TAG 20 through the wireless AP 22 through the receiver. The receiver may be an internet network based TCP / IP interface 57.

그리고, 통합 관리 서버(26)는 RTLS TAG(20)의 위치를 계산하는 위치 계산부를 포함하고, 위치 계산부는 본 발명의 일 실시예에 의하면 통합 관리 서버 (26)내에 포함된 서버일 수 있으며, 이하 RTLS 서버(24)라 한다.And, the integrated management server 26 includes a location calculation unit for calculating the location of the RTLS TAG 20, the location calculation unit may be a server included in the integrated management server 26 according to an embodiment of the present invention, Hereinafter referred to as RTLS server 24.

또한, 통합 관리 서버(26)는 네트워크 카메라로부터 촬영된 화면을 수신하는 카메라부를 포함할 수 있는데, 이 또한 본 발명의 일 실시예에 따라 통합 관리 서버(26)내에 포함된 서버일 수 있으며, 이하 카메라 서버(25)라 한다.In addition, the integrated management server 26 may include a camera unit for receiving a screen shot from the network camera, which may also be a server included in the integrated management server 26 according to an embodiment of the present invention, Called camera server 25.

통합 관리 서버(26)는 카메라 서버(25)로부터 RTLS TAG(20)의 위치정보에 대응하는 네트워크 카메라가 촬영한 화면과 RTLS서버(24)로부터 계산된 위치정보를 클라이언트 장치에 전송할 수 있다. 클라이언트 장치는 학부모 스마트 폰 또는 핸드폰(27), 학부모 PC(28), 관련 기관의 위치 추적 장치(29)일 수 있다.The integrated management server 26 may transmit the screen shot by the network camera corresponding to the location information of the RTLS TAG 20 and the location information calculated from the RTLS server 24 to the client device from the camera server 25. The client device may be a parent smartphone or cell phone 27, a parent PC 28, a location tracking device 29 of the relevant organization.

이하 본 발명에 따른 위치추적 시스템의 동작 및 위치추적용 휴대용 단말기 의 구성을 도2 및 도3을 참조하여 상세히 설명한다.Hereinafter, the operation of the location tracking system and the configuration of the location tracking portable terminal according to the present invention will be described in detail with reference to FIGS. 2 and 3.

도3을 참조하면, RTLS TAG(20)는 기본적으로 안테나(300), WI-FI모듈(301), GPS 모듈(302) 및 가속도 센서(303), CPU(304) 및 배터리(306)를 포함할 수 있다. Referring to FIG. 3, the RTLS TAG 20 basically includes an antenna 300, a WI-FI module 301, a GPS module 302 and an acceleration sensor 303, a CPU 304, and a battery 306. can do.

또한, RTLS TAG(20)는 추가로 현재 상태 또는 메시지 등을 표시할 수 있는 디스플레이부(305)를 포함할 수 있으며, ON/OFF, YES, NO, SOS 신호등을 입력하기 위한 키 조작부(307)를 포함할 수 있다.In addition, the RTLS TAG 20 may further include a display unit 305 capable of displaying a current state or a message, and a key operation unit 307 for inputting ON / OFF, YES, NO, SOS signals, and the like. It may include.

여기서 RTLS TAG(20)의 CPU(304)는 Wi-Fi 모듈(301)에 내장 될 수 있으며 내장된 CPU(304)를 이용하여 GPS 모듈(302) 과 가속도 센서(303)를 제어 할 수 있다.Here, the CPU 304 of the RTLS TAG 20 may be embedded in the Wi-Fi module 301 and control the GPS module 302 and the acceleration sensor 303 using the embedded CPU 304.

상기와 같은 RTLS TAG(20)는 다양한 형태로 본 발명에 따른 위치 추적 시스템의 보호 대상으로서 어린이 등에게 소지하게 할 수 있으며, 예를 들어, LCD를 내장한 형태의 이름표(308), 전자시계를 내장한 손목시계(309), 어린이 PAGER(310)등의 형태가 있을 수 있다.The RTLS TAG 20 as described above can be carried in a variety of forms as a subject of protection of a location tracking system according to the present invention, such as children, for example, the name tag 308 of the built-in LCD, electronic clock There may be a form such as a built-in watch 309, children PAGER (310).

우선, 상기 RTLS TAG(20)를 보호 대상인 어린이 등에게 나누어 주면, 상기 RTLS TAG(20)는 학교 주변 및 학교 내에 설치된 무선 AP(22)와 신호를 주고 받으면서 위치정보를 AP가 연결된 인터넷 망(23)을 통하여 통합관리 서버(26)로 전송한다.First, when the RTLS TAG 20 is divided to children to be protected, the RTLS TAG 20 transmits and receives signals to and from the wireless AP 22 installed in and around the school, and connects the location information to the Internet network 23. Is transmitted to the integrated management server 26).

이후, 통합관리 서버(26)는 RTLS TAG(20)로부터 수신부인 TCP/IP 인터페이스(57)로 수신된 신호를 분석을 하고 RTLS 서버(25)를 통해 위치를 계산한다.Thereafter, the integrated management server 26 analyzes the signal received from the RTLS TAG 20 to the TCP / IP interface 57 which is a receiver and calculates a position through the RTLS server 25.

만일, 수신된 신호가 긴급 SOS 신호일 경우, Wi-Fi 및 전화 망을 통하여 긴급 메세지를 클라이언트 장치, 즉, 학부모 스마트 폰 또는 핸드폰(27), 학부모 PC(28), 관련 기관(29)으로 전송하여 긴급상황에 대처 할 수 있도록 한다. If the received signal is an emergency SOS signal, the emergency message is transmitted to the client device, that is, the parent smartphone or mobile phone 27, the parent PC 28, and the related organization 29 through Wi-Fi and the telephone network. Be prepared to respond to emergencies.

상기 긴급 신호는 RTLS TAG(20)에서 발생되며, 통합 관리 서버(26)는 상기 긴급 신호가 수신된 경우 긴급 메시지를 클라이언트 장치(27~29)로 전송한다. The emergency signal is generated in the RTLS TAG 20 and the integrated management server 26 transmits an emergency message to the client devices 27 to 29 when the emergency signal is received.

상기 긴급 신호가 발생되는 경우는 크게 3가지 경우가 있을 수 있다. There are three cases in which the emergency signal is generated.

첫째, 안전 존을 벗어 났을 경우이다. 안전 존의 범위는 통합 관리 서버(26)에서 설정을 할 수 있으며, 위치 정보가 안전 존의 범위를 벗어난 경우, 통합 관리 서버(26)는 긴급 메시지를 클라이언트 장치(27~29)로 전송할 수 있다. First, you have left the safety zone. The range of the safety zone may be set in the integrated management server 26, and when the location information is out of the range of the safety zone, the integrated management server 26 may transmit an emergency message to the client devices 27 to 29. .

두번째, RTLS TAG(20)의 소지자가 긴급 SOS 버튼을 눌렸을 때이다. RTLS 태그의 긴급 버튼이 입력되는 경우, RTLS는 긴급 신호를 발생하고, 통합 관리 서버(26)가 이를 수신하면 긴급 메시지를 클라이언트 장치(27~29)로 전송한다.Second, when the holder of the RTLS TAG 20 has pressed the emergency SOS button. When the emergency button of the RTLS tag is input, the RTLS generates an emergency signal and transmits an emergency message to the client devices 27 to 29 when the integrated management server 26 receives it.

세번째는 가속도 센서(303)가 자동으로 차의 가속을 감지하고 긴급 신호를 발생 시키는 경우이다. 이 경우는 어린이가 납치되어 차로 이송되면서 긴급 버튼을 누를 수 없는 상황을 가정한다. Third, the acceleration sensor 303 automatically detects acceleration of the car and generates an emergency signal. In this case, it is assumed that a child is abducted and transported to a car and cannot press the emergency button.

여기서, 상기 가속도 센서(303)가 센싱한 가속도 정보를 RTLS TAG(20)가 WI-FI모듈(301)을 이용해 인터넷망(23)을 통해 전송하고, 통합 관리 서버(26)가 수신부인 TCP/IP 인터페이스(57)을 통해 이를 수신한다. 상기 가속도가 기준값(바람직하게는 10KM/H) 이상으로 측정되는 경우 긴급 신호를 발생하고, 긴급 메시지를 클라이언트 장치(27~29)로 전송한다.Here, the RTLS TAG 20 transmits the acceleration information sensed by the acceleration sensor 303 through the Internet network 23 using the WI-FI module 301, and the integrated management server 26 is a receiver for TCP / This is received via the IP interface 57. When the acceleration is measured at a reference value (preferably 10 KM / H) or more, an emergency signal is generated, and an emergency message is transmitted to the client devices 27 to 29.

또한, 본 발명에 의한 위치 추적 시스템은 클라이언트 장치(27~29)와 통합 관리 서버(26) 간의 메시지 전송 및 응답이 가능한 양방향 통신 서비스를 지원할 수 있다. 디스플레이부(305)가 있는 RTLS TAG(20)의 경우 통합 관리 서버(26)는 문자 메시지 서비스를 제공하여, RTLS TAG(20)로 문자를 전송할 수 있다.In addition, the location tracking system according to the present invention may support a bi-directional communication service capable of transmitting and responding to messages between the client devices 27 to 29 and the integrated management server 26. In the case of the RTLS TAG 20 having the display unit 305, the integrated management server 26 may provide a text message service and transmit texts to the RTLS TAG 20.

또한, 키 조작부(307)가 포함되는 경우, RTLS TAG(20) 소지자는 Yes, No 버튼 조작을 통하여 상기 문자 메세지를 확인 했는지 여부에 대해 응답할 수 있다. 이에 따라, 통합 관리 서버(26)가 긴급 신호 수신에 따른 긴급 상황 상태가 된 경우, 학부모의 PC(28) 또는 스마트폰(27)의 조작으로 긴급상황의 해지도 가능할 수 있다.In addition, when the key operation unit 307 is included, the holder of the RTLS TAG 20 may respond whether or not the text message is confirmed through a Yes or No button operation. Accordingly, when the integrated management server 26 is in the emergency state according to the emergency signal reception, it may be possible to terminate the emergency situation by the operation of the parent PC 28 or the smartphone 27.

한편, 본 발명에 의한 위치 추적 시스템은 클라이언트 장치로 위치 정보에 기초한 주변 지도 및 지리 정보를 포함하는 지리 정보 서비스를 추가로 제공할 수 있다.On the other hand, the location tracking system according to the present invention may further provide a geographic information service including a neighboring map and geographic information based on the location information to the client device.

지리 정보 서비스는 위치 정보뿐만 아니라 주변 환경, 지도, 주요 시설물 등의 정보를 동시에 제공하고, 위치를 보다 시각적으로 쉽게 파악할 수 있도록 하기 위한 화면 정보를 제공하는 서비스이다.Geographic information service is a service that provides not only location information but also information on surrounding environment, maps, major facilities, etc. at the same time, and screen information to make it easier to visually identify the location.

학부모는 스마트 폰(27) 등을 이용하여 통합 관리 서버(26)에 접속을 하면 상기 통합 관리 서버(26)에서 실행되는 Display Application이 제공하는 지리 정보 서비스인 GIS (Geometric Information Service) 및 RTLS TAG(20)의 위치정보를 동시에 받음으로써 지리 정보 서비스를 제공받을 수 있다.When a parent accesses the integrated management server 26 using a smart phone 27 or the like, a GIS (Geometric Information Service) and an RTLS TAG (GIS), which is a geographic information service provided by a display application running on the integrated management server 26, may be used. By receiving the location information of 20) at the same time can be provided with a geographic information service.

도 4는 RTLS TAG(20)의 동작을 흐름도로 나타낸 것이다.4 shows a flowchart of the operation of the RTLS TAG 20.

도 4를 참고하여, RTLS TAG(20)의 동작의 순서를 설명하면, 우선 RTLS TAG(20)는 전력소모를 줄이기 위하여 기본적으로 Sleep 모드(401)를 유지하고 있으며 Timer Event(402)에 의해 작동(Wake up)을 시작할 수 있다.Referring to FIG. 4, the operation sequence of the RTLS TAG 20 will be described. First, the RTLS TAG 20 basically maintains a sleep mode 401 to reduce power consumption and is operated by a timer event 402. You can start Wake up.

이후, RTLS TAG(20)는 Wi-Fi 모듈을 동작(Wake up)시키고(403), 주변 AP를 스캔을 한다(403). 스캔 시 주변 AP의 네트워크 식별 정보(SSID)를 수집을 하게 되고 수신 신호 세기(RSSI)도 함께 취득한다(404).Thereafter, the RTLS TAG 20 wakes up the Wi-Fi module (403) and scans the neighboring AP (403). During the scan, network identification information (SSID) of neighboring APs is collected and received signal strength (RSSI) is also acquired (404).

그리고, RTLS TAG(20)는 수집된 SSID 정보 및 RSSI를 이용하여 현재 RTLS TAG(20)의 위치 상태가 실외(제 1상태)인지 실내(제 2상태)인지를 판단한다(405). 실내인지 여부의 판단은 수집된 SSID와 RSSI 정보로부터 판단된 AP의 위치 및 AP까지의 거리가 소정 거리에 해당하면 위치 상태가 실외라고 판단하는 방법이 있을 수 있고, RTLS TAG(20)자체에서 판단할 수 있을 뿐만 아니라 통합관리서버(26)에서도 수신된 정보를 통해 RTLS 서버(25)를 이용하여 판단하는 방법이 있을 수 있다. 따라서, 판단 주체에 한정되지는 않는다.The RTLS TAG 20 determines whether the current state of the RTLS TAG 20 is outdoor (first state) or indoor (second state) using the collected SSID information and RSSI (405). The determination of whether or not indoors may include a method of determining that the location state is outdoor when the location of the AP and the distance to the AP determined from the collected SSID and RSSI information correspond to a predetermined distance, and is determined by the RTLS TAG 20 itself. In addition, there may be a method for determining using the RTLS server 25 through the information received from the integrated management server 26. Therefore, it is not limited to a judgment subject.

우선, RTLS TAG(20)는 위치 상태가 실외(제 1상태)라고 판단됐을 경우에는 GPS모듈을 작동(Wake up)시키고, GPS 모듈을 제어하여 관련 GPS의 위치 데이터 정보를 얻기 위한 작업을 수행한다(406). 또한, 가까운 AP를 찾아 접속하여 GPS 모듈이 계산한 위치정보를 RTLS 서버로 전송할 수 있다(407). First, when it is determined that the location state is outdoor (first state), the RTLS TAG 20 wakes up the GPS module, controls the GPS module, and performs operation for obtaining location data information of the relevant GPS. (406). In operation 407, the nearest AP may be accessed to transmit the location information calculated by the GPS module to the RTLS server.

한편, 본 발명이 상기 GPS 모듈을 제어하는 방법은 2가지가 있을 수 있다. GPS Data를 그대로 받아 넘기는 방법이 있을 수 있으며, AGPS 기술을 이용하여 GPS 위치추적 정확도 및 초기 위치추적 계산을 단축하여 성능을 항상 시키는 방법이 있을 수 있다. On the other hand, the present invention may control two ways the GPS module. There may be a method of handing over GPS data, and there may be a method of always improving performance by shortening GPS position tracking accuracy and initial position tracking calculation using AGPS technology.

상기 AGPS 방법에 의하면, 일단 RTLS 서버 내에 있는 GPS 서버가 초기 GPS Data을 유선망을 통하여 받아오고 그 정보를 RTLS TAG(20)로 전송한다. 전송 받은 GPS 초기 데이터는 RTLS TAG(20) 내 CPU를 통해 GPS 모듈로 전송되고 GPS 모듈은 GPS 위성 정보 수집 없이 그 데이터를 이용하여 위치를 계산한다. 이를 통하여 보호 대상의 위치 데이터를 GPS Data를 그대로 받아 넘기는 방법보다 빠르게 계산할 수 있다.According to the AGPS method, once the GPS server in the RTLS server receives the initial GPS data through the wired network and transmits the information to the RTLS TAG (20). The received GPS initial data is transmitted to the GPS module through the CPU in the RTLS TAG 20, and the GPS module calculates a location using the data without collecting GPS satellite information. Through this, the position data of the protection target can be calculated faster than the method of handing over GPS data.

한편, AP 스캔한 SSID 및 RSSI정보 수집(404)를 통하여 실내(제 2상태)라고 판단 된 경우, 수집된 정보를 가까운 AP와의 접속을 통해 통합관리 서버에 있는 RTLS 서버로 관련 정보(RSSI, SSID) 를 보내 실내(제 2상태) 위치추적을 수행 할 수 있도록 한다(407).On the other hand, if it is determined that the indoor (second state) through the AP scan SSID and RSSI information collection 404, the collected information is connected to the RTLS server in the integrated management server through the connection with the nearest AP (RSSI, SSID) In order to perform indoor (second state) location tracking (407).

이후, Timer Event 해제 신호가 입력되면(408), 다시 sleep 모드로 돌아가 sleep 상태를 유지하고, Timer event를 기다린다(401).Thereafter, when the timer event release signal is input (408), the mode returns to the sleep mode and maintains the sleep state, and waits for the timer event (401).

그러나, 상기 해제 신호가 입력되지 않는 경우, 긴급신호를 발생하고, 통합 관리 서버(26)를 통해 긴급 메시지를 학부모 PC(28), 학부모 스마트폰(27) 또는 관련기관의 위치 추적 장비(29) 등에 전송한다(410).However, if the release signal is not input, generates an emergency signal, and the emergency tracking location tracking equipment 29 of the parent PC 28, parent smartphone 27 or related organizations through the integrated management server 26 And so on (410).

또한, 상기 Timer Event해제 신호가 입력되지 않는 경우는, 보호 대상인 어린이 등이 SOS버튼을 누른 경우, 가속도 센서 동작에 의해 기준값 이상의 가속도가 검출된 경우 또는 RTLS TAG(20)의 위치 정보가 안전 존을 벗어난 경우가 있을 수 있다. 이 경우, RTLS TAG(20)는 SLEEP 모드로 돌아가지 않고, 다시 AP 스캔 및 RSSI 정보를 수집하여(404), TIMER EVENT 해제 신호가 입력되기 전까지 상술한 위치 추적을 지속하여 수행하게 된다.In addition, when the timer event cancel signal is not input, when a child or the like, who is the subject of protection, presses the SOS button, when an acceleration of more than a reference value is detected by an acceleration sensor operation or the position information of the RTLS TAG 20 indicates a safety zone. There may be deviations. In this case, the RTLS TAG 20 does not return to the SLEEP mode, collects the AP scan and RSSI information again (404), and continues the above-described position tracking until the TIMER EVENT release signal is input.

도 5는 통합 관리 서버(26), RTLS 서버(25) 및 카메라 서버(24)의 상세 구성도이다. 5 is a detailed configuration diagram of the integrated management server 26, the RTLS server 25, and the camera server 24.

도 5를 참조하여 각 서버에서의 데이터 처리 및 동작 과정을 살펴본다. 우선, 본 발명에 따른 위치 추적 서비스 제공 장치인 통합 관리 서버(26)는 수신부인 TCP/IP인터페이스(57)와 위치 계산부인 RTLS 서버(25)와 카메라부인 카메라 서버(24)를 관리하고, 이를 제어하며, 클라이언트 장치(27~29)간의 통신을 중계하는 서버일 수 있다.Referring to Figure 5 looks at the data processing and operation of each server. First, the integrated management server 26 as a location tracking service providing apparatus according to the present invention manages the TCP / IP interface 57 as a receiver, the RTLS server 25 as a location calculator, and the camera server 24 as a camera. It may be a server for controlling and relaying communication between the client devices (27 to 29).

그리고, RTLS 서버(25)는 대상의 위치정보를 계산하고 이를 전송하는 서버로서, RSSI 값을 이용하여 위치를 계산하는 RTLS 엔진(56)과 GPS 서버 및 DB(55), 실내 위치정보 DB(54) 그리고 RTLS 미들웨어(53)로 구성될 수 있다. In addition, the RTLS server 25 is a server for calculating the location information of the target and transmitting it, the RTLS engine 56, GPS server and DB 55, the indoor location information DB (54) for calculating the location using the RSSI value And RTLS middleware 53.

상기 RTLS 엔진(56)은 RTLS TAG(20)의 위치 상태가 실외(제 1상태)인 것으로 판단되는 경우 또는 RTLS TAG(20) 자체에서 판단된 위치 상태가 실외(제 1상태)인 경우는 상술한 바와 같이 GPS를 이용하여 위치정보를 계산할 수 있다.When the RTLS engine 56 determines that the position state of the RTLS TAG 20 is outdoor (first state) or the position state determined by the RTLS TAG 20 itself is outdoor (first state), As described above, location information may be calculated using GPS.

그리고, RTLS 엔진(56)은 RTLS TAG(20)의 위치 상태가 실내(제 2상태)인 경우, Fingerprint 기반의 알고리즘을 이용하여 미리 수집된 전자맵 DB를 이용하여 위치를 통계적으로 계산 할 수 있다. In addition, when the location state of the RTLS TAG 20 is indoor (second state), the RTLS engine 56 may statistically calculate a location using an electronic map DB previously collected using a fingerprint based algorithm. .

그리고, 전자맵이 없을 시에는 프린스 공식을 이용하여 거리를 계산하고 삼각측량공식을 Least Square Method 및 Chan 과 Ho Method로 해를 구하여 실내(제 2상태)의 RTLS TAG(20)의 위치를 계산할 수 있다. If there is no electronic map, the distance can be calculated using the Prince's formula, and the triangulation formula is solved using the Least Square Method and the Chan and Ho Method to calculate the location of the RTLS TAG 20 in the room (second state). have.

상기와 같은 RTLS 엔진(56)의 위치 정보 계산 방법의 경우 높은 정밀도를 얻기 위해서는 수집된 전파맵 자체가 특성이 있어야 하고 이를 위해서는 AP 간격을 조밀하게 설치해야 원하는 정밀도를 얻을 수 있다. In the case of the method of calculating the location information of the RTLS engine 56 as described above, in order to obtain high precision, the collected propagation map itself must have characteristics, and for this purpose, the AP spacing must be densely installed to obtain the desired precision.

따라서, 실내(제 2상태)는 저가의 AP를 조밀하게 설치 가능하므로 본 발명은 실내(제 2상태)에서만 이 방법을 적용하며, 실외(제 1상태)에서는 GPS을 이용하여 위치정보를 계산할 수 있다.Therefore, indoors (second state) can be installed densely inexpensive AP, so the present invention applies this method only indoors (second state), and can calculate location information using GPS in outdoor (first state). have.

구체적으로, RSSI 방식의 경우 평균 30m 내외로 AP를 설치 했을 때 비교적 신뢰할 수 있는 위치 정확도를 계산 해 낼 수 있다. 하지만 실외(제 1상태)의 경우 AP가 외장 케이스에 의해 보통 100만원이 넘어가므로 실내(제 2상태)에서 30m간격으로 설치하는 10만원 미만의 AP를 사용할 수 없고 설치 대수도 많아진다. Specifically, in the case of the RSSI method, when the AP is installed in an average of about 30m, it is possible to calculate a relatively reliable location accuracy. However, in the case of outdoor (first state), since the AP usually goes over 1 million won by the outer case, it is impossible to use the AP less than 100,000 won installed at 30m intervals indoors (second state), and the number of installations also increases.

그러나, 본 발명과 같이 실외(제 1상태)에서는 GPS을 이용할 경우 Wi-Fi RTLS TAG(20)의 통신거리가 실외(제 1상태)에서 200m라고 보았을 때 AP를 400m 간격으로 설치할 수 있으므로 AP 설치에 따른 비용 절감을 기대 할 수 있다.However, when the GPS is used in the outdoor (first state) as in the present invention, when the communication distance of the Wi-Fi RTLS TAG 20 is 200 m in the outdoor (first state), the AP can be installed at intervals of 400 m. You can expect to reduce the cost.

한편, 카메라 서버(24)는 주기적으로 각각의 네트워크 카메라의 영상을 저장하고, 관리하며 통합 관리 서버(56)의 요청에 따라 영상정보를 전송할 수 있다. Meanwhile, the camera server 24 may periodically store and manage images of each network camera and transmit image information at the request of the integrated management server 56.

또한, 부모가 대상 어린이의 영상을 보고자 했을 때 카메라 서버(24)는 RTLS TAG(20)의 위치정보를 받고 근처의 네트워크 카메라와 연결하여 보호 대상 어린이의 영상정보를 통합 관리 서버(56)를 통해 부모의 스마트 폰 및 PC로 전송할 수 있다.In addition, when the parent wants to see the image of the target child, the camera server 24 receives the location information of the RTLS TAG 20 and connects with the nearby network camera to store the image information of the protected child through the integrated management server 56. Can be transferred to the parent's smartphone and PC.

그리고, 통합 관리 서버(26)의 Application 블록(58)은 Display Application(50)과 클라이언트 접속 핸들러(51) 그리고 통합관리 Application(52)으로 구성될 수 있다.In addition, the application block 58 of the integrated management server 26 may include a display application 50, a client connection handler 51, and an integrated management application 52.

Display Application(50)은 지리정보 서비스, 즉 GIS(Geometry information service) 서비스를 담당하며 RTLS TAG(20)의 위치를 화면으로 Display하는 서비스를 클라이언트 장치(27~29)에 제공 할 수 있다. The display application 50 may be responsible for a geographic information service, that is, a GIS (Geometry Information Service) service, and may provide a service for displaying the location of the RTLS TAG 20 to the screen to the client devices 27 to 29.

클라이언트 접속 핸들러(51)는 학부모PC(28), 스마트 폰(27), 관련기관의 위치추적 장비(29) 등의 클라이언트 장치가 통합 관리 서버(26)로 접속을 시도 할 때 이를 핸들링하여 GIS 화면 및 클라이언트로 네트워크 카메라 영상을 전송할 수 있게 한다. The client connection handler 51 handles the GIS screen when the client device such as the parent PC 28, the smart phone 27, and the location tracking device 29 of the related organization attempts to connect to the integrated management server 26. And transmit the network camera image to the client.

통합 관리 Application(52) 은 부모의 문자서비스를 처리하며, 긴급 SOS 상황 발생 시 긴급 메세지를 해당 클라이언트 장치(27~29)로 전송하여 이에 대응 할 수 있도록 한다. 또한 안전존의 범위 등을 등록 할 수 있도록 하여 특정 지역을 벗어 났을 경우 자체적으로 긴급 SOS 메세지를 해당 클라이언트 장치로 전송 할 수 있게 한다. The integrated management application 52 processes the text service of the parent, and when an emergency SOS situation occurs, it sends an emergency message to the client device (27 ~ 29) to respond to it. In addition, it is possible to register the range of the safety zone so that it can send its own emergency SOS message to the client device when it leaves the specific area.

또한, Application 블록(58)은 클라이언트 접속 핸들러(51) 및 무선 AP와 연결된 네트워크 카메라(22)와 연동이 되어 해당 네트워크 카메라를 자동으로 선택하여 영상정보를 처리 할 수 있도록 하고, 카메라 서버(24)는 이를 중계하여 클라이언트의 요청에 따라 네트워크 카메라의 촬영 정보 및 전송 정보를 제어 할 수 있게 한다. In addition, the application block 58 is interlocked with the client connection handler 51 and the network camera 22 connected to the wireless AP to automatically select the network camera to process the image information, the camera server 24 By relaying this it is possible to control the shooting information and transmission information of the network camera according to the client's request.

상기 촬영 정보에는 카메라의 수직, 수평 회전 각도, 줌 정도 등이 있을 수 있으며, 전송 정보로는 해상도, 화질, 선명도, 비트레이트, 프레임 레이트, 화면 크기 등이 있을수 있다. 따라서, 클라이언트는 카메라 서버로부터 전송되는 촬영 정보의 내용 및 시간당 전송되는 데이터의 크기를 세부적으로 선택 할 수 있다. 이를 통해 클라이언트는 보호 대상의 현재 위치, 상황 및 주변 환경을 근처의 카메라 화면을 통해 보다 정확히 파악할 수 있다.The photographing information may include a camera's vertical, horizontal rotation angle, zoom level, and the like, and transmission information may include resolution, image quality, sharpness, bit rate, frame rate, and screen size. Accordingly, the client may select in detail the contents of the shooting information transmitted from the camera server and the size of the data transmitted per time. This allows clients to better understand the current location, situation and surroundings of the protected object through a nearby camera screen.

상술한 본 발명에 따른 위치 추적 시스템은 컴퓨터에서 실행되기 위한 프로그램으로 제작되어 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있으며, 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.The above-described location tracking system according to the present invention can be stored in a computer-readable recording medium that is produced as a program for execution in a computer. Examples of the computer-readable recording medium include ROM, RAM, CD-ROM, Magnetic tapes, floppy disks, optical data storage devices, and the like, and also include those implemented in the form of carrier waves (eg, transmission over the Internet).

컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 상기 방법을 구현하기 위한 기능적인(function) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.The computer readable recording medium may be distributed over a networked computer system so that computer readable code can be stored and executed in a distributed manner. And, functional programs, codes and code segments for implementing the above method can be easily inferred by programmers of the technical field to which the present invention belongs.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해 되어져서는 안될 것이다.In addition, although the preferred embodiment of the present invention has been shown and described above, the present invention is not limited to the specific embodiments described above, but the technical field to which the invention belongs without departing from the spirit of the invention claimed in the claims. Of course, various modifications can be made by those skilled in the art, and these modifications should not be individually understood from the technical spirit or prospect of the present invention.

20: RTLS TAG 21: WIFI망
22: 무선 AP 및 네트워크 카메라 23: 인터넷 망
24: 카메라 서버 25: RTLS 서버
26: 통합 관리 서버 27: 학부모 스마트폰
28: 학부모 PC 29: 관련기관
300: 안테나 301: WIFI모듈
302: GPS모듈 303: 가속도 센서
304: CPU 305: 디스플레이부
306: 배터리 307: 키 조작부
308: 이름표 309: 손목시계
310: 어린이 PAGER 50: DISPLAY APPLICATION
51: 클라이언트 접속 핸들러 52:통합관리 APPLICATION
53: RTLS 미들웨어 54: 실내위치정보 DB
55: GPS서버 및 DB 56: RTLS엔진
57: TCP/IP인터페이스 58: APPLICATION블록
20: RTLS TAG 21: WIFI Network
22: Wireless AP and network camera 23: Internet network
24: camera server 25: RTLS server
26: integrated management server 27: parent smartphone
28: Parent PC 29: Related Institutions
300: antenna 301: WIFI module
302: GPS module 303: acceleration sensor
304: CPU 305: display unit
306: battery 307: key operation
308: Name tag 309: watch
310: children PAGER 50: DISPLAY APPLICATION
51: client connection handler 52: Integrated management APPLICATION
53: RTLS middleware 54: indoor location information DB
55: GPS server and DB 56: RTLS engine
57: TCP / IP interface 58: APPLICATION block

Claims (17)

휴대용 단말기에 있어서,
위성위치정보를 수신하는 제1모듈; 및
주변에 위치한 AP(Access Point)를 스캔하여, 적어도 하나의 AP로부터 네트워크 식별 정보를 수신하는 제2모듈을 포함하고,
상기 네트워크 식별 정보 및 상기 AP로부터의 수신 신호 세기 정보에 기초한 휴대용 단말기의 위치 상태가 실내인 경우, 상기 수신된 네트워크 식별 정보와 수신 신호 세기 정보가 서버로 전송되며,
상기 위치 상태가 실외인 경우, 상기 위성위치정보가 상기 서버로 전송되는 위치 추적용 휴대용 단말기
In a portable terminal,
A first module for receiving satellite position information; And
A second module configured to scan an access point (AP) located in the vicinity of the network and receive network identification information from at least one AP,
When the location status of the portable terminal based on the network identification information and the received signal strength information from the AP is indoor, the received network identification information and the received signal strength information are transmitted to a server,
When the location state is outdoor, the location tracking portable terminal to which the satellite location information is transmitted to the server
제 1항에 있어서,
상기 네트워크 식별 정보 및 신호 세기 정보는 주변에 위치한 AP중 어느 하나를 통해 상기 서버로 전송되는 위치 추적용 휴대용 단말기
The method of claim 1,
The network identification information and the signal strength information is transmitted to the server via any one of the AP located in the location tracking portable terminal
제 1항에 있어서,
상기 제1모듈은 상기 위치 상태가 실외인 경우에만 동작하는 위치 추적용 휴대용 단말기.
The method of claim 1,
The first module is a location tracking portable terminal operates only when the location state is outdoor.
제 1항에 있어서,
상기 휴대용 단말기는 가속도 센서를 더 포함하고,
상기 휴대용 단말기는 상기 가속도 센서가 센싱한 가속도 정보를 상기 서버로 전송하는 위치 추적용 휴대용 단말기.
The method of claim 1,
The portable terminal further includes an acceleration sensor,
The portable terminal is a location tracking portable terminal for transmitting the acceleration information sensed by the acceleration sensor to the server.
제 1항에 있어서,
상기 휴대용 단말기는 디스플레이부를 더 포함하고,
상기 디스플레이부는 상기 서버로부터 전송되는 메시지 및 상기 휴대용 단말기의 위치정보 중 적어도 하나를 디스플레이하는 위치 추적용 휴대용 단말기.
The method of claim 1,
The portable terminal further includes a display unit,
And the display unit displays at least one of a message transmitted from the server and location information of the portable terminal.
서비스 제공 장치에 있어서,
휴대용 단말기로부터 주변 AP의 네트워크 식별 정보 및 수신 신호 세기 정보, 또는 위성위치정보를 수신하는 수신부; 및
상기 휴대용 단말기의 위치 상태가 실내인 경우, 상기 수신된 주변 AP의 네트워크 식별 정보 및 수신 신호 세기 정보를 이용하여 상기 휴대용 단말기의 위치를 계산하는 위치 계산부를 포함하는 위치 추적 서비스 제공 장치.
In the service providing apparatus,
A receiver configured to receive network identification information, received signal strength information, or satellite location information of a neighboring AP from the portable terminal; And
And a location calculator configured to calculate a location of the portable terminal using the received network identification information and the received signal strength information of the neighboring AP when the location of the portable terminal is indoor.
제 6항에 있어서,
상기 수신부는 상기 위치 추적용 휴대용 단말기로부터 가속도 정보를 더 수신하고,
상기 서비스 제공 장치는 가속도 정보의 가속도가 기준값 이상인 경우, 클라이언트 장치로 긴급 메시지를 전송하는 위치 추적 서비스 제공 장치.
The method according to claim 6,
The receiving unit further receives the acceleration information from the location tracking portable terminal,
The service providing device is a location service providing apparatus for transmitting an emergency message to the client device, if the acceleration of the acceleration information is more than the reference value.
제 6항에 있어서,
상기 서비스 제공 장치는 클라이언트 장치로 상기 계산된 위치 정보에 기초하여 주변 지도 및 지리 정보를 포함하는 지리 정보 서비스(GIS)를 추가로 제공하는 위치 추적 서비스 제공 장치.
The method according to claim 6,
The service providing device further provides a geographic information service (GIS) including a surrounding map and geographic information based on the calculated position information to a client device.
제 6항에 있어서,
상기 수신부는 클라이언트 장치로부터의 메시지를 더 수신하고,
상기 서비스 제공 장치는 상기 수신된 메시지를 상기 휴대용 단말기로 전송하는 위치 추적 서비스 제공 장치.
The method according to claim 6,
The receiving unit further receives a message from a client device,
And the service providing device transmits the received message to the portable terminal.
제 6항에 있어서,
상기 계산된 위치 정보에 대응하는 네트워크 카메라로부터 촬영된 화면을 수신하는 카메라부를 더 포함하고,
상기 서비스 제공 장치는 클라이언트 장치의 요청에 따라 상기 수신된 화면을 상기 클라이언트 장치로 전송하는 위치 추적 서비스 제공 장치.
The method according to claim 6,
Further comprising a camera unit for receiving a screen shot from the network camera corresponding to the calculated position information,
And the service providing device transmits the received screen to the client device according to a request of a client device.
제 10항에 있어서,
상기 서비스 제공 장치는 상기 클라이언트 장치의 요청에 따라 상기 카메라의 촬영 조건 또는 촬영된 화면의 전송 조건을 제어하고,
상기 촬영 조건은 상기 카메라의 수평, 수직 회전 각도 및 줌 정도 중 적어도 하나를 포함하며, 상기 전송 조건은 전송되는 화면의 비트레이트, 프레임 레이트, 화질 및 해상도 중 적어도 하나를 포함하는 위치 추적 서비스 제공 장치.
The method of claim 10,
The service providing device controls a shooting condition of the camera or a transmission condition of a captured screen according to a request of the client device,
The shooting condition may include at least one of a horizontal, vertical rotation angle, and a zoom level of the camera, and the transmission condition may include at least one of a bit rate, a frame rate, an image quality, and a resolution of a screen to be transmitted. .
주변 AP를 스캔하여 적어도 하나의 AP의 네트워크 식별 정보를 수신하고, 상기 수신된 식별 정보와 수신 신호 세기에 기초한 위치 상태가 실내인 경우 상기 수신된 정보 및 수신 신호 세기가 전송되고, 실외인 경우 위성위치정보가 전송되는 휴대용 단말기;
상기 휴대용 단말기로부터 전송된 네트워크 식별 정보, 수신 신호 세기 정보 및 위성위치정보 중 적어도 하나를 위치 추적 서비스 제공 장치로 송신하는 AP; 및
상기 휴대용 단말기의 위치 상태가 실내인 경우 상기 수신된 주변 AP의 네트워크 식별 정보 및 수신 신호 세기 정보를 이용하여 상기 휴대용 단말기의 위치를 계산하고, 실외인 경우 상기 위성위치정보를 이용하여 위치를 계산하며, 클라이언트 장치의 요청에 따라 상기 계산된 위치 정보를 제공하는 서버를 포함하는 위치 추적 시스템.
Scans a neighboring AP to receive network identification information of at least one AP; when the location state based on the received identification information and the received signal strength is indoor, the received information and the received signal strength are transmitted; A portable terminal through which location information is transmitted;
An AP for transmitting at least one of network identification information, received signal strength information, and satellite location information transmitted from the portable terminal to a location tracking service providing apparatus; And
When the location of the portable terminal is indoors, the location of the portable terminal is calculated using the received network identification information and the received signal strength information of the neighboring AP, and when the outdoor location is calculated using the satellite location information. And a server for providing the calculated location information at the request of a client device.
제 12항에 있어서,
상기 휴대용 단말기는 가속도 센서를 더 포함하고, 상기 가속도 센서가 센싱한 가속도 정보를 상기 AP를 통해 상기 서버로 전송하며,
상기 서버는 수신된 가속도 정보가 기준값 이상인 경우 긴급 메시지를 상기 클라이언트 장치로 전송하는 위치 추적 시스템.
13. The method of claim 12,
The portable terminal further includes an acceleration sensor, and transmits the acceleration information sensed by the acceleration sensor to the server through the AP,
And the server transmits an emergency message to the client device when the received acceleration information is equal to or greater than a reference value.
제 12항에 있어서,
상기 서버는 상기 클라이언트 장치로 상기 계산된 위치 정보에 기초하여 주변 지도 및 지리 정보를 포함하는 지리 정보 서비스(GIS)를 추가로 제공하는 위치 추적 시스템.
13. The method of claim 12,
The server further provides a geographic information service (GIS) to the client device, the geographic information service comprising a surrounding map and geographic information based on the calculated position information.
제 12항에 있어서,
상기 서버는 상기 클라이언트 장치로부터의 메시지를 수신하고, 상기 AP를 통해 상기 수신된 메시지를 상기 휴대용 단말기로 전송하며,
상기 휴대용 단말기는 상기 무선인식장치로부터 전송되는 메시지 및 상기 휴대용 단말기의 위치 중 적어도 하나를 디스플레이 하기 위한 디스플레이부를 더 포함하는 위치 추적 시스템.
13. The method of claim 12,
The server receives a message from the client device, sends the received message to the portable terminal via the AP,
The portable terminal further comprises a display unit for displaying at least one of a message transmitted from the wireless recognition device and the location of the portable terminal.
제 12항에 있어서,
상기 서버는 상기 계산된 위치 정보에 대응하는 네트워크 카메라로부터 촬영된 화면을 수신하는 카메라부를 더 포함하고,
상기 서버는 상기 클라이언트 장치의 요청에 따라 상기 촬영된 화면을 상기 클라이언트 장치로 전송하는 위치 추적 시스템.
13. The method of claim 12,
The server further includes a camera unit for receiving a screen shot from the network camera corresponding to the calculated position information,
And the server transmits the captured screen to the client device in response to a request of the client device.
제 12항에 있어서,
상기 서버는 상기 클라이언트 장치의 요청에 따라 상기 카메라의 촬영 조건 또는 촬영된 화면의 전송 조건을 제어하고,
상기 촬영 조건은 상기 카메라의 수평, 수직 회전 각도 및 줌 정도 중 적어도 하나를 포함하며, 상기 전송 조건은 전송되는 화면의 비트레이트, 프레임 레이트, 화질 및 해상도 중 적어도 하나를 포함하는 위치 추적 시스템.
13. The method of claim 12,
The server controls a shooting condition of the camera or a transmission condition of a captured screen according to a request of the client device.
And the shooting condition includes at least one of a horizontal, vertical rotation angle, and a zoom level of the camera, and the transmission condition includes at least one of a bit rate, a frame rate, an image quality, and a resolution of a screen to be transmitted.
KR1020110091790A 2011-09-09 2011-09-09 Mobile terminal for position tracking, server and position tracking system KR101689040B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110091790A KR101689040B1 (en) 2011-09-09 2011-09-09 Mobile terminal for position tracking, server and position tracking system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110091790A KR101689040B1 (en) 2011-09-09 2011-09-09 Mobile terminal for position tracking, server and position tracking system

Publications (2)

Publication Number Publication Date
KR20130028317A true KR20130028317A (en) 2013-03-19
KR101689040B1 KR101689040B1 (en) 2017-01-03

Family

ID=48178869

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110091790A KR101689040B1 (en) 2011-09-09 2011-09-09 Mobile terminal for position tracking, server and position tracking system

Country Status (1)

Country Link
KR (1) KR101689040B1 (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101476979B1 (en) * 2014-04-09 2014-12-29 주식회사 참좋은넷 System for displaying path and providing real time services
KR101579476B1 (en) * 2014-11-24 2015-12-24 (주)경봉 Closed circuit television camera system interlocked with watch
KR101594390B1 (en) * 2015-01-23 2016-02-17 (주) 지.티 텔레콤 Method for safty returning-home service using bluetooth
KR101633588B1 (en) 2015-07-24 2016-06-29 전성훈 Wearable healthcare safety belt
KR20170086948A (en) * 2016-01-19 2017-07-27 삼성전자주식회사 A method for control at least one device to communicate at a mobile device and the mobile device in a wireless communicaton system
KR20180014919A (en) * 2016-08-02 2018-02-12 송태윤 Android-based functions using its Wi-Fi wireless router (ap) leader of a private function under the entrance way of judgment specific location and for this
KR101936390B1 (en) * 2017-12-26 2019-04-03 주식회사 플랜티넷 Method And Apparatus for Providing Tracking Service based on Closed Circuit Tele-Vision
KR20190095604A (en) * 2018-01-24 2019-08-16 주식회사 루트링크 NB-IoT TERMINAL FOR REPORT AN ACCIDENT, SYSTEM INCLUDING THE SAME AND METHOD FOR OPERATING THE SAME
CN110234071A (en) * 2019-06-25 2019-09-13 上海良相智能化工程有限公司 One kind is portable to detect yard positioning device and system
WO2020238652A1 (en) * 2019-05-29 2020-12-03 鹏城实验室 Method and system for navigation and positioning
US10896513B2 (en) 2014-10-14 2021-01-19 Hanwha Techwin Co., Ltd. Method and apparatus for surveillance using location-tracking imaging devices
KR20220030481A (en) * 2020-09-02 2022-03-11 (주)휴빌론 FTM-based tag-based positioning and tag operation method and device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060104175A (en) * 2005-03-29 2006-10-09 에스케이 텔레콤주식회사 Method for position detection in indoor environment by using heterogeneous access points
KR20090022829A (en) * 2007-08-31 2009-03-04 이커스텍(주) Real-time position recognition method and system in a ubiquitous environment
KR101007608B1 (en) * 2008-07-21 2011-01-12 황영상 The apparatus and method of positioning pursuit with wipi, gps and rf finger printing
KR20110061978A (en) * 2009-12-02 2011-06-10 주식회사 셀리지온 Method for correcting position based networking in shadow area by using automatic position tracking function of gps mobile terminal and system thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060104175A (en) * 2005-03-29 2006-10-09 에스케이 텔레콤주식회사 Method for position detection in indoor environment by using heterogeneous access points
KR20090022829A (en) * 2007-08-31 2009-03-04 이커스텍(주) Real-time position recognition method and system in a ubiquitous environment
KR101007608B1 (en) * 2008-07-21 2011-01-12 황영상 The apparatus and method of positioning pursuit with wipi, gps and rf finger printing
KR20110061978A (en) * 2009-12-02 2011-06-10 주식회사 셀리지온 Method for correcting position based networking in shadow area by using automatic position tracking function of gps mobile terminal and system thereof

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101476979B1 (en) * 2014-04-09 2014-12-29 주식회사 참좋은넷 System for displaying path and providing real time services
US10896513B2 (en) 2014-10-14 2021-01-19 Hanwha Techwin Co., Ltd. Method and apparatus for surveillance using location-tracking imaging devices
KR101579476B1 (en) * 2014-11-24 2015-12-24 (주)경봉 Closed circuit television camera system interlocked with watch
KR101594390B1 (en) * 2015-01-23 2016-02-17 (주) 지.티 텔레콤 Method for safty returning-home service using bluetooth
KR101633588B1 (en) 2015-07-24 2016-06-29 전성훈 Wearable healthcare safety belt
KR20170086948A (en) * 2016-01-19 2017-07-27 삼성전자주식회사 A method for control at least one device to communicate at a mobile device and the mobile device in a wireless communicaton system
US11202184B2 (en) 2016-01-19 2021-12-14 Samsung Electronics Co., Ltd. Method for controlling at least one device with which mobile device can communicate in wireless communication system, and mobile device
KR20180014919A (en) * 2016-08-02 2018-02-12 송태윤 Android-based functions using its Wi-Fi wireless router (ap) leader of a private function under the entrance way of judgment specific location and for this
KR101936390B1 (en) * 2017-12-26 2019-04-03 주식회사 플랜티넷 Method And Apparatus for Providing Tracking Service based on Closed Circuit Tele-Vision
KR20190095604A (en) * 2018-01-24 2019-08-16 주식회사 루트링크 NB-IoT TERMINAL FOR REPORT AN ACCIDENT, SYSTEM INCLUDING THE SAME AND METHOD FOR OPERATING THE SAME
WO2020238652A1 (en) * 2019-05-29 2020-12-03 鹏城实验室 Method and system for navigation and positioning
CN110234071A (en) * 2019-06-25 2019-09-13 上海良相智能化工程有限公司 One kind is portable to detect yard positioning device and system
KR20220030481A (en) * 2020-09-02 2022-03-11 (주)휴빌론 FTM-based tag-based positioning and tag operation method and device

Also Published As

Publication number Publication date
KR101689040B1 (en) 2017-01-03

Similar Documents

Publication Publication Date Title
KR101689040B1 (en) Mobile terminal for position tracking, server and position tracking system
US20180067200A1 (en) System and method for mobile monitoring of non-associated tags
KR101535041B1 (en) Location tracking system using bluetooth deacons
JP2006267057A (en) Position-detection system, portable terminal, position-detecting method and program thereof
JP2014192813A (en) Terminal, method and program for detecting specific position on basis of received radio wave strength per channel
KR101823147B1 (en) BLE Beacon based safety assitance service system
KR20130098060A (en) A system and a method for preventing a lost child
KR20180024684A (en) An appratus for providing safty management services based on determiing location, a method and recoding medium for operating it
JP2008112256A (en) Position management system
KR20120044747A (en) Emergency notification system using rfid
CN104410432A (en) Micro digital beacon device as well as monitoring system and method for rapidly finding moving target
KR101334656B1 (en) Local based service system using smart pole
KR101411406B1 (en) System for providing caution-service for prevention against disasters
JP2006333345A (en) Mobile station, mobile communication system, location information notification method and location information notification program
KR20160064417A (en) System for Preventing a Calamity based on Beacon and Controlling Meathod for the Same
KR101188538B1 (en) Alarm system based on the position and mobile device with alarm system based on the position and alarm service based on the position
KR101136145B1 (en) Check-in system for portable terminal using location based service and check-in method using the same
KR101188386B1 (en) Locating System
JP2019100785A (en) Position management system, position management method, and portable terminal
KR101513658B1 (en) Emergency rescue method based on smart terminal location detection using wi-fi accesspoint scanning, and computer-readable record medium for the same
TWI549541B (en) Message passing method
KR101699982B1 (en) Mobile terminal for identifying various location and method thereof, base station for providing service according to location of mohile terminal and method thereof
KR101831250B1 (en) System for operating location based service using fixed terminal-mobile terminal and method therefor
KR20170029270A (en) Method and apparatus for tracking moving beacon device using network beacon device
KR101643242B1 (en) Identification card based on beacon and industrial safety management system using the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191001

Year of fee payment: 4