KR100513200B1 - Method and system for multimedia massaging service of mobile communication network - Google Patents
Method and system for multimedia massaging service of mobile communication network Download PDFInfo
- Publication number
- KR100513200B1 KR100513200B1 KR20030024770A KR20030024770A KR100513200B1 KR 100513200 B1 KR100513200 B1 KR 100513200B1 KR 20030024770 A KR20030024770 A KR 20030024770A KR 20030024770 A KR20030024770 A KR 20030024770A KR 100513200 B1 KR100513200 B1 KR 100513200B1
- Authority
- KR
- South Korea
- Prior art keywords
- message
- mobile communication
- messaging service
- voice
- multimedia messaging
- Prior art date
Links
- 238000010295 mobile communication Methods 0.000 title claims abstract description 121
- 238000000034 method Methods 0.000 title claims abstract description 26
- 238000004891 communication Methods 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 description 15
- 238000012545 processing Methods 0.000 description 7
- 238000000926 separation method Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000007792 addition Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Landscapes
- Mobile Radio Communication Systems (AREA)
- Telephonic Communication Services (AREA)
Abstract
본 발명은 멀티미디어 메시징 서비스(MMS) 기능을 갖춘 이동통신 단말기에서 발신하는 동영상/음성 메시지의 영상과 음성을 분리하여 포토메일과 음성쪽지 메시지로서 멀티미디어 메시징 서비스(MMS) 기능을 갖추지 못한 이동통신 단말기에 제공할 수 있도록 하는 이동 통신망에서의 멀티미디어 메시징 서비스 방법과 그 시스템을 제공한다. 이를 위해 본 발명은 멀티미디어 메시징 서비스(MMS) 기능을 갖춘 이동통신 단말기에서 상대방 착신측 이동통신 단말기로의 메시지 발신을 위해 동영상과 음성이 합성된 멀티미디어 메시지를 전송하는 단계와, 이동 통신망의 멀티미디어 메시징 서비스 서버에서 멀티미디어 메시지를 수신할 착신측 이동통신 단말기의 멀티미디어 메시징 서비스 기능 보유 여부를 판정하는 단계, 상기 착신측 이동통신 단말기가 멀티미디어 메시징 서비스 기능을 보유하지 않은 것으로 판명되면, 멀티미디어 메시지의 동영상과 음성을 각각 분리하는 단계 및, 상기 분리된 동영상에서 정지화상을 추출하고, 분리된 음성을 음성메시지로 생성하여 상대방의 착신측 이동통신 단말기에 전송하는 단계로 이루어진 것을 특징으로 한다.The present invention is to separate the video and voice of the video / voice message originating from a mobile communication terminal with a multimedia messaging service (MMS) function to a mobile communication terminal that does not have a multimedia messaging service (MMS) function as a photomail and voice message The present invention provides a method and system for multimedia messaging service in a mobile communication network. To this end, the present invention provides a method for transmitting a multimedia message composed of a video and a voice for transmitting a message from a mobile communication terminal having a multimedia messaging service (MMS) function to a called party's mobile communication terminal, and a multimedia messaging service of a mobile communication network. Determining whether the called mobile terminal to receive the multimedia message has a multimedia messaging service function. If it is determined that the called mobile terminal does not have a multimedia messaging service function, the video and audio of the multimedia message are determined. Separating each step, and extracting a still picture from the separated video, generating the separated voice as a voice message and transmitting to the called party's mobile communication terminal of the other party.
Description
본 발명은 이동 통신망에서의 멀티미디어 메시징 서비스 방법과 그 시스템에 관한 것으로서, 보다 상세하게는 멀티미디어 메시징 서비스(Multimedia Messaging Service; MMS)(이하 MMS라 칭함)가 가능한 이동통신 단말기로부터 발신되는 동영상/음성 메시지 정보를 MMS 서비스 기능이 이루어지지 못하는 비MMS용 이동통신 단말기에서도 수신받아 조회할 수 있도록 하는 이동 통신망에서의 멀티미디어 메시징 서비스 방법과 그 시스템에 관한 것이다.The present invention relates to a method and system for multimedia messaging service in a mobile communication network, and more particularly, a video / voice message transmitted from a mobile communication terminal capable of a multimedia messaging service (MMS) (hereinafter referred to as MMS). The present invention relates to a method and system for multimedia messaging service in a mobile communication network that can receive and inquire information even in a non-MMS mobile communication terminal in which an MMS service function cannot be performed.
주지된 바와 같이, 이동통신 시스템은 이동통신 단말기와 이동통신 단말기 간 또는 유선 전화기와 이동통신 단말기 간에 통화로를 통한 음성통화가 수행되도록 함과 더불어, 부가기능으로서 발신자의 음성메시지를 보관하였다가 착신자에게 송출하는 음성 사서함 서비스와, 착신자와 발신자 간에 문자메시지를 교환할 수 있도록 하는 문자데이터 전송 서비스를 갖추고 있다. As is well known, the mobile communication system allows a voice call through a call path between a mobile communication terminal and a mobile communication terminal or between a wired telephone and a mobile communication terminal, and stores a caller's voice message as an additional function. It has a voice mail service to send to the user, and a text data transmission service for exchanging text messages between the called party and the caller.
한편, 최근에는 이동통신 서비스 기술의 발전에 의해 회선 접속기능과 패킷접속 기능이 양립적으로 수행되는 것이 가능함과 더불어 이동통신 서비스를 위해 할당되는 주파수 대역폭의 확장에 기반하여 데이터의 전송속도가 대폭적으로 증가함에 따라, 대용량의 멀티미디어 데이터에 대한 고속의 데이터 전송서비스가 가능하게 되었다. On the other hand, in recent years, due to the development of mobile communication service technology, the line connection function and the packet access function can be performed in a compatible manner, and the data transmission speed is greatly increased based on the expansion of the frequency bandwidth allocated for the mobile communication service. Increasingly, a high speed data transmission service for a large amount of multimedia data is enabled.
이러한 멀티미디어 데이터에 대한 고속 데이터 전송서비스로서는 이미지 전송 서비스가 대표적으로 적용되고 있는 바, 그 이미지 전송 서비스에서는 인터넷망을 통해 이동통신 단말기의 사용자가 원하는 이미지 데이터를 업로드하게 되면, 인터넷망과 연동되는 이동 통신망 상의 서비스 모듈에서 업로드된 이미지 데이터를 이동통신 단말기에서 디스플레이가 가능한 데이터 포맷으로 변환하여 이동통신 단말기에 전송함으로써 해당 단말기의 바탕화면 이미지로서 사용할 수 있도록 되어 있다. As a high-speed data transmission service for such multimedia data, an image transmission service is typically applied. When the image transmission service uploads image data desired by a user of the mobile communication terminal through the Internet network, The image data uploaded from the service module on the communication network is converted into a data format that can be displayed on the mobile communication terminal and transmitted to the mobile communication terminal so as to be used as a background image of the corresponding terminal.
또한, 최근에는 고속 데이터 전송서비스로서 정지화상으로 이루어진 이미지 전송 서비스 뿐만 아니라, 동영상이나 음성, 플래쉬 애니메이션 데이터 등과 같은 멀티미디어 정보데이터를 이동 통신 시스템의 멀티미디어 컨텐츠 전송서비스에 따라 임의적으로 제공받을 수 있도록 되어 있다. In addition, recently, as a high-speed data transmission service, not only an image transmission service consisting of still images, but also multimedia information data such as video, audio, and flash animation data can be arbitrarily provided according to a multimedia content transmission service of a mobile communication system. .
이러한 이동 통신 시스템의 멀티미디어 컨텐츠 전송서비스에서는 발신측 이동통신 단말기의 가입자가 음성이 합성된 동영상 메시지 데이터를 이동 통신망을 통해 상대방측 수신 단말기에 전송하면, 그 수신측 이동통신 단말기에서는 수신받은 동영상 메시지 데이터를 표시화면 상에 동영상으로 재현함과 더불어, 음성을 스피커를 통해 재생할 수 있도록 되어 있는 바, 이러한 멀티미디어 컨텐츠 전송서비스를 통한 서비스 기능을 구현하기 위해서는 멀티미디어 메시징 서비스 즉, MMS 기능이 가능한 MMS용 이동통신 단말기를 통해서만 가능하도록 되어 있다.In the multimedia content transmission service of the mobile communication system, when the subscriber of the calling mobile terminal transmits the synthesized video message data to the other receiving terminal through the mobile communication network, the receiving mobile communication terminal receives the received video message data. Is reproduced as a video on the display screen, and the voice can be reproduced through the speaker. In order to implement a service function through the multimedia content transmission service, a multimedia messaging service, that is, MMS capable mobile communication It is only possible through the terminal.
그러나, 이러한 이동통신 시스템의 멀티미디어 컨텐츠 전송서비스에서는 특정한 MMS 기능을 보유한 이동통신 단말기에서 상대방 착신측 가입자에게 동영상 및 음성이 합성된 멀티미디어 메시지를 정상적으로 전달하기 위해서는 착신측 이동통신 단말기가 MMS기능을 보유하여야 하는 바, MMS 기능을 보유하지 못하는 착신측 이동통신 단말기에 대해서는 멀티미디어 메시지의 수신 및 재생이 정상적으로 이루어지지 못하게 됨에 따라 각 단말기 간의 기종 차이 때문에 멀티미디어 정보의 원활한 교환이 어렵게 된다는 불리함이 있다. However, in the multimedia content transmission service of such a mobile communication system, in order for a mobile communication terminal having a specific MMS function to normally deliver a multimedia message composed of video and voice to a called party's subscriber, the called mobile terminal must have an MMS function. As the receiving mobile communication terminal that does not have the MMS function cannot receive and play the multimedia message normally, it is difficult to smoothly exchange the multimedia information due to the difference between models.
따라서, 본 발명은 상기한 종래의 사정을 감안하여 이루어진 것으로서, 그 목적은 멀티미디어 메시징 서비스(MMS) 기능을 갖춘 이동통신 단말기에서 발신하는 동영상/음성 메시지의 영상과 음성을 분리하여 포토메일과 음성쪽지 메시지로서 멀티미디어 메시징 서비스(MMS) 기능을 갖추지 못한 이동통신 단말기에 제공할 수 있도록 하는 이동 통신망에서의 멀티미디어 메시징 서비스 방법과 그 시스템을 제공하는 것이다. Accordingly, the present invention has been made in view of the above-mentioned conventional circumstances, and an object thereof is to separate a video mail and a voice message from a video / audio message originating from a mobile communication terminal having a multimedia messaging service (MMS) function and to send a photo mail and a voice message. The present invention provides a method and system for multimedia messaging service in a mobile communication network that can be provided as a message to a mobile communication terminal having no multimedia messaging service (MMS) function.
상기한 목적을 달성하기 위해 본 발명의 방법에 따르면, 멀티미디어 메시징 서비스(MMS) 기능을 갖춘 이동통신 단말기에서 상대방 착신측 이동통신 단말기로의 메시지 발신을 위해 동영상과 음성이 합성된 멀티미디어 메시지를 전송하는 단계와, 이동 통신망의 멀티미디어 메시징 서비스 서버에서 멀티미디어 메시지를 수신할 착신측 이동통신 단말기의 멀티미디어 메시징 서비스 기능 보유 여부를 판정하는 단계, 상기 착신측 이동통신 단말기가 멀티미디어 메시징 서비스 기능을 보유하지 않은 것으로 판명되면, 멀티미디어 메시지의 동영상과 음성을 각각 분리하는 단계 및, 상기 분리된 동영상에서 정지화상을 추출하고, 분리된 음성을 음성메시지로 생성하여 상대방의 착신측 이동통신 단말기에 전송하는 단계로 이루어진 것을 특징으로 하는 이동 통신망에서의 멀티미디어 메시징 서비스 방법을 제공한다.In order to achieve the above object, according to the method of the present invention, a mobile terminal having a multimedia messaging service (MMS) function to transmit a multimedia message synthesized with video and voice for sending a message to the called party's mobile communication terminal; Determining, by the multimedia messaging service server in the mobile communication network, whether or not the called mobile terminal to receive the multimedia message has the multimedia messaging service function, and the called mobile terminal does not have the multimedia messaging service function. And separating the video and the voice of the multimedia message, and extracting a still picture from the separated video, and generating the separated voice as a voice message and transmitting the separated voice to the called party's mobile terminal. Move Provided is a multimedia messaging service method in a communication network.
상기한 목적을 달성하기 위해 본 발명의 시스템에 따르면, 멀티미디어 메시징 서비스(MMS) 기능을 갖춘 이동통신 단말기로부터의 동영상/음성의 멀티미디어 메시지를 멀티미디어 메시징 서비스 기능이 없는 착신측 이동통신 단말기에 전송하기 위한 시스템에 있어서, 상기 착신측 이동통신 단말기가 멀티미디어 메시징 서비스 기능을 보유하지 않은 것으로 판명되면, 상기 멀티미디어 메시징 서비스 기능을 갖춘 이동통신 단말기로부터의 멀티미디어 메시지로부터 동영상과 음성을 분리하는 멀티미디어 메시징 서비스 서버와, 상기 멀티미디어 메시징 서비스 서버에 대해 착신측 이동통신 단말기의 가입자 정보로부터 멀티미디어 메시징 서비스의 보유 여부 판정을 위한 단말기종 정보를 제공하는 홈 위치 등록기, 상기 멀티미디어 메시징 서비스 서버로부터 분리된 동영상 데이터를 수신받아 포토메일 메시지로서 상기 착신측 이동통신 단말기에 전송하는 포토메일 서버 및, 상기 멀티미디어 메시징 서비스 서버로부터 분리된 음성 데이터를 수신받아 그 음성에 대한 음성쪽지 메시지를 착신측 이동통신 단말기에 전송하는 음성쪽지 서버로 구성된 것을 특징으로 하는 이동 통신망에서의 멀티미디어 메시징 서비스 시스템을 제공한다.In order to achieve the above object, according to the system of the present invention, for transmitting a video / voice multimedia message from a mobile communication terminal having a multimedia messaging service (MMS) function to a destination mobile terminal without a multimedia messaging service function; A system comprising: a multimedia messaging service server for separating a video and a voice from a multimedia message from a mobile communication terminal having the multimedia messaging service function when the called mobile terminal is found to have no multimedia messaging service function; A home location register providing terminal type information for determining whether a multimedia messaging service is held from subscriber information of a called-party mobile communication terminal to the multimedia messaging service server, the multimedia messaging service server A photomail server that receives the separated video data and transmits the photomail message to the called-party mobile communication terminal as a photomail message, and receives the separated voice data from the multimedia messaging service server and moves the voice-message message for the voice. The present invention provides a multimedia messaging service system in a mobile communication network, comprising: a voice message server for transmitting to a communication terminal.
이하, 상기한 바와 같이 구성된 본 발명에 대해 첨부도면을 참조하여 상세히 설명한다.Hereinafter, the present invention configured as described above will be described in detail with reference to the accompanying drawings.
즉, 도 1은 본 발명에 따른 멀티미디어 메시징 서비스 시스템이 적용된 이동 통신망의 구성을 나타낸 도면이다. 1 is a diagram illustrating a configuration of a mobile communication network to which a multimedia messaging service system according to the present invention is applied.
도 1에 도시된 바와 같이, 본 발명의 멀티미디어 메시징 서비스 시스템은 MMS용 이동통신 단말기(10)와, 비MMS용 이동통신 단말기(12), 이동통신 기지국(Base Transceiver Station; BTS)(14,16), 기지국 제어기(Base Station Controller; BSC)(18,20), 이동통신 교환기(Mobile Switching Center; MSC)(22,26), 방문가입자 위치 등록기(Visitor Location Register; VLR)(24,28), 홈위치 등록기(Home Location Register; HLR)(30), 단문메시징 서비스센터(Short Massage Service Center; SMSC)(32), 멀티미디어 메시징 서비스(Multimedia Message Service; MMS) 서버(34), 컨텐츠 프로바이더(Contents Provider; CP)(36), 포토메일 서버(38) 및, 음성쪽지 서버(40)로 구성된다.As shown in FIG. 1, the multimedia messaging service system of the present invention includes a mobile communication terminal 10 for MMS, a non-MMS mobile communication terminal 12, and a base transceiver station (BTS) 14, 16. ), Base Station Controller (BSC) 18, 20, Mobile Switching Center (MSC) 22, 26, Visitor Location Register (VLR) 24, 28, Home Location Register (HLR) 30, Short Massage Service Center (SMSC) 32, Multimedia Message Service (MMS) Server 34, Content Providers Provider (CP) 36, Photomail server 38, and voice message server 40.
상기 MMS용 이동통신 단말기(10)는 해당 단말기 주변을 정지화상 또는 동영상으로 촬영이 가능한 촬영 카메라(도시되지 않음)가 장착되고서, 그 촬영 카메라를 통해 동영상을 촬영하여 마이크로폰(도시되지 않음)을 통해 입력받은 외부 음성과 합성하여 이동 통신망을 통해 특정한 상대방 가입자에게 동영상/음성의 멀티미디어 메시지 데이터를 전송한다. The mobile communication terminal 10 for the MMS is equipped with a shooting camera (not shown) capable of shooting still images or moving pictures around the terminal, and photographs a video through the shooting camera to use a microphone (not shown). It synthesizes the external voice received through the mobile communication network and transmits the video / audio multimedia message data to a specific counterpart subscriber.
상기 비MMS용 이동통신 단말기(12)는 음성통화와 데이터 통신에 의한 문자나 정지화상의 수신/표시가 가능하나 동영상의 수신/재생이 불가능한 MMS 기능이 존재하지 않는 단말기로 이루어지고서, 이동 통신망을 통해 상기 MMS용 이동통신 단말기(10)로부터 전송되는 동영상/음성의 멀티미디어 메시지가 정지화상 및 음성메시지로 각각 분리되는 포토메일 및 음성쪽지를 수신받아 표시화면 및 스피커를 통해 각각 재현한다. The non-MMS mobile communication terminal 12 is composed of a terminal capable of receiving / displaying a text or a still image by voice call and data communication but having no MMS function that cannot receive / play a video. The multimedia message transmitted from the mobile communication terminal 10 for MMS is received and reproduced through a display screen and a speaker by receiving a photo mail and a voice message respectively separated into still pictures and voice messages.
상기 제 1 및 제 2이동통신 기지국(14,16)은 기저대역의 신호처리와, 유무선 변환 및 무선신호의 송수신 등을 수행하여 가입자의 단말기와 직접 연결되는 망 종단 장치로서, 이는 RF무선 신호의 처리에 의해 각각의 MMS용 이동통신 단말기(10)와 비MMS용 이동통신 단말기(12)에 대한 음성 또는 데이터신호의 송수신을 수행한다.The first and second mobile communication base stations (14, 16) is a network termination device that is directly connected to the subscriber terminal by performing the baseband signal processing, wired and wireless conversion, and transmission and reception of wireless signals, which is the RF wireless signal By the processing, voice and data signals are transmitted and received to and from each of the MMS mobile communication terminals 10 and the non-MMS mobile communication terminals 12. FIG.
상기 제 1 및 제 2기지국 제어기(18,20)는 각각의 담당 기지국(14,16)과 이동통신 교환기(22,26)의 사이에 위치하여 각 이동통신 기지국(14,16)의 관리 및 제어를 담당하는 것으로서, 이는 각 착신측 이동통신 단말기(10)와 발신측 이동통신 단말기(12)에 대한 무선채널 할당 및 해제기능과, 단말기 및 기지국의 송신출력 제어기능, 셀간의 핸드오프 결정, 이동통신 기지국(14,16)의 운용 및 유지보수 기능을 수행한다.The first and second base station controllers 18 and 20 are located between the respective base stations 14 and 16 and the mobile switching centers 22 and 26 to manage and control the respective mobile communication base stations 14 and 16. It is responsible for the radio channel assignment and release function for each destination mobile terminal 10 and the source mobile communication terminal 12, the transmission output control function of the terminal and the base station, handoff determination between the cell, mobile Performs the operation and maintenance of the communication base station (14, 16).
상기 제 1 및 제 2이동통신 교환기(22,26)는 이동통신 단말기 가입자의 착/발신 호처리 기능을 수행함과 더불어 각 방문가입자 위치 등록기(24,28) 또는 홈 위치 등록기(30)를 통한 단말기의 위치등록 절차 및 핸드오프 절차를 수행하고, 부가 서비스로서 단문메시지 전송 서비스를 제공한다. The first and second mobile communication exchangers 22 and 26 perform the incoming / outgoing call processing function of the mobile communication terminal subscriber and the terminal through each visitor location register 24 or 28 or the home location register 30. Performs the location registration procedure and the handoff procedure, and provides a short message transmission service as an additional service.
상기 제 1 및 제 2방문가입자 위치 등록기(24,28)는 해당 이동통신 교환기(22,26)가 관장하는 지역의 이동통신 단말기에 대한 가입자 정보 및 위치정보가 저장되어 있다. The first and second visitor location registers 24 and 28 store subscriber information and location information of a mobile communication terminal in a region managed by the corresponding mobile communication switch 22 and 26.
상기 홈위치 등록기(30)는 이동통신 서비스에 등록된 전체 단말기 가입자에 대한 가입자 정보와 위치정보가 저장되어 있는 것으로서, 상기 이동통신 교환기(22,26)와 연결하여 각 방문자 위치 등록기(24,28)와의 상호작용에 의해 단말기 가입자의 위치등록 및 가입자 추적기능이 수행되도록 한다. The home location register 30 stores subscriber information and location information of all terminal subscribers registered in the mobile communication service, and connects the visitor location registers 24 and 28 to the mobile communication exchangers 22 and 26. ) Location registration and subscriber tracking function of the terminal subscriber.
여기서, 상기 홈위치 등록기(30)는 전체 가입자가 각각 보유한 이동통신 단말기의 MMS 기능 보유별로 단말기 기종정보가 저장되어 있고, 상기 멀티미디어 메시징 서비스 서버(34)의 정보요청에 따라 단말기의 기종정보를 제공한다. In this case, the home location register 30 stores terminal model information for each MMS function possessed by the mobile subscriber, and provides model information of the terminal according to the information request of the multimedia messaging service server 34. do.
상기 단문메시징 서비스 센터(32)는 지능망을 통하여 상기 음성쪽지 서버(40)로부터 생성되는 음성쪽지 메시지를 단문메시지의 형태로 이동통신 단말기에 제공한다. The short messaging service center 32 provides a voice message generated from the voice message server 40 to the mobile communication terminal in the form of a short message through an intelligent network.
상기 멀티미디어 메시징 서비스 서버(34)는 동영상 및 음성이 합성된 멀티미디어 데이터를 동영상 데이터와 음성 데이터로 각각 분리하는 정보분리 처리모듈(35)을 갖추고서, 이동 통신망과 지능망을 통해 상기 MMS용 이동통신 단말기(10)로부터 상대방 착신측의 비MMS용 이동통신 단말기(12)에 전송하기 위한 동영상/음성의 멀티미디어 메시지 데이터를 수신받으면, 상기 홈위치 등록기(30)의 가입자정보에 포함된 단말기 기종정보를 통해 비MMS용 이동통신 단말기(12)의 MMS 기능이 보유하고 있지 않음을 판정하여, 정보분리 처리모듈(35)의 구동에 의해 해당 멀티미디어 메시지를 영상과 음성으로 각각 분리하여 동영상데이터는 포토메일 서버(38)에 전송함과 더불어, 음성데이터는 음성쪽지 서버(40)로 전송한다. The multimedia messaging service server 34 is provided with an information separation processing module 35 for separating video data and voice-synthesized multimedia data into video data and voice data, respectively, through a mobile communication network and an intelligent network. When receiving the multimedia message data of the video / audio for transmitting to the non-MMS mobile communication terminal 12 of the called party from the other party, through the terminal model information included in the subscriber information of the home location register (30) It is determined that the MMS function of the non-MMS mobile communication terminal 12 is not possessed, and the multimedia message is separated into video and audio by driving the information separation processing module 35, and the video data is stored in the photomail server ( In addition to 38), the voice data is transmitted to the voice message server 40.
상기 컨텐츠 프로바이더(36)는 상기 멀티미디어 메시징 서비스 서버(34)와 연동하여 MMS용 이동통신 단말기(10)에서 선택할 수 있는 다양한 종류의 동영상 메시지나 음성 메시지를 제공하는 서비스를 수행한다. The content provider 36 performs a service for providing various types of video messages or voice messages that can be selected by the MMS mobile communication terminal 10 in cooperation with the multimedia messaging service server 34.
상기 포토메일 서버(38)는 상기 멀티미디어 메시징 서비스 서버(34)로부터 멀티미디어 메시지로부터 분리된 동영상 데이터를 수신받아서 그 동영상 구간중에 특징적인 구간에 해당되는 정지화상을 추출하여 포토메일 메시지를 생성하고, 그 포토메일 메시지를 이동 통신망을 통해 상대방측 비MMS용 이동통신 단말기(12)에 전송한다. The photomail server 38 receives video data separated from the multimedia message from the multimedia messaging service server 34, extracts a still picture corresponding to a characteristic section of the video section, and generates a photomail message. The photomail message is transmitted to the other party's non-MMS mobile communication terminal 12 through the mobile communication network.
여기서, 상기 포토메일 서버(38)는 동영상 데이터로부터 포토메일 메시지를 생성하기 위해, 그 동영상 구간에서 가장 첫 번째 프레임의 정지화상이나 가장 마지막 프레임의 정지화상을 특징 구간으로서 추출하는 것이 바람직하고, 동영상의 전체적인 구간 중에서 가장 중심이 되는 프레임을 특징 구간으로서 추출하는 것도 바람직하며, 동영상의 전체 구간 중에서 무작위로 특정한 프레임을 지정하여 추출하는 것도 얼마든지 가능하다.In this case, in order to generate a photomail message from the video data, the photomail server 38 preferably extracts the still picture of the first frame or the last picture of the last frame as the feature section. It is also preferable to extract the frame which is the center of the overall interval of as a feature section, and it is also possible to designate and extract a specific frame randomly from the entire section of the video.
상기 음성쪽지 서버(40)는 상기 멀티미디어 메시징 서비스 서버(34)로부터 멀티미디어 메시지로부터 분리한 음성데이터를 수신받아 음성쪽지 메시지를 생성하고서, 이동 통신망을 통해 상기 비MMS용 이동통신 단말기(12)에 전송하게 되는 바, 이는 상기 음성쪽지 메시지마다 회신번호(Callback Number)를 할당하여 상기 비MMS용 이동통신 단말기(12)로부터의 음성쪽지 메시지에 할당된 회신번호를 통한 통화동작에 의해 상기 음성내용을 송출할 수 있도록 한다. The voice message server 40 receives voice data separated from a multimedia message from the multimedia messaging service server 34, generates a voice message, and transmits the voice message to the non-MMS mobile communication terminal 12 through a mobile communication network. This is to assign a callback number (Callback Number) for each voice message message to send the voice content by the call operation through the reply number assigned to the voice message message from the non-MMS mobile communication terminal 12 Do it.
다음에, 도 2는 본 발명의 바람직한 실시예에 따라 동영상/음성 메시지 데이터를 비 MMS용 이동통신 단말기에 전송하기 위한 영상 및 음성의 분리처리 상태를 도식적으로 나타낸 도면이다.Next, FIG. 2 is a diagram illustrating a separation process of video and audio for transmitting video / audio message data to a non-MMS mobile communication terminal according to a preferred embodiment of the present invention.
도 2에 도시된 바와 같이, MMS용 이동통신 단말기(10)로부터 동영상 및 음성이 합성된 멀티미디어 메시지 데이터(MVS1)를 전송하게 되면, 멀티미디어 메시징 서비스 서버(34)에서는 해당 MMS용 이동통신 단말기(10)가 멀티미디어 메시지 데이터(MVS1)를 전송하고자 하는 착신측 이동통신 단말기의 단말기 번호를 통해 홈 위치 등록기(30)에 해당 착신측 이동통신 단말기의 단말기종을 문의하게 된다. As shown in FIG. 2, when the multimedia message data (MVS1) including the synthesized video and voice is transmitted from the MMS mobile communication terminal 10, the multimedia messaging service server 34 transmits the MMS mobile communication terminal 10. ) Inquires about the terminal type of the called mobile communication terminal to the home location register 30 through the terminal number of the called mobile communication terminal to which the multimedia message data MVS1 is to be transmitted.
상기 멀티미디어 메시징 서비스 서버(34)는 상기 홈 위치 등록기(30)로부터 제공되는 착신측 이동통신 단말기에 대한 단말기종의 정보가 MMS 기능이 가능한 단말기종인 것으로 판명되면, 그 착신측 이동통신 단말기에 대해 동영상/음성 메시지 데이터(MVS2)를 그대로 전송하게 된다. When the multimedia messaging service server 34 determines that the terminal type information for the called mobile terminal provided from the home location register 30 is a terminal capable of MMS function, the multimedia messaging service server 34 provides a moving picture for the called mobile terminal. / Voice message data (MVS2) is transmitted as it is.
하지만, 상기 멀티미디어 메시징 서비스 서버(34)는 상기 홈 위치 등록기(30)로부터의 단말기종 정보에 의해 해당 착신측이 비MMS용 이동통신 단말기(12)인 것으로 판명되면, 정보분리 처리모듈(35)을 통해 동영상/음성 메시지 데이터(MVS1)의 영상과 음성을 각각 분리처리하게 되고, 그 분리된 동영상 데이터를 포토메일 서버(38)에 전송하는 한편, 음성데이터는 음성쪽지 서버(40)에 전송하게 된다.However, if it is determined that the called party is the non-MMS mobile communication terminal 12 according to the terminal type information from the home location register 30, the multimedia messaging service server 34, the information separation processing module 35 Through video and audio message data (MVS1) of the video and audio through separate processing, and to transmit the separated video data to the photomail server 38, the voice data to the voice message server 40 do.
이에, 상기 포토메일 서버(38)는 상기 멀티미디어 메시징 서비스 서버(34)로부터 수신받은 동영상 데이터에서 가장 특징적인 영상구간만을 추출하여 포토메일 메시지 데이터(PM)를 생성하고서, 상기 비MMS용 이동통신 단말기(12)에 전송하게 되고, 상기 음성쪽지 서버(40)는 상기 멀티미디어 메시징 서비스 서버(34)로부터 수신받은 음성데이터에 의해 음성쪽지 메시지 데이터(VM)를 생성하여 상기 비MMS용 이동통신 단말기(12)에 전송하게 된다. Accordingly, the photomail server 38 extracts only the most characteristic video section from the video data received from the multimedia messaging service server 34 to generate photomail message data PM, and thus, the non-MMS mobile communication terminal. And the voice message server 40 generates voice message data VM based on the voice data received from the multimedia messaging service server 34 to generate the voice message message data VM. ).
여기서, 상기 음성쪽지 서버(40)는 상기 포토메일 서버(38)로부터 포토메일 메시지 데이터(PM)를 비MMS용 이동통신 단말기(12)에 전송한 이후에, 음성쪽지 메시지 데이터(VM)를 후속적으로 전송할 수 있도록 한다. Here, the voice message server 40 transmits the photo mail message data PM from the photo mail server 38 to the mobile communication terminal 12 for non-MMS, and then sends the voice message message VM. Can be sent as
상기 음성쪽지 서버(40)는 상기 비MMS용 이동통신 단말기(12)에 전송하는 음성쪽지 메시지 데이터(VM)에 대해 CID(Caller ID) 형식으로 데이터를 정의할 수 있도록 되어 있는 바, 그 CID 정보에는 메시지 번호(MSG_NO)와, 메시지 순서(MSG_Seq), 발신측 단말기 번호(MIN), 음성쪽지의 제목 문자열(HEAD)이 포함되어 있다. The voice message server 40 is capable of defining data in a CID (Caller ID) format for voice message message data (VM) transmitted to the non-MMS mobile communication terminal 12. Includes a message number (MSG_NO), a message sequence (MSG_Seq), a calling party terminal number (MIN), and a title string (HEAD) of a voice message.
상기 비MMS용 이동통신 단말기(12)는 도 3에 도시된 바와 같이, 복수의 발신측 가입자로부터 각기 다른 복수의 멀티미디어 메시지로부터 분리한 포토 메시지를 수신받거나, 단일의 발신측 가입자로부터 각기 다른 내용을 갖는 복수의 멀티미디어 메시지로부터 분리한 포토 메시지를 수신받게 되면, 각 포토 메시지의 수신을 알리는 정보가 표시화면에 표시되도록 하면서, 각각의 포토 메시지가 각 멀티미디어 메시지로부터 분리한 음성쪽지와 연결될 수 있도록 한다. As shown in FIG. 3, the non-MMS mobile communication terminal 12 receives a photo message separated from a plurality of different multimedia messages from a plurality of calling party subscribers, or receives different contents from a single calling party subscriber. When receiving a photo message separated from a plurality of multimedia messages, the information indicating the reception of each photo message is displayed on the display screen, so that each photo message can be connected to the voice message separated from each multimedia message.
한편, 상기 비MMS용 이동통신 단말기(12)는 복수의 포토 메시지 중에서 특정 포토 메시지와 연결된 음성쪽지를 선택하면, 도 4에 도시된 바와 같이 해당 단말기 가입자가 선택한 특정 포토 메시지와 연결되어 있는 음성쪽지 메시지가 표시화면 상에 표시되도록 하고, 그 음성쪽지 메시지의 실행에 의해 음성내용을 청취하는 것이 가능하도록 한다. On the other hand, when the non-MMS mobile communication terminal 12 selects a voice message connected to a specific photo message among a plurality of photo messages, as shown in FIG. 4, the voice note connected to the specific photo message selected by the subscriber of the terminal. The message is displayed on the display screen, and the voice content can be listened to by executing the voice message.
여기서, 상기 비MMS용 이동통신 단말기(12)에서는 각 음성쪽지 메시지의 CID 정보에 포함된 메시지 번호와 메시지 순서의 정보에 의해, 함께 수신받은 각 포토 메시지 별로 대응되도록 정보를 연결할 수 있도록 함에 의해, 동영상/음성 메시지 데이터로부터 각각 분리된 포토 메시지 및 음성쪽지를 상호 대응적으로 조회할 수 있도록 한다. Here, the non-MMS mobile communication terminal 12 can connect the information to correspond to each photo message received together by the message number and message order information included in the CID information of each voice message message, Photo messages and voice messages separated from the video / audio message data can be searched for each other.
이어, 상기한 바와 같이 이루어진 본 발명의 동작에 대해 도 5의 플로우차트를 참조하여 상세히 설명한다. Next, the operation of the present invention made as described above will be described in detail with reference to the flowchart of FIG. 5.
먼저, 발신측의 MMS용 이동통신 단말기(10)에서는 해당 단말기에 장착된 촬영 카메라를 통해 촬영한 동영상을 마이크로폰으로부터 입력받은 음성과 합성하여 동영상/음성의 멀티미디어 메시지를 특정한 착신측 가입자에게 전송하기 위해 멀티미디어 메시징 서비스 서버(34)에 전송한다(단계 S10).First, the MMS mobile communication terminal 10 of the calling party synthesizes a video taken through a recording camera mounted on the corresponding terminal with a voice received from a microphone to transmit a multimedia message to a specific called party subscriber. Transfer to multimedia messaging service server 34 (step S10).
그 상태에서, 상기 멀티미디어 메시징 서비스 서버(34)는 상기 MMS용 이동통신 단말기(10)로부터 멀티미디어 메시지의 전송을 희망하는 착신측 이동통신 단말기(12)에 대한 단말기 번호를 기초로 하여 홈 위치 등록기(30)에 해당 착신측 이동통신 단말기(12)의 단말기종을 조회하게 되고(단계 S11), 상기 홈 위치 등록기(30)는 가입자정보에 포함된 단말기종의 정보에 의해 해당 착신측 이동통신 단말기(12)가 MMS 기능이 부여되어 있지 않은 비MMS용 인것으로 판정하여 그에 따른 단말기종 정보를 상기 멀티미디어 메시징 서비스 서버(34)에 제공한다(단계 S12).In that state, the multimedia messaging service server 34 uses the home location register (based on the terminal number for the called-party mobile communication terminal 12 wishing to transmit the multimedia message from the MMS mobile communication terminal 10). 30, the terminal type of the called party's mobile communication terminal 12 is inquired (step S11), and the home location register 30 is connected to the called party's mobile communication terminal by the information of the terminal type included in the subscriber information. 12) determines that the MMS function is for non-MMS and provides the terminal type information accordingly to the multimedia messaging service server 34 (step S12).
이에, 상기 멀티미디어 메시징 서비스 서버(34)는 상기 홈 위치 등록기(30)로부터 제공되는 단말기종 정보를 통해 해당 착신측 이동통신 단말기가 비MMS용 이동통신 단말기(12)인 것으로 판명되면, 정보분리 처리모듈(35)을 통해 영상 및 음성을 분리하게 된다(단계 S13).Accordingly, the multimedia messaging service server 34 determines that the called party's mobile communication terminal is the non-MMS mobile communication terminal 12 through the terminal type information provided from the home location register 30. The module 35 separates the video and audio (step S13).
그 상태에서, 상기 멀티미디어 메시징 서비스 서버(34)는 멀티미디어 메시지 데이터로부터 분리한 동영상 데이터를 포토메일 서버(38)에 전송하게 되고(단계 S14), 상기 멀티미디어 데이터로부터 분리한 음성 데이터를 상기 음성쪽지 서버(40)에 전송하게 된다(단계 S15).In this state, the multimedia messaging service server 34 transmits the moving picture data separated from the multimedia message data to the photomail server 38 (step S14), and the voice data separated from the multimedia data is sent to the voice message server. It transmits to 40 (step S15).
한편, 상기 포토메일 서버(38)는 상기 멀티미디어 메시징 서비스 서버(34)로부터 수신받은 동영상 구간중에서 특정 프레임에 해당되는 정지화상을 포토메시지로서 생성하여 상기 비MMS용 이동통신 단말기(12)에 전송하게 되고(단계 S16), 상기 음성쪽지 서버(40)는 상기 멀티미디어 메시징 서비스 서버(34)로부터 수신받은 음성데이터에 의해 음성쪽지 메시지를 생성하여 단문메시징 서비스 센터(32)를 통해서 상기 비MMS용 이동통신 단말기(12)에 전송하게 된다(단계 S17).On the other hand, the photomail server 38 generates a still picture corresponding to a specific frame in the moving picture section received from the multimedia messaging service server 34 as a photo message to be transmitted to the non-MMS mobile communication terminal 12. (Step S16), the voice message server 40 generates a voice message by the voice data received from the multimedia messaging service server 34 and the mobile communication for the non-MMS through the short messaging service center 32 The data is transmitted to the terminal 12 (step S17).
이에, 상기 비MMS용 이동통신 단말기(12)는 상기 포토메일 서버(38)로부터 수신받은 포토메시지를 표시화면을 통해 표시하여 조회함과 더불어, 상기 음성쪽지 서버(40)로부터 수신받은 음성쪽지 메시지에 포함된 회신번호를 통한 통화동작에 의해 상기 발신측의 MMS용 이동통신 단말기(10)에서 발신한 음성내용을 조회하는 것이 가능하게 된다(단계 S18).Accordingly, the non-MMS mobile communication terminal 12 displays the photo message received from the photo mail server 38 on the display screen and inquires the voice message received from the voice message server 40. It is possible to inquire the voice content transmitted from the MMS mobile communication terminal 10 of the calling party by the call operation through the reply number included in step S18.
한편, 본 발명은 전술한 전형적인 바람직한 실시예들에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.On the other hand, the present invention is not limited to the above-described typical preferred embodiments, but can be carried out in various ways without departing from the gist of the present invention, various modifications, alterations, substitutions or additions are common in the art Those who have knowledge will easily understand. If the implementation by such improvement, change, replacement or addition falls within the scope of the appended claims, the technical idea should also be regarded as belonging to the present invention.
이상과 같이 본 발명에 따르면, 멀티미디어 메시징 서비스(MMS) 기능을 보유한 이동통신 단말기에서 동영상과 음성이 합성된 멀티미디어 메시지를 멀티미디어 메시징 서비스 기능을 갖추고 있지 못한 이동통신 단말기에 전송하고자 하는 경우에, 해당 멀티미디어 메시징 서비스 기능이 없는 착신측 이동통신 단말기의 단말기종 정보에 의거하여 멀티미디어 메시지 데이터를 동영상과 음성으로 분리하여 각각 포토메시지 및 음성쪽지 메시지로서 착신측 이동통신 단말기에 전송할 수 있도록 함에 의해, 멀티미디어 메시징 서비스 기능을 보유하고 있지 않은 이동통신 단말기에 대해서도 멀티미디어 메시징 서비스 기능을 보유한 이동통신 단말기와 호환적으로 멀티미디어 메시지의 내용을 조회하는 것이 가능하다는 효과를 갖게 된다. According to the present invention as described above, when a mobile communication terminal having a multimedia messaging service (MMS) function to transmit a multimedia message synthesized video and voice to a mobile communication terminal that does not have a multimedia messaging service function, the multimedia Based on the terminal type information of the destination mobile communication terminal having no messaging service function, multimedia message data is separated into a video and a voice and transmitted to the destination mobile communication terminal as a photo message and a voice message, respectively. Even for a mobile communication terminal that does not have a function, it is possible to query the contents of a multimedia message compatible with the mobile communication terminal having a multimedia messaging service function.
도 1은 본 발명에 따른 멀티미디어 메시징 서비스 시스템이 적용된 이동 통신망의 구성을 나타낸 도면, 1 is a diagram illustrating a configuration of a mobile communication network to which a multimedia messaging service system according to the present invention is applied;
도 2는 본 발명의 바람직한 실시예에 따라 동영상/음성 메시지 데이터를 비 MMS용 이동통신 단말기에 전송하기 위한 영상 및 음성의 분리처리 상태를 도식적으로 나타낸 도면, FIG. 2 is a diagram illustrating a separation process of video and audio for transmitting video / audio message data to a non-MMS mobile communication terminal according to a preferred embodiment of the present invention; FIG.
도 3 및 도 4는 본 발명의 바람직한 실시예에 따라 각기 개별적으로 이동통신 단말기에 수신되는 포토 메시지 및 음성쪽지 메시지의 단말기 조회화면을 예시적으로 나타낸 도면, 3 and 4 are exemplary views showing a terminal inquiry screen of a photo message and a voice message received at a mobile communication terminal individually according to a preferred embodiment of the present invention;
도 5는 본 발명에 따른 이동 통신망에서의 멀티미디어 메시징 서비스 방법에 대한 동작을 설명하는 플로우차트이다. 5 is a flowchart illustrating an operation of a multimedia messaging service method in a mobile communication network according to the present invention.
<도면의 주요부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>
10:MMS용 이동통신 단말기, 12:비MMS용 이동통신 단말기,10: mobile communication terminal for MMS, 12: mobile communication terminal for non-MMS,
14,16:이동통신 기지국, 18,20:기지국 제어기,14, 16: mobile communication base station, 18, 20: base station controller,
22,26:이동통신 교환기, 24,28:방문가입자 위치 등록기,22,26: mobile communication exchange, 24,28: subscriber location register,
30:홈위치 등록기, 32:단문메시징 서비스센터,30: home location register, 32: short messaging service center,
34:멀티미디어 메시징 서비스 서버, 36:컨테츠 프로바이더,34: multimedia messaging service server, 36: content provider,
38:포토메일 서버, 40:음성쪽지 서버.38: Photomail server, 40: Voice memo server.
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20030024770A KR100513200B1 (en) | 2003-04-18 | 2003-04-18 | Method and system for multimedia massaging service of mobile communication network |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20030024770A KR100513200B1 (en) | 2003-04-18 | 2003-04-18 | Method and system for multimedia massaging service of mobile communication network |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20040090807A KR20040090807A (en) | 2004-10-27 |
KR100513200B1 true KR100513200B1 (en) | 2005-09-08 |
Family
ID=37371770
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20030024770A KR100513200B1 (en) | 2003-04-18 | 2003-04-18 | Method and system for multimedia massaging service of mobile communication network |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100513200B1 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100617779B1 (en) * | 2003-10-29 | 2006-08-28 | 삼성전자주식회사 | System and method for file transmission and reception between terminal devices |
KR100646351B1 (en) * | 2004-10-08 | 2006-11-23 | 에스케이 텔레콤주식회사 | Method of providing a long message service for multimedia and image generation method therefor |
US8280418B2 (en) | 2007-06-28 | 2012-10-02 | Kt Corporation | System for supporting video message service and method thereof |
KR100908130B1 (en) | 2007-10-15 | 2009-07-16 | 주식회사 케이티프리텔 | System and method for multimedia message transmission using video call |
-
2003
- 2003-04-18 KR KR20030024770A patent/KR100513200B1/en not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
KR20040090807A (en) | 2004-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100632007B1 (en) | How to provide multimedia ringback tone replacement sound | |
EP2012514B1 (en) | A device and system for realizing the multimedia ring back tone service and a method thereof | |
US20110103570A1 (en) | Method, system and relevant apparatuses for selecting multimedia ring back tone | |
US8229406B2 (en) | Method for providing a receiver's terminal with multimedia contents before a call is connected | |
US20040180689A1 (en) | Systems and methods for establishing communication between a first wireless terminal and a second wireless terminal differing in respect to at least one feature | |
KR100513200B1 (en) | Method and system for multimedia massaging service of mobile communication network | |
CN101179829A (en) | Method, and terminal for notifying called connection state to calling terminal | |
US20080002020A1 (en) | Apparatus and method for connecting a video call in a mobile communication system | |
US7433681B2 (en) | Method and device arrangement for using a text message to control multimedia data to be transmitted, and a multimedia server used in the method | |
KR100807376B1 (en) | Method and apparatus for providing MO / MT service using voice short message or video message | |
KR100529767B1 (en) | Mms system for identifying the message through the mm3 i/f and method thereof | |
KR100738416B1 (en) | Server, system and method for providing a multimedia ringback tone service to a mobile communication terminal using a mobile communication network | |
KR100860144B1 (en) | Video Blog Service System and Method Using Mobile Packet Network | |
KR100811700B1 (en) | Mobile communication terminal / system capable of video blog service during voice call and its execution method | |
KR100561669B1 (en) | Alternative video data provision service system and method in video telephone network | |
KR101105815B1 (en) | Method and system for providing calling party terminal related information to called party terminal by interworking between communication networks | |
KR101264301B1 (en) | Multimedia contents service providing system and method for the same | |
KR100712681B1 (en) | Multimedia data service method and system for performing same | |
KR100757010B1 (en) | Method and device for providing outgoing information display service | |
KR100629143B1 (en) | Marketing information service method through wireless communication network | |
KR20040016727A (en) | System for service of voice telephone call and voice messenger using mobile communication data network and method | |
KR100685513B1 (en) | Mobile communication system and method of providing call connection service | |
KR100553541B1 (en) | Method and system for providing a service that can send a text message with a call request | |
KR100538552B1 (en) | Terminal contents information display method by using termination control system in WCDMA | |
KR100862678B1 (en) | Method and system for providing video message service in dual mode communication network |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20030418 |
|
PA0201 | Request for examination | ||
PG1501 | Laying open of application | ||
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20050623 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20050831 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20050901 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration | ||
PR1001 | Payment of annual fee |
Payment date: 20080729 Start annual number: 4 End annual number: 4 |
|
PR1001 | Payment of annual fee |
Payment date: 20090728 Start annual number: 5 End annual number: 5 |
|
PR1001 | Payment of annual fee |
Payment date: 20100802 Start annual number: 6 End annual number: 6 |
|
PR1001 | Payment of annual fee |
Payment date: 20110801 Start annual number: 7 End annual number: 7 |
|
FPAY | Annual fee payment |
Payment date: 20120801 Year of fee payment: 8 |
|
PR1001 | Payment of annual fee |
Payment date: 20120801 Start annual number: 8 End annual number: 8 |
|
FPAY | Annual fee payment |
Payment date: 20130731 Year of fee payment: 9 |
|
PR1001 | Payment of annual fee |
Payment date: 20130731 Start annual number: 9 End annual number: 9 |
|
FPAY | Annual fee payment |
Payment date: 20140731 Year of fee payment: 10 |
|
PR1001 | Payment of annual fee |
Payment date: 20140731 Start annual number: 10 End annual number: 10 |
|
FPAY | Annual fee payment |
Payment date: 20150728 Year of fee payment: 11 |
|
PR1001 | Payment of annual fee |
Payment date: 20150728 Start annual number: 11 End annual number: 11 |
|
FPAY | Annual fee payment |
Payment date: 20160801 Year of fee payment: 12 |
|
PR1001 | Payment of annual fee |
Payment date: 20160801 Start annual number: 12 End annual number: 12 |
|
FPAY | Annual fee payment |
Payment date: 20170802 Year of fee payment: 13 |
|
PR1001 | Payment of annual fee |
Payment date: 20170802 Start annual number: 13 End annual number: 13 |
|
LAPS | Lapse due to unpaid annual fee | ||
PC1903 | Unpaid annual fee |
Termination category: Default of registration fee Termination date: 20190611 |