JP2017175429A - 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 - Google Patents
映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 Download PDFInfo
- Publication number
- JP2017175429A JP2017175429A JP2016060414A JP2016060414A JP2017175429A JP 2017175429 A JP2017175429 A JP 2017175429A JP 2016060414 A JP2016060414 A JP 2016060414A JP 2016060414 A JP2016060414 A JP 2016060414A JP 2017175429 A JP2017175429 A JP 2017175429A
- Authority
- JP
- Japan
- Prior art keywords
- video
- unit
- switching
- encoding
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 18
- 238000000034 method Methods 0.000 title claims description 18
- 230000006866 deterioration Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 238000013139 quantization Methods 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/268—Signal distribution or switching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/142—Detection of scene cut or scene change
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/162—User input
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/917—Television signal processing therefor for bandwidth reduction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Studio Devices (AREA)
Abstract
【解決手段】少なくとも2つの映像信号入力部を有する映像切替部と符号化装置とを備えた映像切替装置であって、映像切替部は、外部から入力される制御信号に基づいてプレ制御信号を出力する第1の制御検知部と、制御信号に基づいて垂直帰線消去期間にカメラ映像信号を切替えるカメラ切替指示信号を出力する第2の制御検知部と、2つの映像信号を切替えるカメラ映像切替部を有する。符号化装置は、映像信号を符号化する符号化部と、プレ制御信号により符号化部の発生符号量を低減させる制御部を有することを特徴とする。
【選択図】図1
Description
図3は従来の映像切替装置を説明するためのブロック図である。
図4は図3の動作を説明するためのタイミングチャートである。
図3において、映像切替装置300は、映像切替部310と符号化装置320で構成されている。
映像切替部310は、制御検知部(V−BL、Vertical Blanking対応)113とカメラ映像切替部112で構成され、映像信号VID1(Video1),VID2(Video2)を入力する2つの入力端子と、映像信号SI−VID(Selected-Video)を出力する出力端子を有している。
制御検知部(V−BL対応)113は、外部から制御信号(シリアル)SW−Cが入力されると、V−BL(Vertical Blanking、垂直帰線消去期間)に映像信号を切替えるためのカメラ切替指示信号SW−VBLをカメラ映像切替部112に出力する。
カメラ映像切替部112は、カメラ切替指示信号SW−VBLに基づいてVID1またはVID2の映像信号を出力する。カメラ映像切替部112は、例えば、図4に示すようにカメラ切替指示信号SW−VBLが低レベルの場合にはVID1を出力し、カメラ切替指示信号SW−VBLが高レベルの場合にはVID2を出力する。
なお、映像信号VID1,VID2は、例えば、カメラ101,102等から出力される。
制御部321は、ビットレート制御信号とSUMを入力し、comp制御信号とI/P0制御信号を出力する。
また、制御部321から出力するI/P0は、画面上部からフレーム毎に対象範囲を下段にズラしながら変化する信号である。
符号化部130は、入力された映像信号SI−VIDをI処理部131で圧縮データI−CDを生成し、P処理部132で圧縮データP−CDを生成し、選択部133で圧縮データI−CDまたはP−CDを選択し、選択したデータS−CDをバッファメモリ部134に出力し、バッファメモリ部134から圧縮データを出力する。なお、復号部135はS−CDを復号し、復号した映像信号V−DEMをP処理部132に出力する。
I処理部131は、変換部801、量子化部802、ハフマン符号部803で構成され、入力された映像信号SI−VIDを変換部801で例えばDCT(Discrete Cosine Transform)変換し、量子化部802とハフマン符号部803で圧縮データI−CDを作成して出力する。
P処理部132は、差分部904、変換部801、量子化部802、ハフマン符号部803で構成され、差分部904で入力された現フレームの映像信号SI−VIDと前フレームの映像信号V−DEMとの差分をとり、差分の映像信号を変換部801で例えばDCT(Discrete Cosine Transform)変換し、量子化部802とハフマン符号部803で圧縮データP−CDを作成して出力する。
このような、I処理を映像の一部分に行い、他の部分は、P処理を行う。
なお、通常の映像は、フレーム間での差分は概ね少なく、より少ないデータ量となるよう工夫している。特に静止画であれば、前フレームとほぼ同一な絵柄となるため、差分は0になり、P処理で新たに送るデータ発生は、ほぼ0となる。
図5(A)は量子化を一定にした場合の発生データ量を示している。I処理において、類似画像と異種画像共に発生データ量は大である。また、P処理において、類似画像は発生データ量が小であり、異種画像は発生データ量が大である。
図5(B)はデータ量を一定にした場合の画質を示している。I処理において、類似画像と異種画像共に画質は悪い。また、P処理において、P処理において、類似画像は画質が良あり、異種画像は画質が悪い。
変換部801出力の微小成分を切り捨てた後に復号した場合に、元の映像差分との誤差が増加し、結果として映像の再現性が低下、画質劣化となる。この特性を図5、および図8に示す。
図8において、3フレーム目(c)は、絵柄全体が変更されたため、各P処理は異種画像となり変化が増大、発生データ量も増加傾向となるため、粗い量子化として、データ量を減らす。
また、各P処理にて発生データ量が増加傾向にある過渡期において、I処理への割当て可能データ量も減らす状態となる。そのため、復号される映像は、結果的に画面全体の細部が省略された画質劣化した内容となる。
図1は本発明の一実施例に係る映像切替装置を説明するためのブロック図である。
図1において、映像切替装置100は、映像切替部110と符号化装置120で構成されている。
映像切替部110は、制御検知部(即応)111、制御検知部(V−BL対応)113、カメラ映像切替部112で構成され、映像信号VID1(Video1),VID2(Video2)を入力する2つの入力端子と、映像信号SI−VID(Selected-Video)を出力する出力端子と、プレ制御信号PRE−SWを出力する出力端子を有している。
なお、映像信号VID1,VID2は、例えば、カメラ101,102等から出力される。
カメラ映像切替部112は、カメラ切替指示信号SW−VBLに基づいてVID1またはVID2の映像信号を出力する。カメラ映像切替部112は、例えば、カメラ切替指示信号SW−VBLが低レベルの場合にはVID1を出力し、カメラ切替指示信号SW−VBLが高レベルの場合にはVID2を出力する。
制御部121は、プレ制御信号PRE−SWとビットレート制御信号とSUMを入力し、comp制御信号とI/P1制御信号を出力する。
なお、制御部121は、カメラ切替指示信号SW−cntを入力するようにしてもよい。
SG部140は、符号化装置120および映像切替部110の全体に同期信号を供給するものである。
なお、I処理部131とP処理部132の動作説明は、上述の図6と図7で説明しているため省略する。
また、制御部121から出力するI/P1制御信号は、選択部133への制御信号、I処理による符号か、P処理の符号かを選択する。画面の上部から順番に選択されるように、走査線1280本であれば、1フレーム目は1〜64本の期間、2フレーム目は65本〜128本の期間・・・を選択する。
制御部120は、SUMの量の多少を見ながら、comp制御信号(符号化目標)にて量子化粗さ、すなわち新たな発生データ量をコントロールする。
図2において、映像切替部110は、例えば、時刻アでカメラ映像切替部112から映像SI−VIDとして映像信号VID1を出力している状態である。
時刻イは、映像信号VID1のフレームの開始点を示している。
プレ制御信号PRE−SWは、立上りが制御信号(シリアル)SW−Cの立上りに連動し、立下りがV−BL期間内である。プレ制御信号PRE−SWの高レベル期間は、例えば、符号化目標compを60Mbpsから45Mbpsに低下させる期間である。
なお、プレ制御信号PRE−SWの高レベル期間が、例えば、5msより短い場合にはカメラ切替信号SW−VBLを1フレーム遅らせてもよい。1フレームは、本一実施例では約16msである。
カメラ映像切替部112は、カメラ切替指示信号SW−VBLに基づいてVID1またはVID2の映像信号を出力する。カメラ映像切替部112は、例えば、図2に示すようにカメラ切替指示信号SW−VBLが低レベルの場合にはVID1を出力し、カメラ切替指示信号SW−VBLが高レベルの場合にはVID2を出力する。
バッファ蓄積符号量SUMは徐々に低下し始める。なお、低下量は許容下限(例えば、60%)とする。
制御部121は、時刻エにおいて、符号化目標compを45Mbpsから60Mbpsに戻す。
それに伴い、選択部133から出力する発生符号量S−CDも増加するが、それを貯め込むバッファメモリ部134は、バッファ蓄積符号量SUMが既に少なくなっているため、発生符号量S−CD量を極端に抑える必要は無い。
一時的に60Mbpsを越えた発生であっても、バッファ蓄積符号量SUMは中程度の量子化で済む。
結果として、映像信号VID2の画質の維持が可能となる。
なお、前記制御信号SW−Cはパラレル信号であってもよい。
Claims (4)
- 少なくとも2つの映像信号入力部を有する映像切替部と符号化装置とを備えた映像切替装置であって、
前記映像切替部は、外部から入力される制御信号に基づいてプレ制御信号を出力する第1の制御検知部と、前記制御信号に基づいて垂直帰線消去期間にカメラ映像信号を切替えるカメラ切替指示信号を出力する第2の制御検知部と、2つの映像信号を切替えるカメラ映像切替部を有し、
前記符号化装置は、映像信号を符号化する符号化部と、前記プレ制御信号により前記符号化部の発生符号量を低減させる制御部を有することを特徴とする映像切替装置。 - 請求項1に記載の映像切替装置であって、
前記制御部は、前記プレ制御信号が高レベル期間では前記符号化部の発生符号量を低減させる制御を行うことを特徴とする映像切替装置。 - 少なくとも2つの映像信号を入力するステップと、プレ制御信号により発生符号量を低減させるステップと、垂直帰線消去期間にカメラ映像信号を切替えるステップとを有することを特徴とする映像切替方法。
- 請求項3に記載の映像切替方法であって、
プレ制御信号が高レベル期間では発生符号量を低減させるステップとを有することを特徴とする映像切替方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016060414A JP6168672B1 (ja) | 2016-03-24 | 2016-03-24 | 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 |
KR1020187024925A KR101996775B1 (ko) | 2016-03-24 | 2017-02-02 | 영상 전환 장치를 구비한 부호화 장치 및 영상 전환 검지 방법을 포함하는 부호화 방법 |
US16/084,322 US10587823B2 (en) | 2016-03-24 | 2017-02-02 | Encoding device comprising video switching device, encoding method including video switching detection method |
PCT/JP2017/003754 WO2017163619A1 (ja) | 2016-03-24 | 2017-02-02 | 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016060414A JP6168672B1 (ja) | 2016-03-24 | 2016-03-24 | 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6168672B1 JP6168672B1 (ja) | 2017-07-26 |
JP2017175429A true JP2017175429A (ja) | 2017-09-28 |
Family
ID=59384369
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016060414A Active JP6168672B1 (ja) | 2016-03-24 | 2016-03-24 | 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10587823B2 (ja) |
JP (1) | JP6168672B1 (ja) |
KR (1) | KR101996775B1 (ja) |
WO (1) | WO2017163619A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI733402B (zh) * | 2020-04-08 | 2021-07-11 | 香港商冠捷投資有限公司 | 顯示器及其控制方法 |
CN114520883B (zh) * | 2020-11-19 | 2024-03-15 | 西安诺瓦星云科技股份有限公司 | 视频源切换方法和装置以及视频处理设备 |
WO2022160300A1 (zh) * | 2021-01-29 | 2022-08-04 | 华为技术有限公司 | 一种视频切换方法及相关设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001128165A (ja) * | 1999-10-27 | 2001-05-11 | Nec Corp | 映像信号切替え装置及びその映像信号切替え方式 |
JP2007124580A (ja) * | 2005-10-31 | 2007-05-17 | Fujitsu Ltd | 動画像符号化プログラム、プログラム記憶媒体、および符号化装置。 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04275784A (ja) * | 1991-03-04 | 1992-10-01 | Matsushita Electric Ind Co Ltd | 映像信号切り換え装置 |
US7448063B2 (en) * | 1991-11-25 | 2008-11-04 | Actv, Inc. | Digital interactive system for providing full interactivity with live programming events |
US5267039A (en) * | 1991-12-31 | 1993-11-30 | Elbex Video Ltd. | Method and apparatus for processing, recording and retrieving a plurality of coded video signals |
JPH0865576A (ja) * | 1994-08-19 | 1996-03-08 | Fujitsu General Ltd | カメラ映像切換装置 |
US5870139A (en) * | 1995-08-28 | 1999-02-09 | Ultrak, Inc. | Method and system for video multiplexing |
JP3684525B2 (ja) * | 1998-02-19 | 2005-08-17 | 富士通株式会社 | 多画面合成方法及び多画面合成装置 |
JPH11341354A (ja) * | 1998-05-29 | 1999-12-10 | Matsushita Electric Ind Co Ltd | 映像切換装置とその装置を用いた映像監視システム |
JP2000125284A (ja) * | 1998-10-13 | 2000-04-28 | Funai Electric Co Ltd | 監視カメラシステム |
JP2000125287A (ja) * | 1998-10-20 | 2000-04-28 | Funai Electric Co Ltd | 監視カメラシステム |
JP2001204018A (ja) | 2000-01-18 | 2001-07-27 | Matsushita Electric Ind Co Ltd | 可変ビットレート符号化装置及び符号化方法 |
JP4860958B2 (ja) | 2005-08-04 | 2012-01-25 | 株式会社日立国際電気 | 現用系と予備系を有する映像送出装置 |
US8300056B2 (en) * | 2008-10-13 | 2012-10-30 | Apple Inc. | Seamless display migration |
US20110292292A1 (en) * | 2010-05-25 | 2011-12-01 | Freescale Semiconductor, Inc | Method and apparatus for displaying video data |
-
2016
- 2016-03-24 JP JP2016060414A patent/JP6168672B1/ja active Active
-
2017
- 2017-02-02 KR KR1020187024925A patent/KR101996775B1/ko active IP Right Grant
- 2017-02-02 US US16/084,322 patent/US10587823B2/en active Active
- 2017-02-02 WO PCT/JP2017/003754 patent/WO2017163619A1/ja active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001128165A (ja) * | 1999-10-27 | 2001-05-11 | Nec Corp | 映像信号切替え装置及びその映像信号切替え方式 |
JP2007124580A (ja) * | 2005-10-31 | 2007-05-17 | Fujitsu Ltd | 動画像符号化プログラム、プログラム記憶媒体、および符号化装置。 |
Non-Patent Citations (1)
Title |
---|
石川 恭啓, 武居 裕之, 宮下 敦: "映像切替方法が符号化処理に与える一考察", 映像情報メディア学会技術報告, vol. 40, no. 14, JPN6017009836, 4 March 2016 (2016-03-04), JP, pages 37 - 40, ISSN: 0003538390 * |
Also Published As
Publication number | Publication date |
---|---|
JP6168672B1 (ja) | 2017-07-26 |
WO2017163619A1 (ja) | 2017-09-28 |
US20190082120A1 (en) | 2019-03-14 |
US10587823B2 (en) | 2020-03-10 |
KR20180101607A (ko) | 2018-09-12 |
KR101996775B1 (ko) | 2019-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5893002B2 (ja) | ビデオ符号化におけるレート制御 | |
US20010038669A1 (en) | Precise bit control apparatus with look-ahead for mpeg encoding | |
JPWO2010035505A1 (ja) | 動画像符号化方法および動画像符号化装置 | |
JP6168672B1 (ja) | 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 | |
JP2015171114A (ja) | 動画像符号化装置 | |
US5822006A (en) | Video signal transmission method and apparatus employing variable quantization | |
JP2006054902A (ja) | 画像符号化方法 | |
JP2012010263A (ja) | 符号化装置、撮像装置、符号化伝送システムおよび符号化方法 | |
US8938007B2 (en) | Encoding apparatus, electronic device, imaging apparatus, and imaging system | |
JP6168671B1 (ja) | 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 | |
JP4357560B2 (ja) | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム | |
JP2010213187A (ja) | 映像符号化伝送装置 | |
KR100311222B1 (ko) | 저 지연 영상 통신을 위한 동영상 시간 코드 및 율제어버퍼 레벨 조절 장치 및 그 방법 | |
KR20010075389A (ko) | 부호화 장치, 복호화 장치, 기지국 장치 및 통신 단말 장치와 동화상 신호의 부호화 방법 및 복호화 방법 | |
JP6027158B2 (ja) | 符号化装置を備えた映像切替装置および符号化方法を含む映像切替方法 | |
JP5271219B2 (ja) | 映像信号の符号化装置 | |
JP2006191185A (ja) | 撮像装置 | |
JPH09275564A (ja) | 高精細動画像符号化装置 | |
KR100397133B1 (ko) | 영상 데이터 압축 전송 시스템 및 그 방법 | |
JP2010287922A (ja) | 画像符号化装置 | |
JPH09224251A (ja) | 動画像符号化装置及び動画像復号化装置 | |
JP2005277982A (ja) | 画像圧縮処理装置 | |
JP2014158130A (ja) | 画像符号化装置 | |
JPH05328330A (ja) | フレーム間符号化装置 | |
JP2005072846A (ja) | 動画像符号化装置及び動画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170420 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170612 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170621 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170623 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6168672 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |