JP3540192B2 - Method and apparatus for checking and correcting optical character reading paper recognition result - Google Patents
Method and apparatus for checking and correcting optical character reading paper recognition result Download PDFInfo
- Publication number
- JP3540192B2 JP3540192B2 JP07786899A JP7786899A JP3540192B2 JP 3540192 B2 JP3540192 B2 JP 3540192B2 JP 07786899 A JP07786899 A JP 07786899A JP 7786899 A JP7786899 A JP 7786899A JP 3540192 B2 JP3540192 B2 JP 3540192B2
- Authority
- JP
- Japan
- Prior art keywords
- recognition result
- image
- displaying
- display
- display area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Character Discrimination (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は光学文字読取(以下OCR(Optical Charactor Readerの略)という)用紙認識装置で行うマーク認識結果、文字認識結果および図形領域検出結果の確認と修正を効率良く行うOCR用紙認識結果の確認修正方法およびその方法を実施するための装置に関するものである。
【0002】
【従来の技術】
従来、OCR用紙認識装置におけるマークおよび文字認識結果の確認修正は、マークおよび文字認識結果をディスプレイ画面に表示し、入力したOCR用紙を参照して確認すると共にキーボード入力で修正する方法や、ディスプレイ画面に認識結果とOCR用紙イメージを分割表示して画面を参照しながら確認すると共にキーボード入力で修正を行う方法で行っていた。
【0003】
このため、OCR用紙を参照する方法では、OCR用紙中の文字位置とディスプレイ画面の認識結果の位置を目線が行き来するため効率が悪く、かつ多量のOCR用紙の扱いが煩雑であった。また、ディスプレイ画面にOCR用紙認識結果とOCR用紙イメージを分割表示する方法は、OCR用紙を必要としないため簡便ではあるが、ディスプレイの分割画面にOCR用紙のイメージの全部を表示すると、小さなOCR用紙は良いがA4判サイズ等のOCR用紙は文字イメージの判読が困難であるばかりでなく、文字認識結果と文字イメージの対応も困難であった。このため、OCR用紙イメージを拡大表示する必要があるが、そうすると頻繁に画面のスクロールが必要となる。
【0004】
以上のように、OCR用紙の認識結果の確認修正業務は煩雑で時間がかかるばかりでなく、確認修正を行うオペレータに負荷がかかるという問題があった。
【0005】
【発明が解決しようとする課題】
本発明は、OCR用紙の認識結果とOCR用紙イメージのうち拡大された該当イメージをディスプレイ画面に連動させて同時に表示すると共に、確認又は修正するマーク・文字・図形のイメージ及びフィールドを明確にすることにより上記問題を解決し、OCR用紙の認識結果の確認修正業務を効率化しようとするものである。
【0006】
【課題を解決するための手段】
このような問題を解決するために、本発明によるOCR用紙認識結果の確認修正方法は、OCR用紙の認識結果をディスプレイ画面の認識結果表示領域に表示すると共に、OCR用紙イメージのうち一の認識結果に対応する該当イメージ部分をディスプレイ画面のイメージ表示領域に表示する工程と、認識結果表示領域のいずれかの認識結果を指示すると、OCR用紙イメージのうち指示された認識結果に対応する該当イメージ部分をイメージ表示領域の中心または規定の位置に拡大して表示する工程と、指示された認識結果に対応する該当イメージ部分に確認マークを付加して表示する工程を有する。また、認識結果を認識結果表示領域に表示すると共に、認識結果の論理誤りについてもディスプレイ画面の論理誤り表示領域に表示する工程と、指示された論理誤り表示に対応する該当イメージ部分を表示する工程と、これに確認マークを付加して表示する工程を有する。
【0007】
また、好ましくは、認識結果を認識結果表示領域に表示すると共に、図形領域検出結果についてもディスプレイ画面の図形イメージ表示領域に表示する工程と、指示された図形領域検出結果を表示する工程と、これに確認マークを付加して表示する工程を有する。
【0008】
また、本発明によるOCR用紙認識結果の確認修正装置は、OCR用紙の認識結果をディスプレイ画面の認識結果表示領域に表示すると共に、OCR用紙イメージのうち一の認識結果に対応する該当イメージ部分をディスプレイ画面のイメージ表示領域に表示する手段と、認識結果表示領域のいずれかの認識結果を指示すると、OCR用紙イメージのうち指示された認識結果に対応する該当イメージ部分をイメージ表示領域の中心または規定の位置に拡大して表示する手段と、指示された認識結果に対応する該当イメージ部分に確認マークを付加して表示する手段を有する。また、認識結果を認識結果表示領域に表示すると共に、認識結果の論理誤りについてもディスプレイ画面の論理誤り表示領域に表示する手段と、指示された論理誤り表示に対応する該当イメージ部分を表示する手段と、これに確認マークを付加して表示する手段を有する。
【0009】
また、好ましくは、認識結果を認識結果表示領域に表示すると共に、図形領域検出結果についてもディスプレイ画面の図形イメージ表示領域に表示する手段と、指示された図形領域検出結果を表示する手段と、これに確認マークを付加して表示する手段を有する。
【0010】
請求項1、3に記載の発明は、OCR用紙の認識結果とOCR用紙イメージとを同一ディスプレイ画面内に表示し、ディスプレイ画面の文字またはマーク認識結果を指示するとOCR用紙イメージの該当イメージ部分を所定の表示領域の中心または規定の位置に拡大して表示すると共に確認マークを付加することで確認修正するマーク・文字イメージを明確にする。また、OCR用紙の認識結果とフィールド毎のマーク・文字認識結果の論理的な誤りとを同一ディスプレイ画面内に表示し、論理誤り表示を指示すると、指示されたOCR用紙イメージの該当イメージ部分を所定の表示領域の中心または規定の位置に拡大して表示すると共に確認マークを付加することで確認修正するフィールドを明確にする。さらに、請求項2、4に記載の発明は、OCR用紙の認識結果と図形イメージとを同一ディスプレイ画面内に表示し、図形領域確認指示を行うとOCR用紙イメージのうち指示された図形イメージ(図形領域確認結果)を所定の表示領域の中心または規定の位置に表示すると共に確認マークを付加することで確認する図形イメージ及びフィールドを明確にする。このように本発明は、同一画面内での操作により、確認するマーク・文字・図形のイメージ及びフィールドを明確にできるため、確認修正業務を大幅に効率化できる点が従来技術と大きく異なる。
【0011】
請求項において、認識結果とは入力されたOCR用紙に記載された各マーク・文字に関してOCR用紙認識装置が認識したマーク・文字のことをいい、OCR用紙イメージとは入力されたOCR用紙に記載された情報に関してOCR用紙認識装置が認識したイメージ情報のことをいい、図形領域検出結果とは入力されたOCR用紙の各図形領域に記載された図形に関してOCR用紙認識装置が認識したイメージ情報のことをいう。また、認識結果に対応する該当イメージ部分とは、OCR用紙イメージのうち認識結果の元になった各マーク・文字に関するイメージ情報のことをいい、論理誤り表示に対応する該当イメージ部分とは、OCR用紙イメージのうち論理誤りが検出された認識結果の元になった各マーク・文字に関するイメージ情報のこと或いは論理誤りが検出されたフィールドに属するマーク・文字群に関するイメージ情報のことをいう。また、確認マークとは、確認・修正すべき該当イメージ部分を目立たせるためのマークのことをいう。また、請求項1及び2の工程において、各工程が別々に行われても良く、同時に行われても良い。請求項3及び4の手段について、各手段が独立でも良く、一部又は全体を共有し合っても良い。また、請求項3及び4に記載のOCR用紙認識結果の確認修正装置は、OCR用紙認識装置と独立でも良く、一部又は全体を共有し合っても良い。
【0012】
【発明の実施の形態】
図1に本発明にかかわるOCR用紙認識結果の確認修正方法の実施例の手順を示す。まず、初期画面として、ディスプレイ6画面の認識結果表示ウィンドW1の表示処理(ステップA1)、論理誤り表示ウインドW2の表示処理(ステップA2)、マーク・文字イメージ表示ウインドW3の表示処理(ステップA3)、図形イメージ表示ウインドW4の表示処理(ステップA4)を行う。認識結果表示領域である認識結果表示ウィンドW1の表示処理では、OCR用紙の認識結果が表示される。論理誤り表示領域である論理誤り表示ウインドW2の表示処理では認識結果の論理誤りがフィールド毎に表示される。イメージ表示領域であるマーク・文字イメージ表示ウインドW3の表示処理では、カーソルが存在する認識結果に対応する該当イメージ部分がマーク・文字イメージ表示ウインドW3の中心または規定の位置に拡大して表示される。図形イメージ表示領域である図形イメージ表示ウインドW4の表示処理では指示された図形領域検出結果が表示される。最初、ウインドW3、W4にはOCR用紙の先頭にある一の認識結果に対応する該当イメージや一の図形領域検出結果が表示されるが、論理誤りが無い場合は論理誤り表示ウインドW2には何も表示されない。
【0013】
次に、認識結果表示ウインドW1または論理誤り表示ウインドW2の論理誤りメッセージで確認・修正を行う(ステップA5)。認識結果表示ウィンドW1でいずれかの認識結果を指示すると、指示された認識結果に対応する該当イメージ部分がマーク・文字イメージ表示ウインドW3の中心または規定の位置に拡大して表示される。また、論理誤り表示ウインドW2でいずれかの論理誤り表示を指示すると、指示された論理誤り表示に対応する該当イメージ部分がマーク・文字イメージ表示ウインドW3のイメージ表示領域の中心または規定の位置に拡大して表示される。さらに、これらの該当イメージ部分には確認マークが付加されて表示される。
【0014】
認識結果の修正が行われた場合(ステップA6)は、論理誤り表示ウインドW2の論理誤り検出ボタンで論理チェックを行い(ステップA7)、論理誤り表示ウインドW2に修正箇所の論理誤りメッセージがなくなることを確認する。この確認・修正作業を全部の認識結果に対して行う(ステップA8)。次に、認識結果表示ウインドW1の図形領域確認指示用領域である図形ボタンをマウスでクリックしながら図形イメージ表示ウインドW4で記入図形(署名、捺印)を確認する(ステップA9)。図形領域確認指示を行うと、指示された図形領域検出結果が図形イメージ表示ウインドW4の中心または規定の位置に表示される。また、図形領域検出結果には確認マークが付加されて表示される。これを全部の図形イメージについて確認する(ステップA10)。このような手順でOCR用紙イメージの確認修正が可能となる。なお、本発明の手順ではマーク・文字の認識結果の確認修正を行ってから記入署名および捺印の図形イメージの確認を行ったが、順序は問わない。
【0015】
図2は本発明にかかわる方法を実施するための装置の実施例の構成を示すブロック図である。1はOCR用紙イメージを格納するイメージ格納部、2はOCR用紙認識結果を格納する認識結果格納部、3は定義情報格納部4に格納された論理チェック情報(フィールド定義に対する桁数、数字の範囲、棄却文字等の情報)にもとづきOCR用紙認識結果の論理チェックを行う論理誤り検出部、4はOCR用紙の認識条件等(フィールド定義とフィールドに関する認識位置と字種、論理チェック情報等)を記述した定義情報を格納する定義情報格納部、5はシステム全体を制御する全体制御部、6はOCR用紙認識結果およびOCR用紙イメージ等を表示するディスプレイ、7はディスプレイ6画面に表示したOCR用紙認識結果の修正データを入力するキーボード、8はディスプレイ6画面に表示したOCR用紙認識結果等を指示するマウスである。
【0016】
図3はOCR用紙イメージの例を示す図で、10はOCR用紙イメージ、11、12はマークまたは文字行の左右を示す制御マーク、13はマークを記入する領域を示すマーク記入枠、14は文字を記入する領域を示す文字記入枠、15、16は図形を記入する領域を示す図形記入枠、I1は顧客IDの先頭の記入文字、I2は即納を示す記入マーク、I3は商品名で訂正の対象となる訂正対象文字、I4は図形記入枠に記入された署名のことをいう記入署名、I5は図形記入枠に押された捺印である。ただし、制御マーク11、12、マーク記入枠13、文字記入枠14、図形記入枠15、16はOCR用紙の認識が可能な規定の寸法で配置され、制御マーク11、12、記入文字I1、記入マークI2、訂正対象文字I3、記入署名I4、捺印I5は黒またはファクシミリのセンサで感知できる色で、マーク記入枠13、文字記入枠14、図形記入枠15、16はドロップアウトカラー(ファクシミリのセンサで感知されない色)で記載されたものとする。本実施例でのフィールドは、「顧客ID」、「商品コード」、「即納」、「商品名」、「署名」、「印」である。
【0017】
図4は本発明でディスプレイに表示される初期画面を示す図で、W1はOCR用紙イメージの認識結果を表示するための認識結果表示ウインド、R1は記入文字I1の認識結果、R2は記入マークI2の認識結果、R3は訂正対象文字I3の認識結果、B1は次の図形記入枠に記載された情報の表示を指示する図形表示ボタン(図形領域確認指示用領域に該当)、W2はOCR用紙イメージの認識結果R1に対してフィールド毎の論理誤りを表示するための論理誤り表示ウインド、S1は論理誤り表示ウインドのメッセージをスクロールするスクロールバー、E1は顧客IDの論理誤りメッセージ、E2は商品名の論理誤りメッセージ、B2は論理チェックを指示する論理誤り検出ボタン、W3は認識結果表示ウインドW1中のマーク・文字の認識結果に対応するOCR用紙イメージ10中のマーク・文字イメージを表示するマーク・文字イメージ表示ウインド、S2はマーク・文字イメージ表示ウインドW3に表示されたイメージをスクロールするスクロールバー、B3はマーク・文字イメージ表示ウインドW3の表示倍率を指定可能とする表示倍率指定ボックス、F1は認識結果表示ウインドW1中のマウス8(又はカーソル)で指示されたマーク・文字の認識結果、または論理誤り表示ウインドW2中のマウス8(又はカーソル)で指示された論理誤りのあるマーク・文字の認識結果に対応する該当イメージを目立たせる確認マークであるマーク・文字確認修正位置マークで、文字記入枠14を囲む太枠で表示されている。W4はOCR用紙イメージ10の図形記入枠I5又はI6に記入された図形のイメージ(図形領域検出結果に該当)を表示する図形イメージ表示ウインド、S3は図形イメージ表示ウインドに表示されたイメージをスクロールするスクロールバー、F2は確認対象となる図形記入枠に記入された図形に対応する図形領域検出結果を目立たせる確認マークである図形確認位置マークであり、図形記入枠15、16を囲む太枠で表示されている。
【0018】
図5,図6は本発明でディスプレイ6に表示されたOCR認識結果の確認と修正方法を示す図で、図5は修正前のディスプレイ画面を示す図、図6は一部修正した後のディスプレイ画面を示す図である。I1〜I5、W1〜W4、R1〜R3、B1〜B3、S1〜S3、E1〜E2、F1〜F2は、図4と同様である。W5は文字修正を行った後の認識結果表示ウインド、W6は論理チェックを行った後の論理誤り表示ウインド、W7は訂正対象文字I3を表示したマーク・文字イメージ表示ウインド、W8は捺印I5の図形イメージ(図形領域検出結果)を表示した図形イメージ表示ウインド、R3’は認識結果R3の修正文字、P1は訂正対象文字I3を指示するマウス8のクリック位置、P2は論理誤りメッセージE2を指示するマウス8のクリック位置、P3は図形ボタンを指示するマウス8のクリック位置である。
【0019】
次に、図2の動作を図3から図6を用いて説明する。動作の手順は図1に示される。
【0020】
[ステップA1]まず、全体制御部5は認識結果格納部2よりマークと文字の認識結果を読み出す。そして、あらかじめ用意された認識結果表示ウィンドウW1を用いてディスプレイ6の左画面上部にマーク・文字認識結果を表示する。
【0021】
[ステップA2]次に、全体制御部5は論理誤り検出部3に対して論理チェックを指示する。論理チェックの指示を受けた論理誤り検出部3は定義情報格納部4に格納された各フィールド毎の論理チェック情報を読み出し、この論理チェック情報にもとづき認識結果格納部2に格納されたマークと文字の論理チェックをおこなう。本実施例では顧客IDは5桁の数字でないこと、商品名に認識不能文字があることを検出する。そして、論理誤り検出部3は論理チェック結果を認識結果格納部2に格納するとともに論理チェック終了を全体制御部5に通知する。論理チェック終了通知を受けた全体制御部5は認識結果格納部2から論理チェック結果を読み出し、あらかじめ用意してある論理誤り表示ウインドW2用いて、ディスプレイ6の左画面下部に論理誤り結果を表示する。本実施例では、「顧客IDは5桁の数字です」と「商品名に誤りがあります」を表示している。
【0022】
[ステップA3]次に、全体制御部5は認識結果格納部2から認識結果の先頭に対応する文字記入枠13の座標および大きさを読み出し、イメージ格納部1に格納されたOCR用紙イメージ10から先頭の記入文字I1の周辺イメージも含めて読み出す。そして、あらかじめ用意されたマーク・文字イメージ表示ウィンドウW3を用いて、ディスプレイ6の右画面上部に記入文字I1の周辺イメージも含めて拡大して表示する。このとき、全体制御部5は記入文字I1をマーク・文字イメージ表示ウインドW3の中心に配置し、さらに記入文字I1のイメージにマーク・文字確認修正位置マークF1を重ねて表示する。
【0023】
[ステップA4]次に、全体制御部5は認識結果格納部2から認識結果の先頭にある図形記入枠15のイメージ座標および大きさを読み出し、イメージ格納部1に格納されたOCR用紙イメージ10から記入署名I5の周辺イメージも含めてを読み出す。そして、あらかじめ用意された図形イメージ表示ウィンドウW4を用いて、ディスプレイ6の右画面下部に記入署名I5の周辺を含めたメージを表示する。このとき、全体制御部5は記入署名I4を図形イメージ表示ウインドW4の中心に配置し、記入署名I4のイメージに図形確認位置マークF2を重ねて表示する。
【0024】
[ステップA5]このような手順で図4に示すディスプレイ6の初期画面が表示できる。ただし、このときディスプレイ6のカーソル位置は認識結果表示ウインドW1の先頭の認識結果にある。この状態からオペレータはキーボド7のカーソルキー又はマウス8を操作することで認識結果表示ウインドW1の認識結果を順次指示すると、対応した記入マークまたは記入文字のイメージがマーク・文字表示ウインドW3に拡大して表示され、確認作業を行うことが出来る。また、マーク・文字イメージ表示ウインドW3および図形イメージ表示ウインドW4に表示されるイメージの倍率はデフォルトを100%としてあり、必要に応じて表示倍率指定ボックスB3をマウス8でクリックし、キーボード7から数値を入力することで変えることが出来る。
【0025】
[ステップA6]このようにしてマーク・文字の認識結果を確認することが出来る。そして、キーボード7のカーソルが存在する認識結果表示ウインドW1のマークまたは文字の認識結果はその時点でキーボード7から修正を行うことが出来る。具体的に訂正対象文字I3を修正する方法は、キーボード7のカーソルキー又はマウス8で認識結果表示ウインドW1の認識結果のうち訂正対象文字I3の位置(マウスクリック位置P1)を指定し、または論理誤り表示ウインドW2の論理誤りメッセージE1またはE2の位置(マウスクリック位置P2)を指示してクリックする。すると、全体制御部5はディスプレイ6のマウスクリック位置P1またはP2のディスプレイ8座標から指示された認識結果に対応するOCR用紙イメージ10に対する座標、大きさを認識結果格納部2から読み出し、この値をもとにイメージ格納部から訂正対象文字I3を含む周辺イメージを読み出しディスプレイ6画面のマーク・文字イメージ表示ウインドW7に拡大して表示する。このとき、全体制御部5は訂正対象文字I3をマーク・文字イメージ表示ウインドW7の中心に配置し、訂正対象文字I3のイメージにマーク・文字確認修正位置マークF1を重ねて表示する。そして、認識結果表示ウインドW1の認識結果R3へキーボード7からの修正文字R3’(文字「コ」)を入力する。すると、キーボード7から入力された修正文字R3’(文字「コ」)は全体制御部5に読み取られ、認識結果格納部2の該当する位置の認識結果を書き換える。それとともにディスプレイ6画面の認識結果表示ウインドW5に修正文字R3’(文字「コ」)を改めて表示する。
【0026】
[ステップA7]そして、論理誤り表示ウインドW2の論理誤り検出ボタンB2をマウス8で指示し、クリックする。すると、ディスプレイ6の初期画面表示で説明した方法と同様に全体制御部5は論理誤り検出部3に指示を出し、論理チェック結果を認識結果格納部2へ格納し、論理チェック終了通知を全体制御部5へ通知する。論理チェック終了通知を受けた全体制御部5は認識結果格納部3から論理チェック情報を読み出し、ディスプレイ6左画面下部の論理誤り表示ウィンドW6を改めて表示する。この結果、論理誤り表示画面W6から商品名の論理誤りメッセージE2が消えていることがわかる。
【0027】
[ステップA8]同様の手順で認識結果表示ウインドW1の顧客IDを5桁にし、論理誤り検出ボタンB2をマウス8でクリックすれば、顧客IDの論理誤りメッセージE1を消すことが出来る。順次、それぞれのマーク、文字、論理誤りに対して修正と論理チェックを行うことにより、確認修正が終了する。
【0028】
[ステップA9]また、図形記入枠15,16の記入図形を確認する場合は、認識結果表示ウインドW1にある図形ボタンB1(図形領域確認指示用領域)の位置(マウスクリック位置P3)をマウス8で指示し、クリックすることで次の記入図形(捺印I5のイメージ)を図形イメージ表示ウインドW8に表示し、確認することが出来る。ただし、全体制御部5は捺印I5のイメージを図形イメージ表示ウインドW8の中心に配置し、図形位置確認マークF2を重ねて表示する。このようにして、訂正対象文字I3の確認修正、捺印I5の図形イメージの確認を行ったディスプレイ画面を図6に示す。
【0029】
[ステップA10]順次、それぞれの図形イメージに対して修正と論理チェックを行うことにより、確認修正が終了する。
【0030】
なお、本実施例ではマーク・文字イメージ表示ウインドW3、W7、図形イメージ表示ウィンドW4、W8のスクロールは行わなかったが、必要に応じてスクロールバーS2、S3をマウス8でクリックすることで、隣接した記入マーク、記入文字、図形および説明文等を見ることが出来る。また、論理誤り表示ウインドW2、W6も論理誤りの情報が多くなればスクロールバーS1をマウス8でクリックしながら順次表示させる必要が生じる。さらに、マーク・文字イメージ表示ウインドW3、W7、および図形イメージ表示ウィンドW4、W8に表示されるイメージの表示倍率が適切でない場合には(本実施例では表示倍率が100%であるため、OCR用紙イメージ10から読み出した表示イメージはサイズ変換をしていない)、表示倍率指定ボックスB3をマウス8でクリックし、数値をキーボード7から入力する。すると、全体制御部5がキーボード7からの数値を解釈して、表示するイメージサイズを計算し、読み出し表示する。なお、この表示倍率にしたがい確認マークであるマーク・文字修正確認位置マークF1または図形確認位置マークF2の大きさ、線幅を算出し表示する。また、論理チェックの方法として字種の調査、数字の範囲を含めることも出来るし、商品名として商品名データベースと照合することも出来る。なお、論理チェックをした結果としてマーク・文字表示ウインドに表示するイメージおよび重畳する確認マークをマーク・文字単位だけでなく、フィールド単位に表示することも出来る。
【0031】
【発明の効果】
本発明のOCR用紙認識結果の確認修正方法および装置によれば、以上説明したように、マークおよび文字認識結果と拡大したOCR用紙イメージを同一ディスプレイ装置の画面に表示し、ディスプレイ画面の文字またはマーク認識結果を指示するとOCR用紙イメージの該当イメージ部分を連動させて表示領域の中心または規定の位置に拡大して表示すると共に確認マークを付加することにより、確認修正するマーク・文字イメージを明確にできるので、オペレータに負担をかけず、OCR用紙認識結果の確認修正作業を効率良く行うことが可能になる利点がある。また、マークおよび文字認識結果とフィールド毎のマーク・文字認識結果の論理的な誤りを同一画面に表示し、論理誤り表示を指示すると、指示されたOCR用紙イメージの該当イメージ部分を連動させ、表示領域の中心または規定の位置に拡大して表示すると共に確認マークを付加することで、確認修正するフィールドを明確にするため、マークおよび文字認識の誤りだけでなく、フィールドの意味を確認する作業も軽減できる利点がある。さらに、マークおよび文字認識結果と図形イメージを同一画面に表示し、図形領域確認指示を行うと指示された図形領域検出結果を表示領域の中心または規定の位置に表示すると共に確認マークを付加することで確認する図形イメージ及びフィールドを明確にできるため、署名等が記載された図形領域の確認等も容易にできる利点がある。以上により本発明によれば同一画面上でマーク・文字・図形のイメージおよびフィールドを明確にでき、OCR用紙の認識結果の確認修正業務を効率化できる利点がある。
【図面の簡単な説明】
【図1】本発明にかかわるOCR用紙認識結果の確認修正方法の実施例の手順を示す図である。
【図2】本発明にかかわる方法を実施するための装置の実施例の構成を示すブロック図である。
【図3】本発明におけるOCR用紙イメージの例を示す図である。
【図4】本発明におけるディスプレイに表示される初期画面を示す図である。
【図5】本発明における修正前のディスプレイ画面を示す図である。
【図6】本発明における一部修正した後のディスプレイ画面を示す図である。
【符号の説明】
1…イメージ格納部
2…認識結果格納部
3…論理誤り検出部
4…定義情報格納部
5…全体制御部
6…ディスプレイ
7…キーボード
8…マウス
10…OCR用紙イメージ
11、12…制御マーク
13…マーク記入枠
14…文字記入枠
15、16…図形記入枠
A1〜A10…OCR用紙認識結果の確認修正方法のステップ
I1…先頭の記入文字
I2…記入マーク
I3…訂正対象文字
I4…記入署名
I5…捺印
W1、W5…認識結果表示ウインド
W2、W6…論理誤り表示ウインド
W3、W7…マーク・文字イメージ表示ウインド
W4、W8…図形イメージ表示ウインド
R1…先頭の記入文字I1の認識結果
R2…記入マークI2の認識結果
R3…訂正文字I3の認識結果
R3’…認識結果R3の修正文字
B1…図形表示ボタン
B2…論理誤り検出ボタン
B3…表示倍率指定ボックス
E1…顧客IDの論理誤りメッセージ
E2…商品名の論理誤りメッセージ
F1…マーク・文字確認修正位置マーク
F2…図形確認位置マーク
S1、S2、S3…スクロールバー
P1、P2、P3…マウスのクリック位置[0001]
TECHNICAL FIELD OF THE INVENTION
SUMMARY OF THE INVENTION The present invention relates to an OCR paper recognition result confirmation and correction method that efficiently confirms and corrects a mark recognition result, a character recognition result, and a graphic area detection result performed by an optical character reading (hereinafter, abbreviated as OCR (Optical Character Reader)) paper recognition device. The invention relates to a method and an apparatus for implementing the method.
[0002]
[Prior art]
Conventionally, confirmation and correction of mark and character recognition results in an OCR paper recognition device are performed by displaying the mark and character recognition results on a display screen, referring to the input OCR paper for confirmation and correcting by keyboard input, and a display screen. In this method, the recognition result and the OCR paper image are displayed in a divided manner, checked while referring to the screen, and corrected by keyboard input.
[0003]
For this reason, in the method of referring to the OCR paper, the line of sight changes between the character position in the OCR paper and the position of the recognition result on the display screen, so that the efficiency is low and the handling of a large amount of OCR paper is complicated. The method of displaying the OCR paper recognition result and the OCR paper image separately on the display screen is simple because the OCR paper is not required. However, when the entire image of the OCR paper is displayed on the split screen of the display, a small OCR paper is displayed. Although OCR paper of A4 size or the like was good, not only was it difficult to read the character image, but also the correspondence between the character recognition result and the character image was difficult. For this reason, it is necessary to enlarge and display the OCR paper image, but this requires frequent scrolling of the screen.
[0004]
As described above, there is a problem that the work of confirming and correcting the recognition result of the OCR paper is not only complicated and time-consuming, but also burdens the operator who performs the confirmation and correction.
[0005]
[Problems to be solved by the invention]
The present invention is to simultaneously display the recognition result of the OCR paper and the enlarged image of the OCR paper image in conjunction with the display screen, and to clarify the image and field of the mark / character / graphic to be confirmed or corrected. Thus, the above problem is solved, and the task of confirming and correcting the recognition result of the OCR paper is made more efficient.
[0006]
[Means for Solving the Problems]
In order to solve such a problem, a method for confirming and correcting an OCR paper recognition result according to the present invention displays an OCR paper recognition result in a recognition result display area of a display screen, and also displays one of the OCR paper image recognition results. Displaying the corresponding image portion corresponding to the above in the image display area of the display screen, and instructing any of the recognition results in the recognition result display region, the corresponding image portion corresponding to the specified recognition result in the OCR paper image is displayed. A step of enlarging and displaying the image at the center or a predetermined position of the image display area; and a step of adding a confirmation mark to a corresponding image portion corresponding to the specified recognition result and displaying the image.. A step of displaying the recognition result in the recognition result display area and displaying a logical error of the recognition result in the logical error display area of the display screen; and a step of displaying a corresponding image portion corresponding to the designated logical error display And adding a confirmation mark to the display.
[0007]
Preferably, the recognition result is displayed in the recognition result display area., FigureThe shape area detection resultAlso deDisplay screenIllustrationThe process of displaying in the shape image display area and,fingerDisplaying the indicated graphic area detection result;ToHas a process to add and display a confirmation markYou.
[0008]
The OCR paper recognition result confirmation and correction device according to the present invention displays the OCR paper recognition result in a recognition result display area of a display screen and displays a corresponding image portion corresponding to one of the OCR paper images. Means for displaying the image in the image display area of the screen, and specifying one of the recognition results in the recognition result display area, the corresponding image portion corresponding to the specified recognition result in the OCR paper image is displayed at the center of the image display area or in a specified area. Means for enlarging and displaying the position and means for adding and displaying a confirmation mark on a corresponding image portion corresponding to the specified recognition result. Means for displaying the recognition result in the recognition result display area and displaying the logical error of the recognition result in the logical error display area of the display screen, and means for displaying a corresponding image portion corresponding to the designated logical error display And a means for adding and displaying a confirmation mark.
[0009]
Preferably, the recognition result is displayed in the recognition result display area., FigureThe shape area detection resultAlso deDisplay screenIllustrationMeans for displaying in the shape image display area and,fingerMeans for displaying the indicated graphic area detection result;ToHas a means to add and display a confirmation markYou.
[0010]
[0011]
In the claims, the recognition result refers to the mark / character recognized by the OCR paper recognition device for each mark / character described on the input OCR paper, and the OCR paper image is described on the input OCR paper. Refers to the image information recognized by the OCR paper recognition device with respect to the input information, and the graphic region detection result refers to the image information recognized by the OCR paper recognition device with respect to the graphic described in each graphic region of the input OCR paper. Say. The corresponding image portion corresponding to the recognition result refers to image information on each mark / character on which the recognition result is based in the OCR paper image, and the corresponding image portion corresponding to the logical error display is the OCR paper image. It refers to image information on each mark / character on which a logical error has been detected in a paper image or a mark / character group belonging to a field where a logical error has been detected. Further, the confirmation mark is a mark for making a corresponding image portion to be confirmed / corrected stand out. Claim 1And 2In the step, each step may be performed separately or may be performed simultaneously. Claim3 and 4With respect to the means, each means may be independent or a part or the whole may be shared. Claims3 and 4The OCR paper recognition result confirmation and correction device described in (1) may be independent of the OCR paper recognition device, or may be partially or entirely shared.
[0012]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 shows a procedure of an embodiment of a method for confirming and correcting an OCR paper recognition result according to the present invention. First, as an initial screen, a recognition result display window W on the display 6 screen is displayed.1Display processing (step A1), a logical error display window WTwoDisplay processing (step A2), mark / character image display window WThreeDisplay processing (step A3), graphic image display window WFourIs performed (step A4). Recognition result display window W which is a recognition result display area1In the display process, the recognition result of the OCR paper is displayed. Logical error display window W which is a logical error display areaTwoIn the display process, the logical error of the recognition result is displayed for each field. Mark / character image display window W which is the image display areaThreeIn the display processing of, the corresponding image portion corresponding to the recognition result where the cursor is present is marked / character image display window WThreeIs enlarged and displayed at the center or the specified position. Graphic image display window W which is a graphic image display areaFourIn the display process, the designated graphic area detection result is displayed. First, window WThree, WFourDisplays a corresponding image corresponding to one recognition result at the top of the OCR paper and one graphic area detection result. If there is no logical error, a logical error display window W is displayed.TwoDoes not display anything.
[0013]
Next, the recognition result display window W1Or logic error display window WTwoIs confirmed / corrected by the logic error message (step A5). Recognition result display window W1When one of the recognition results is specified by the user, the corresponding image portion corresponding to the specified recognition result is displayed in the mark / character image display window W.ThreeIs enlarged and displayed at the center or the specified position. In addition, the logic error display window WTwoWhen one of the logical error displays is instructed, the corresponding image portion corresponding to the indicated logical error display is displayed in the mark / character image display window W.ThreeIs enlarged and displayed at the center of the image display area or at a predetermined position. Further, a confirmation mark is added to these corresponding image portions and displayed.
[0014]
If the recognition result has been corrected (step A6), the logical error display window WTwo(Step A7), and a logic error display window WTwoConfirm that there is no longer a logical error message at the point of correction. This confirmation / correction work is performed for all recognition results (step A8). Next, the recognition result display window W1The graphic image display window W is displayed while clicking the graphic button, which is the graphic region confirmation instruction area, with the mouse.FourTo confirm the entry figure (signature, seal) (step A9). When the figure area confirmation instruction is issued, the designated figure area detection result is displayed in the figure image display window W.FourIs displayed at the center or the specified position. A confirmation mark is added to the graphic area detection result and displayed. This is confirmed for all graphic images (step A10). With such a procedure, the OCR paper image can be checked and corrected. In the procedure of the present invention, after confirming and correcting the recognition result of the mark / character, the graphic image of the signature and the seal is confirmed, but the order is not limited.
[0015]
FIG. 2 is a block diagram showing a configuration of an embodiment of an apparatus for performing a method according to the present invention. 1 is an image storage unit for storing an OCR paper image, 2 is a recognition result storage unit for storing an OCR paper recognition result, and 3 is logic check information (a number of digits and a range of numbers for a field definition) stored in a definition
[0016]
FIG. 3 is a diagram showing an example of an OCR paper image. 10 is an OCR paper image, 11 and 12 are control marks indicating the left and right of a mark or a character line, 13 is a mark entry frame showing an area where a mark is to be entered, and 14 is a character. , A character entry frame indicating an area where a figure is to be entered, and 15 and 16 are figure entry frames indicating an area where a figure is to be entered.1Is the first letter of the customer ID, ITwoIs an entry mark indicating immediate delivery, IThreeIs the character to be corrected in the product name, IFourIs the signature entered in the figure box,FiveIs the seal stamped on the graphic entry box. However, the control marks 11 and 12, the
[0017]
FIG. 4 is a diagram showing an initial screen displayed on a display according to the present invention.1Is a recognition result display window for displaying the recognition result of the OCR paper image, R1Is the letter I1Recognition result, RTwoIs mark ITwoRecognition result, RThreeIs the character I to be correctedThreeRecognition result, B1Is a graphic display button (corresponding to a graphic area confirmation instruction area) for instructing display of information described in the next graphic entry frame;TwoIs the recognition result R of the OCR paper image1, A logical error display window for displaying a logical error for each field1Is a scroll bar that scrolls through the messages in the logic error display window.1Is the customer ID logic error message, ETwoIs the product name logic error message, BTwoIs a logic error detection button for instructing a logic check, WThreeIs the recognition result display window W1Mark / character image display window for displaying the mark / character image in the OCR paper image 10 corresponding to the recognition result of the mark / character in the inside, STwoIs the mark / character image display window WThreeScroll bar for scrolling the image displayed on BThreeIs the mark / character image display window WThreeDisplay magnification specification box that allows the user to specify the display magnification of F1Is the recognition result display window W1The recognition result of the mark / character indicated by the mouse 8 (or the cursor) in the inside, or the logical error display window WTwoA mark surrounding the character entry frame 14 with a mark / character confirmation / correction position mark which is a confirmation mark for highlighting a corresponding image corresponding to a recognition result of a mark / character having a logic error designated by the mouse 8 (or the cursor) therein. It is displayed as a frame. WFourIs the figure entry frame I of the OCR paper image 10FiveOr I6Graphic image display window for displaying a graphic image (corresponding to a graphic area detection result) written in the box, SThreeIs a scroll bar for scrolling the image displayed in the graphic image display window, FTwoIs a figure confirmation position mark, which is a confirmation mark that makes the figure area detection result corresponding to the figure entered in the figure entry frame to be confirmed stand out, and is displayed as a thick frame surrounding the figure entry frames 15 and 16.
[0018]
5 and 6 are diagrams showing a method of checking and correcting an OCR recognition result displayed on the display 6 according to the present invention. FIG. 5 is a diagram showing a display screen before correction, and FIG. 6 is a display after a partial correction. It is a figure showing a screen. I1~ IFive, W1~ WFour, R1~ RThree, B1~ BThree, S1~ SThree, E1~ ETwo, F1~ FTwoIs similar to FIG. WFiveIs the recognition result display window after character correction, W6Is a logic error display window after logic check, W7Is the character I to be correctedThreeMark / character image display window with W8Is Seal IFiveImage display window displaying the graphic image (graphic area detection result) of RThree’Is the recognition result RThreeModified letter of P1Is the character I to be correctedThreeClick position of
[0019]
Next, the operation of FIG. 2 will be described with reference to FIGS. The procedure of the operation is shown in FIG.
[0020]
[Step A1] First, the
[0021]
[Step A2] Next, the
[0022]
[Step A3] Next, the
[0023]
[Step A4] Next, the
[0024]
[Step A5] By such a procedure, the initial screen of the display 6 shown in FIG. 4 can be displayed. However, at this time, the cursor position on the display 6 is the recognition result display window W1In the recognition result at the beginning. From this state, the operator operates the cursor key of the keyboard 7 or the
[0025]
[Step A6] The recognition result of the mark / character can be confirmed in this manner. Then, a recognition result display window W in which the cursor of the keyboard 7 exists.1The recognition result of the mark or the character can be corrected from the keyboard 7 at that time. Specifically, the correction target character IThreeCan be corrected by using the cursor key of the keyboard 7 or the
[0026]
[Step A7] Then, a logic error display window WTwoLogic error detection button BTwoIs clicked with the
[0027]
[Step A8] Recognition result display window W in the same procedure1The customer ID of 5 digits, and the logical error detection button BTwoIs clicked with the
[0028]
[Step A9] When confirming the figures to be entered in the figure entry frames 15 and 16, the recognition result display window W1Graphic button B in1(Figure area confirmation instruction area) position (mouse click position PThree) Is designated with the
[0029]
[Step A10] By sequentially performing correction and logic check on each graphic image, the confirmation correction is completed.
[0030]
In this embodiment, the mark / character image display window WThree, W7, Graphic image display window WFour, W8Was not scrolled, but the scroll bar STwo, SThreeThe mouse8By clicking on, it is possible to see adjacent entry marks, entry characters, figures, explanations, and the like. In addition, the logic error display window WTwo, W6Scroll bar S1Need to be sequentially displayed while clicking with the
[0031]
【The invention's effect】
According to the method and apparatus for confirming and correcting the OCR paper recognition result of the present invention, as described above, the mark and character recognition result and the enlarged OCR paper image are displayed on the screen of the same display device, and the characters or marks on the display screen are displayed. When the recognition result is indicated, the corresponding image portion of the OCR paper image is linked and enlarged to the center of the display area or a specified position and displayed, and a check mark is added, so that the mark / character image to be checked and corrected can be clarified. Therefore, there is an advantage that the operation of confirming and correcting the OCR paper recognition result can be efficiently performed without imposing a burden on the operator. In addition, the logical error between the mark and character recognition result and the mark / character recognition result for each field is displayed on the same screen, and when a logical error display is instructed, the corresponding image portion of the specified OCR paper image is linked and displayed. By enlarging the display at the center of the area or at the specified position and adding a confirmation mark, it is possible to clarify the field to be confirmed and corrected, not only to correct the mark and character recognition but also to confirm the meaning of the field There are advantages that can be reduced. In addition, the mark and character recognition result and the graphic image are displayed on the same screen, and when the graphic area confirmation instruction is given, the specified graphic area detection result is displayed at the center of the display area or at a prescribed position, and a confirmation mark is added. Since the graphic image and the field to be confirmed can be clarified, there is an advantage that the graphic area in which the signature or the like is described can be easily confirmed. As described above, according to the present invention, it is possible to clarify the image and field of the mark / character / graphic on the same screen, and there is an advantage that the operation of confirming and correcting the recognition result of the OCR paper can be efficiently performed.
[Brief description of the drawings]
FIG. 1 is a diagram showing a procedure of an embodiment of a method of confirming and correcting an OCR paper recognition result according to the present invention.
FIG. 2 is a block diagram showing a configuration of an embodiment of an apparatus for performing a method according to the present invention.
FIG. 3 is a diagram illustrating an example of an OCR paper image according to the present invention.
FIG. 4 is a diagram showing an initial screen displayed on a display according to the present invention.
FIG. 5 is a diagram showing a display screen before correction according to the present invention.
FIG. 6 is a diagram showing a display screen after a partial correction in the present invention.
[Explanation of symbols]
1. Image storage
2 ... Recognition result storage
3. Logic error detector
4: Definition information storage
5: Overall control unit
6. Display
7 ... Keyboard
8 ... Mouse
10 ... OCR paper image
11, 12 ... control mark
13 ... mark entry frame
14 ... Character entry frame
15, 16 ... figure entry frame
A1 to A10: steps of the method of checking and correcting the OCR paper recognition result
I1… First entry character
ITwo… Entry mark
IThree… Correction target character
IFour… Signature
IFive… Stamp
W1, WFive… Recognition result display window
WTwo, W6… Logic error display window
WThree, W7… Mark / character image display window
WFour, W8… Figure image display window
R1… First letter I1Recognition result
RTwo… Entry mark ITwoRecognition result
RThree… Correction letter IThreeRecognition result
RThree'... Recognition result RThreeCorrection character for
B1… Figure display button
BTwo… Logic error detection button
BThree… Display magnification specification box
E1... Logical error message of customer ID
ETwo… Product name logic error message
F1… Mark / character confirmation correction position mark
FTwo… Figure confirmation position mark
S1, STwo, SThree…scroll bar
P1, PTwo, PThree… Mouse click position
Claims (4)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP07786899A JP3540192B2 (en) | 1999-03-23 | 1999-03-23 | Method and apparatus for checking and correcting optical character reading paper recognition result |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP07786899A JP3540192B2 (en) | 1999-03-23 | 1999-03-23 | Method and apparatus for checking and correcting optical character reading paper recognition result |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000276555A JP2000276555A (en) | 2000-10-06 |
JP3540192B2 true JP3540192B2 (en) | 2004-07-07 |
Family
ID=13646046
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP07786899A Expired - Fee Related JP3540192B2 (en) | 1999-03-23 | 1999-03-23 | Method and apparatus for checking and correcting optical character reading paper recognition result |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3540192B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100475543B1 (en) * | 2001-08-08 | 2005-03-10 | 김봉기 | Method for manufacturing hot pepper paste |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07120393B2 (en) * | 1986-04-24 | 1995-12-20 | 株式会社日立製作所 | Character recognition / graphic processing device |
JPH0749557Y2 (en) * | 1989-03-24 | 1995-11-13 | 沖電気工業株式会社 | Character recognition device |
JPH05108792A (en) * | 1991-10-21 | 1993-04-30 | Canon Inc | Picture processing method and device |
JPH05266245A (en) * | 1992-03-17 | 1993-10-15 | Koizumi Sangyo Kk | Picture recognizing device |
JP3353280B2 (en) * | 1993-07-06 | 2002-12-03 | ソニー株式会社 | Data processing apparatus and method |
JPH07200722A (en) * | 1993-12-28 | 1995-08-04 | Toshiba Corp | Information recorder |
JP3940450B2 (en) * | 1996-08-08 | 2007-07-04 | 富士通株式会社 | Character reader |
-
1999
- 1999-03-23 JP JP07786899A patent/JP3540192B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2000276555A (en) | 2000-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2018339524B2 (en) | Synchronizing data-entry fields with corresponding image regions | |
JPH0727349B2 (en) | Multi-window display control method | |
JP2006277001A (en) | Input image displaying method, and input image displaying program | |
JP3540192B2 (en) | Method and apparatus for checking and correcting optical character reading paper recognition result | |
JP5217589B2 (en) | Form image display device | |
JP6803594B1 (en) | Specific numerical notification method and notification system from the store | |
JPH08339419A (en) | Method and device for generating format information | |
JP2002133367A (en) | Character recognition device | |
US10769357B1 (en) | Minimizing eye strain and increasing targeting speed in manual indexing operations | |
JPH0668299A (en) | Display method and correction method for read result and data reader | |
JPH05303661A (en) | Acquring/displaying device for partial image data | |
JPH09311901A (en) | Document handling system and data corrector | |
JPH0934989A (en) | Format parameter generating method for ocr | |
JP3021591B2 (en) | Catalog layout device | |
JPH096902A (en) | Format information generating method | |
JP2723159B2 (en) | Image character conversion method | |
JP2671630B2 (en) | Verification method for definition information | |
JP2757806B2 (en) | Circuit diagram error correction device | |
JPS63115283A (en) | Method for displaying corrected picture of recognition result in character recognition device | |
JP2645187B2 (en) | Field image display processing device | |
JP2005108062A (en) | Format information registration method, ocr system, and format information registration program | |
JP2851307B2 (en) | Data display system | |
JPH06223125A (en) | Method and device for displaying changed part of cad drawing | |
JPH03268060A (en) | Correcting method for business form format | |
JPH10134120A (en) | Method and device for table processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20031202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040323 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040324 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080402 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090402 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090402 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100402 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110402 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120402 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120402 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120402 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130402 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130402 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140402 Year of fee payment: 10 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |