JP2011186835A - 画像処理装置及び画像処理プログラム - Google Patents

Abstract

【課題】分離した部分画像を再利用する際の利便性を向上することを目的とする。
【解決手段】使用するソフトウエア情報に変換する際に、部分画像を再利用し易い形態に配置する再利用重視モードを有している。そして、当該再利用重視モードが選択された場合に、原稿画像に含まれる複数の部分画像に分離して、部分画像の種類毎に配置を変更してソフトウエア情報を生成する（１０４、１１２）。また、再利用重視モードが選択され、特定種類の部分画像の抽出が指定された場合には、特定種類の部分画像を抽出して再配置してソフトウエア情報を生成する（１０４、１０８、１１０）。
【選択図】図６

Description

本発明は、画像処理装置及び画像処理プログラムに関する。

写真、線画、文字、表等の属性の異なる複数の部分画像が含まれる原稿画像を読み取ることによって電子化した電子化文書情報から、複数の部分画像を分離して、分離した部分画像単位で扱えるように電子化文書情報を生成する技術が提案されている。

例えば、特許文献１に記載の技術では、書類の画像を表す画像データに対して、文字や図形等が物理的にあるいは論理的に連結されている単位を一つの領域として抽出し、次に、この抽出された領域の画像上の位置、大きさ、形状、構造、濃度分布等の特徴量に基づいて、各領域の種類、あるいは、文書上の重要度を識別することが提案されている。また、特許文献１に記載の技術では、抽出した領域をそれぞれ別個に保存したり、編集してハードコピー可能としたりすることが提案されている。

また、特許文献２に記載の技術では、画像情報を文字領域、写真領域及び網点領域に分離して、領域の配置順等の編集を行って出力することが提案されている。

さらに、特許文献３に記載の技術では、画像のレイアウト構造を解析し、解析結果を用いて画像をその情報の種別毎に分類して、部分画像を個別に符号化し、属性情報と共に予め定めたフォーマットに準拠した画像データを生成することが提案されている。

特開平０９−０９１４５０号公報 特開２００２−３０５６４４号公報 特開２００２−３００４０８号公報

本発明は、分離した部分画像を再利用する際の利便性を向上することを目的とする。

請求項１に記載の発明は、原稿画像を表す電子文書情報に含まれる属性の異なる部分画像を分離する分離手段と、前記部分画像の再利用性を重視して予め定めた再配置を行う再利用重視モードを含む複数のモードのうち何れかのモードを選択するための選択手段と、前記選択手段によって選択されたモードに応じて、前記分離手段によって分離された前記部分画像を再配置して、使用するソフトウエアに対応したソフトウエア情報を生成する生成手段と、を備えることを特徴としている。

請求項２に記載の発明は、請求項１に記載の発明において、前記選択手段によって前記再利用重視モードが選択された場合に、前記分離手段によって分離された前記部分画像の種類毎にページを切り換えて前記ソフトウエア情報を生成することを特徴としている。

請求項３に記載の発明は、請求項１に記載の発明において、前記生成手段は、前記選択手段によって前記再利用重視モードが選択された場合に、予め指定された種類の前記部分画像を抽出して集約し、前記ソフトウエア情報を生成することを特徴としている。

請求項４に記載の発明は、請求項３に記載の発明において、前記生成手段は、前記選択手段によって前記再利用重視モードが選択された場合に、前記分離手段によって分離された前記部分画像の種類に応じたソフトウエアを使用するソフトウエアとして前記ソフトウエア情報を生成することを特徴としている。

請求項５に記載の発明は、請求項１〜３の何れか１項に記載の発明において、前記生成手段は、前記分離手段によって分離された前記部分画像の種類に応じた表現形式で前記部分画像を再配置して前記ソフトウエア情報を生成することを特徴としている。

請求項６に記載の発明は、請求項５の発明において、前記分離手段によって前記部分画像を分離する際に、複数種類の属性に対応する前記部分画像がある場合、前記生成手段は、当該部分画像をそれぞれの種類に対応する表現形式で再配置して前記ソフトウエア情報を生成することを特徴としている。

請求項７に記載の画像処理プログラムは、コンピュータを、請求項１〜６の何れか１項に記載の画像処理装置の各手段として機能させることを特徴としている。

請求項１に記載の発明によれば、再利用重視モードを選択する構成を有していない場合に比べて、分離した部分画像を再利用する際の利便性を向上することができる、という効果がある。

請求項２に記載の発明によれば、部分画像の種類毎にページを切り換えてソフトウエア情報を生成しない場合に比べて、必要な種類の部分画像を容易に見つけて再利用することができる、という効果がある。

請求項３に記載の発明によれば、予め指定された種類の部分画像を抽出してソフトウエア情報を生成する構成を有していない場合に比べて、予め指定した種類の部分画像を容易に再利用することができる、という効果がある。

請求項４に記載の発明によれば、部分画像の種類に応じたソフトウエア情報を生成する構成を有していない場合に比べて、分離した部分画像を再利用する際の利便性を向上することができる、という効果がある。

請求項５に記載の発明によれば、部分画像の種類に応じた表現形式で部分画像を再配置してソフトウエア情報を生成する構成を有していない場合に比べて、分離した部分画像を再利用する際の利便性を向上することができる、という効果がある。

請求項６に記載の発明によれば、複数種類の属性に対応する部分画像がある場合に、部分画像をそれぞれの種類に対応する表現形式で再配置してソフトウエア情報を生成する構成を有していない場合に比べて、分離した部分画像を再利用する際の利便性を向上することができる、という効果がある。

請求項７に記載の発明によれば、再利用重視モードを選択する構成を有していない場合に比べて、分離した部分画像を再利用する際の利便性を向上することができる、という効果がある。

本発明の実施の形態に係わる画像処理装置の概略構成を示す図である。 本発明の実施の形態に係わる画像処理装置の機能的構成を示すブロック図である。 複数ページの中から必要な部分を選択する例を示す図である。 図形の部分画像の上に文字として処理された文字情報が重ねて配置される例を示す図である。 本発明の実施の形態に係わる画像処理装置において、各種設定を行うための画面の一例を示す図である。 本発明の実施の形態に係わる画像処理装置で行われる処理の流れの一例を示すフローチャートである。 本発明の実施の形態に係わる画像処理装置において再利用重視モードが選択された際に、原稿画像が１ページの場合の部分画像の再配置の例を示す図である。 本発明の実施の形態に係わる画像処理装置において再利用重視モードが選択された際に、原稿画像が複数ページの場合の部分画像の再配置の例を示す図である。

以下、図面を参照して本発明の実施の形態の一例を詳細に説明する。図１は、本発明の実施の形態に係わる画像処理装置の概略構成を示す図である。

本実施の形態に係わる画像処理装置１０は、図１に示すように、画像入力装置１２、記憶装置１４、通信部１６、操作部１８、作業用記憶領域２０、及び制御部２２を備えており、それぞれが接続されて制御部２２によって装置全体を制御される。

画像入力装置１２は、原稿画像を表す電子文書情報を入力する。例えば、画像入力装置１２は、原稿画像を読み取って電子文書情報に変換する画像読取装置を適用してもよいし、電子文書情報を記憶した記憶媒体を適用するようにしてもよい。

記憶装置１４は、画像入力装置１２によって入力された電子文書情報が記憶されると共に、電子文書情報に含まれる属性の異なる複数の部分画像（文字、コンピュータグラフィック等の図形（ＣＧ）、線画、写真、表等の属性の異なる部分画像）を分離して再利用可能な形式の文書情報を生成するためのプログラム等が記憶され、該プログラムが制御部２２によって実行される。

通信部１６は、ネットワーク等の通信手段に接続され、該通信手段を介して外部の情報処理機器（例えば、パーソナルコンピュータや画像形成装置等）と通信して、情報の授受を行う。

操作部１８は、操作ボタンや表示装置を含み、表示装置に表示された情報を元に、操作ボタン等を操作することにより、画像処理装置１０の各種設定や、上述のプログラムの実行指示等を行う。

作業用記憶領域２０は、上述のプログラムを実行する際の作業用の記録領域として機能したり、制御部２２が画像処理装置１０の各種制御を行う際の作業用の記憶領域として機能する。

図２は、本発明の実施の形態に係わる画像処理装置１０の機能的構成を示すブロック図である。

画像処理装置１０の制御部２２は、読取画像取得部２４、配置解析部２６、部分画像種類判定部２８、部分画像の種類毎の情報生成を行う各種情報生成部（文字情報生成部３０Ａ、図形（ＣＧ）情報生成部３０Ｂ、線画情報生成部３０Ｃ、写真情報生成部３０Ｄ、表情報生成部３０Ｅ）３０、ページ間配置変更部３２、及びソフトウエア情報生成部３４として機能する。

読取画像取得部２４は、画像入力装置１２等によって入力された電子文書情報や、記憶媒体等に記憶された電子文書情報を取得する。

配置解析部２６は、読取画像取得部２４によって取得した電子文書情報を解析して、文字、図形（ＣＧ）、線画、写真等の領域を抽出することによって、部分画像の領域を判断する。配置解析部２６は、周知の技術を利用して部分画像領域を判断することが可能であり、例えば、電子文書情報を２値化してラベリング処理やラベリング処理された画像の連結を行う等の処理により、部分画像の領域を判断することができる。

部分画像種類判定部２８は、部分画像領域の濃度分布等の各種の特徴量に基づいて、部分画像の種類を判定し、部分画像を分離して属性を付与する。部分画像種類判定部２８についても周知の技術を利用して部分画像の種類を判定することができ、例えば、特開平９−９１４５０号公報に記載の技術のように、画像上の位置、大きさ、形状、構造、濃度分布等の特徴量を利用したり、特開２００２−３００４０８号公報に記載の技術のように、光学文字認識において使用されている文字認識を行う際の前処理として文字画像を文字領域と、写真、図や表領域とに分類する配置解析手法などを利用することが可能である。判定する部分画像の種類としては、例えば、文字、図形（ＣＧ）、線画、写真、表などを判定する。

各種情報生成部（文字情報生成部３０Ａ、図形（ＣＧ）情報生成部３０Ｂ、線画情報生成部３０Ｃ、写真情報生成部３０Ｄ、表情報生成部３０Ｅ）３０は、部分画像種類判定部２８によって判定された各部分画像の種類に応じた表現形式の情報を生成する。なお、複数種類の属性に対応する部分画像がある場合には、当該部分画像についてはそれぞれの種類に対応する表現形式の情報を生成するようにしてもよい。

ページ間配置変更部３２は、各種情報生成部３０によって生成された情報を部分画像の種類に応じた表現形式で再配置する。例えば、操作部１８によって原稿に忠実な原稿忠実モードが選択された場合には、原稿に合わせた配置を決定したり、操作部１８によって予め定めた再利用重視モードが選択された場合には、部分画像を再利用する際に利用し易いように、部分画像種類判定部２８によって分離された部分画像をその部分画像の種類毎に配置を決定する。すなわち、再利用重視モードの場合は、文字、図形、線画、写真、表等の各部分画像を種類毎に抽出し、文字の部分画像を集めたページや、図形の部分画像を集めたページ等のように、部分画像の種類毎にページ分けするように配置したり、操作部１８によって指定された特定の部分画像を抽出して配置したりする。

ソフトウエア情報生成部３４は、ページ間配置変更部３２によって決定された配置に従って、各種情報生成部３０で生成された情報を再配置し、操作部１８によって指定されたソフトウエアに対応するソフトウエア情報を生成する。

ところで、原稿画像に含まれる複数種類の部分画像を分離して再利用する際には、図３に示すように、複数ページの原稿画像の中から再利用すべき部分画像を選択する必要があるが、例えば、図３点線で示す２つの表だけ欲しい場合にも、全ページが使用するソフトウエアに対応するソフトウエア情報に変換された中からユーザの操作によってページめくりして、必要な部分画像を見つけ出して選択する必要があり、煩雑な作業が必要とされる。

また、部分画像を分離したときに、図４に示すように、図形の部分画像の上に、文字として処理した文字情報が重ねて配置される場合があり、このような場合においても何れかの選択作業が繁雑なものとなる。

そこで、本実施の形態に係わる画像処理装置１０では、ソフトウエア情報生成部３４によって使用するソフトウエア情報に変換する際に、部分画像を再利用し易い形態に配置する再利用重視モードを有している。そして、当該再利用重視モードが選択された場合に、原稿画像に含まれる複数の部分画像に分離して、上述したように、ページ間配置変更部３２が部分画像の種類毎に配置を変更して、ソフトウエア情報を生成する。これによって、部分画像の種類毎に各部分画像が集約されるので、部分画像の再利用時の煩雑な作業が抑制される。

ここで、上述の再利用重視モード等の指示を行うための操作部１８の構成について説明する。図５は、本発明の実施の形態に係わる画像処理装置１０において、各種設定を行うための画面の一例を示す図である。

操作部１８は、各種設定を行うための画面を表示するための表示部を有し、操作部１８の操作によって各種設定を行う構成とする。操作部１８に設けられた表示部には、例えば、図５に示すような設定画面が表示される。図５の表示例では、原稿画像を出力する際の「カラーモード」、「出力情報形式」、「出力モード」、「指定部分画像」のそれぞれを選択するための画面の一例を示す。

図５の例では、「カラーモード」は、「フルカラー」、「グレースケール」、「白黒二値化」の何れかを選択可能とし、何れのカラーモードで出力するかの設定が可能とされている。

また、「出力情報形式」は、「表計算」、「ワープロ」、「プレゼンテーション」、「部分画像対応ソフトウエア」の何れかを選択可能とし、出力する情報の情報形式の選択が可能とされている。すなわち、表計算ソフトウエア、ワープロソフトウエア、プレゼンテーションソフトウエア、または部分画像の種類に対応する部分画像対応ソフトウエアの何れかの出力形式の選択が可能とされている。

また、「出力モード」は、「原稿忠実」、または「再利用重視」の何れかが選択可能とされ、原稿忠実モードが選択された場合には、画像入力装置１２によって入力された原稿画像を表す電子文書情報を、出力情報形式に従ってソフトウエア情報を生成し、再利用重視モードが選択された場合には、分離された部分画像を再利用する際に利用し易いように、原稿画像に含まれる部分画像を種類毎等に再配置して、出力情報形式に従ってソフトウエア情報を生成する。なお、「出力モード」は、本実施の形態では、２つのモードを一例として説明するが、２つのモードに限るものではなく、３種類以上のモードを備えるようにしてもよい。例えば、原稿忠実モードによるソフトウエア情報の生成と、再利用重視モードによるソフトウエア情報生成を共に行うモードを更に備えるようにしてもよい。

また、「指定部分画像」は、「全て」、「写真」、「図形」、「文字」、「表」の何れか、或いはこれらの中から複数が選択可能とされ、再利用重視モードが選択された場合に、ユーザが所望する部分画像の種類の設定が可能とされている。すなわち、再利用重視モードが選択された場合には、所望の種類の部分画像を抽出してソフトウエア情報に変換することも可能とされている。

続いて、上述のように構成された本発明の実施の形態に係わる画像処理装置１０で行われる処理について説明する。図６は、本発明の実施の形態に係わる画像処理装置１０で行われる処理の流れの一例を示すフローチャートである。なお、記憶装置１４に記憶されたプログラムが制御部２２によって実行された場合の処理の流れを示す。

ステップ１００では、設定に応じた原稿画像情報の取得が行われてステップ１０２へ移行する。例えば、画像読取装置によって原稿画像を読み取って電子化文書情報を取得するか、記憶装置１４等に記憶された電子文書情報を取得するか等を、図５の設定画面における「読取方法」を選択することによって設定可能として、当該設定に応じて読取画像取得部２４が原稿画像情報を取得する。

ステップ１０２では、部分画像分離が行われてステップ１０８へ移行する。部分画像分離は、取得された電子文書情報が配置解析部２６によって解析されることで、文字、図形（ＣＧ）、線画、写真、表等の領域が抽出されて部分画像領域が判断され、部分画像種類判定部２８によって部分画像が抽出される。そして、各種情報生成部（文字情報生成部３０Ａ、図形（ＣＧ）情報生成部３０Ｂ、線画情報生成部３０Ｃ、写真情報生成部３０Ｄ、表情報生成部３０Ｅ）３０によって各部分画像の種類に応じた表現形式の情報が生成される。

ステップ１０４では、再利用重視モードが設定されているか否かが判定される。該判定は、操作部１８が操作されて再利用重視モードが設定されているか否かを判定し、該判定が否定された場合（本実施の形態では、原稿忠実モードが設定されている場合）にはステップ１０６へ移行し、肯定された場合にはステップ１０８へ移行する。

ステップ１０６では、部分画像が再配置されて指定された形式のファイルが生成されてステップ１１４へ移行する。すなわち、各情報生成部（文字情報生成部３０Ａ、図形（ＣＧ）情報生成部３０Ｂ、線画情報生成部３０Ｃ、写真情報生成部３０Ｄ、表情報生成部３０Ｅ）３０によって生成された各部分画像の種類に応じた表現形式の情報を原稿画像と同様に再配置して、操作部１８によって指定された出力情報形式に従ったファイル（ソフトウエア情報）をソフトウエア情報生成部３４が生成する。これによって部分画像を再利用可能な形式で再配置されて、原稿画像が忠実に再現される。

一方、ステップ１０８では、特定種類の抽出か否かが判定される。該判定は、操作部１８の操作によって図５に示した設定画面の「指定部分画像」（「全て」、「写真」、「文字」、「表」の何れか）が選択されているか否かを判定し、判定が肯定された場合にはステップ１１０へ移行し、否定された場合にはステップ１１２へ移行する。

ステップ１１０では、特定種類の部分画像を抽出して再配置し、指定された形式のファイルが生成されてステップ１１２へ移行する。すなわち、ページ間配置変更部３２が操作部１８によって指定された種類の部分画像を抽出して部分画像の種類に応じた表現形式の情報を再配置し、操作部１８によって指定された出力情報形式に従ったファイル（ソフトウエア情報）をソフトウエア情報生成部３４が生成する。なお、複数の「指定部分画像」が指定されている場合には、種類毎にページ分けして再配置し、出力情報形式に従ってファイルを生成するようにしてもよい。

また、ステップ１１２では、部分画像の種類毎に再配置して、指定された形式のファイルが生成されてステップ１１２へ移行する。すなわち、ページ間配置変更部３２が種類毎に部分画像を抽出して部分画像の種類に応じた表現形式の情報を再配置し、ソフトウエア情報生成部３４が操作部１８によって指定された出力情報形式に従ったファイル（ソフトウエア情報）を生成する。例えば、原稿画像が図７（Ａ）に示すように１ページの場合には、表の部分画像のページ（図７（Ｂ））や、写真の部分画像のページ（図７（Ｃ））、図形の部分画像のページ（図７（Ｄ））、文字なしの表の部分画像のページ（図７（Ｅ））、文字の部分画像のページ（図７（Ｆ））等のように、ページ毎に異なる種類の部分画像が位置するように再配置してファイルを生成してもよいし、種類の異なる部分画像がページ毎に集約するように再配置してファイルを生成するようにしてもよい。また、原稿画像が図８（Ａ）に示すように複数ページの場合には、原稿画像の各ページの表の部分画像を集約したページ（図８（Ｂ））、原稿画像の各ページの写真の部分画像を集約したページ（図８（Ｃ））、原稿画像の各ページの図形の部分画像を集約したページ（図８（Ｄ））、原稿画像の各ページの文字の部分画像を集約したページ（図８（Ｅ））等のように、各ページ毎に種類の異なる部分画像を集約するように再配置してファイルを生成してもよい。このとき、部分画像のプロパティ等に原稿画像の何ページの部分画像であるかの属性を付与するようにしてもよい。なお、指定された出力情報形式が「部分画像対応ソフトウエア」が設定されている場合には、部分画像の種類に応じたソフトウエア情報を生成する。すなわち、各ページ毎に部分画像の種類を分けて、ページ毎に部分画像の種類に対応するソフトウエア情報を生成する。

そして、ステップ１１４では、ステップ１０６、１１０、１１２の何れかで生成されたファイルが出力されて一連の処理を終了する。ファイルの出力先としては、記憶装置１４に出力して記憶するようにしてもよいし、予め定めた出力先に出力するようにしてもよいし、操作部１８によって予め設定された出力先に出力するようにしてもよい。

このように、本実施の形態に係わる画像処理装置１０では、再利用重視モードが選択された場合には、部分画像の種類に応じて部分画像が再配置されるので、再利用する際には必要な部分画像が見つけやすくなり、再利用時の利便性が向上される。

なお、上記の実施の形態では、画像処理装置として説明したが、原稿画像を読み取る画像読取装置を備えた画像形成装置等に適用するようにしてもよい。

また、上記の実施の形態における各処理は、プログラムを実行することによって行われる処理として説明したが、これに限るものではなく、ハードウエアによって実現するようにしてもよい。

１０ 画像処理装置
１８ 操作部
２２ 制御部
２６ 配置解析部
２８ 部分画像種類判定部
３０ 各種情報生成部
３２ ページ間配置変更部
３４ ソフトウエア情報生成部

Claims (7)

1. 原稿画像を表す電子文書情報に含まれる属性の異なる部分画像を分離する分離手段と、
   前記部分画像の再利用性を重視して予め定めた再配置を行う再利用重視モードを含む複数のモードのうち何れかのモードを選択するための選択手段と、
   前記選択手段によって選択されたモードに応じて、前記分離手段によって分離された前記部分画像を再配置して、使用するソフトウエアに対応したソフトウエア情報を生成する生成手段と、
   を備えた画像処理装置。
2. 前記生成手段は、前記選択手段によって前記再利用重視モードが選択された場合に、前記分離手段によって分離された前記部分画像の種類毎にページを切り換えて前記ソフトウエア情報を生成する請求項１に記載の画像処理装置。
3. 前記生成手段は、前記選択手段によって前記再利用重視モードが選択された場合に、予め指定された種類の前記部分画像を抽出して集約し、前記ソフトウエア情報を生成する請求項１に記載の画像処理装置。
4. 前記生成手段は、前記選択手段によって前記再利用重視モードが選択された場合に、前記分離手段によって分離された前記部分画像の種類に応じたソフトウエアを使用するソフトウエアとして前記ソフトウエア情報を生成する請求項３に記載の画像処理装置。
5. 前記生成手段は、前記分離手段によって分離された前記部分画像の種類に応じた表現形式で前記部分画像を再配置して前記ソフトウエア情報を生成する請求項１〜３の何れか１項に記載の画像処理装置。
6. 前記分離手段によって前記部分画像を分離する際に、複数種類の属性に対応する前記部分画像がある場合、前記生成手段は、当該部分画像をそれぞれの種類に対応する表現形式で再配置して前記ソフトウエア情報を生成する請求項５に記載の画像処理装置。
7. コンピュータを、請求項１〜６の何れか１項に記載の画像処理装置の各手段として機能させるための画像処理プログラム。