JP2022050175A - 印刷物処理装置及びプログラム - Google Patents

Abstract

【課題】イベント会場等の環境に設置される印刷物を印刷する際に、無駄な印刷を排除し、かつ前記環境に対して適切な印刷物を得る。【解決手段】印刷物処理装置１０は、印刷物が設置される環境の画像データ５０を取得する取得部と、プロセッサと、表示部を備える。印刷物処理装置１０のプロセッサは、プログラムを実行することで、環境に掲示物等の印刷物が設置された場合に、どのように見えるかを、掲示物の寸法やフォント等の印刷条件をユーザ操作に応じて変化させて画像データ５０中に掲示物の画像を合成して合成画像５４，５６，５８，６０として表示部に表示する。プリンタ１２は、印刷物処理装置１０により確定した印刷条件で掲示物６２を印刷出力する。【選択図】図１

Description

本発明は、印刷物処理及びプログラムに関する。

従来から、印刷プレビューにより、実際に紙に出力されるイメージを画面上で事前に確認できる機能が提案されている。

例えば、特許文献１には、印刷媒体の印刷面に対する正確な印刷位置が反映された印刷プレビュー画像を表示することのできる情報処理装置が記載されている。情報処理装置は、記録媒体を供給する供給手段を備える画像形成装置の個体差に応じて設定されるマージン設定情報を取得する取得手段と、前記取得手段が取得した前記マージン設定情報と印刷対象の印刷データにかかわるマージン設定情報とを基に印刷位置を算出する算出手段と、前記算出手段が算出した印刷位置を基に前記印刷データに関するプレビュー画像を表示手段に表示させる表示制御手段とを備える。

特開２０１０－１６５００８号公報

ところで、例えばイベント会場等に設置する印刷物を出力する場合など、印刷物が設置されるときのイメージを把握することが困難な場合であって、複数の寸法で試し印刷する、実際に会場に印刷物を仮設置して寸法等の印刷条件を修正した上で再印刷する、あるいは不適切な寸法等の印刷条件で出力された印刷物をそのまま設置する等の不都合があった。

本発明の目的は、設置されるときのイメージを把握することが困難なイベント会場等の環境に設置される印刷物を印刷する際であっても、無駄な印刷を排除し、かつ前記環境に対して適切な印刷物を得ることにある。

請求項１に記載の発明は、印刷物が設置される環境の画像データを取得する取得部と、プロセッサと、表示部と、を備え、前記プロセッサは、プログラムを実行することで、前記取得部で取得された前記画像データを入力し、前記環境に前記印刷物が設置された場合に、どのように見えるかを、前記印刷物の印刷条件に対応させて前記画像データ中に前記印刷物を合成して前記表示部に表示し、ユーザ操作に応じて前記印刷物の印刷条件を変更して表示することで前記印刷物の印刷条件を決定する、印刷物処理装置である。

請求項２に記載の発明は、前記印刷条件は、前記印刷物の寸法、色、模様、フォント、解像度の少なくともいずれかを含む、請求項１に記載の印刷物処理装置である。

請求項３に記載の発明は、前記プロセッサは、入力した前記画像データから前記環境の画像データに対する前記印刷物の少なくとも適応寸法を推定し、推定した適応寸法で前記画像データ中に前記印刷物を合成して前記表示部に表示する、請求項１，２のいずれかに記載の印刷物処理装置である。

請求項４に記載の発明は、前記プロセッサは、前記画像データ内の対象物の既知寸法に基づいて前記適応寸法を推定する、請求項３に記載の印刷物処理装置である。

請求項５に記載の発明は、前記プロセッサは、機械学習モデルを用いて前記画像データから前記適応寸法を推定する、請求項３に記載の印刷物処理装置である。

請求項６に記載の発明は、前記取得部は、前記環境の写真データを前記画像データとして取得する、請求項１に記載の印刷物処理装置である。

請求項７に記載の発明は、前記取得部は、前記環境の画像データが存在しない場合に、前記環境に類似する環境の画像データを取得する、請求項１に記載の印刷物処理装置である。

請求項８に記載の発明は、前記印刷物は、掲示物、壁紙、ポスター、カバーのいずれかである、請求項１～７のいずれかに記載の印刷物処理装置である。

請求項９に記載の発明は、コンピュータに、印刷物が設置される環境の画像データを入力するステップと、前記環境に前記印刷物が設置された場合に、どのように見えるかを、前記印刷物の印刷条件に対応させて前記画像データ中に前記印刷物を合成して前記表示部に表示するステップと、ユーザ操作に応じて前記印刷物の印刷条件を変更して表示することで前記印刷物の印刷条件を決定するステップと、を実行させるプログラムである。

請求項１，９に記載の発明によれば、印刷物が設置されるときのイメージを把握することが困難な場合であっても、適切な印刷物を得ることができる。

請求項２に記載の発明によれば、さらに、印刷物の寸法、色、模様、フォント、解像度の少なくともいずれかを決定することができる。

請求項３，４，５に記載の発明によれば、さらに、印刷物の寸法を決定することができる。

請求項６に記載の発明によれば、さらに、環境の写真データを用いて適切な印刷物を得ることができる。

請求項７に記載の発明によれば、さらに、環境の画像データが存在しない場合にも適切な印刷物を得ることができる。

請求項８に記載の発明によれば、さらに、掲示物、壁紙、ポスター、カバーのいずれかを得ることができる。

実施形態のシステム構成図である。 実施形態の掲示物画像のシミュレーション説明図である。 実施形態の印刷物処理装置の構成ブロック図である。 実施形態のユーザ操作の処理フローチャートである。 実施形態の合成位置の決定説明図である。 実施形態のプロセッサの処理フローチャートである。 実施形態の表示装置の表示画面説明図である。

以下、図面に基づき本発明の実施形態について説明する。

図１は、本実施形態に係る印刷物処理システムの構成ブロック図である。本実施形態の印刷物処理システムは、印刷物処理装置１０と、プリンタ１２を備える。

印刷物処理装置１０は、イベント会場等の特定環境に設置される印刷物の印刷条件を決定してプリンタ１２に印刷制御データを出力する。プリンタ１２は、印刷物処理装置１０からの印刷制御データに従い、印刷物を印刷する。イベント会場等の特定環境に設置される印刷物は任意であるが、例えば、イベント会場に掲示される横断幕や垂れ幕等の掲示物、特定施設の壁に貼付される壁紙、ポスター、あるいはテーブルに敷設されるカバー等である。

本実施形態では、印刷物としてイベント会場に掲示される横断幕等の掲示物を例にとり説明するが、これに限定されない。

印刷物処理装置１０は、イベント会場を示す画像データ５０と、ユーザにより設定された印刷物の印字内容５２を入力する。

画像データ５０は、例えばイベント会場を撮影した会場写真である。画像データ５０には、掲示物が掲示されるべき位置あるいは領域が含まれている。また、イベント会場の実際の寸法を推定するためのオブジェクトが含まれているのが好ましい。掲示物が掲示されるべき位置は、ステージ上の横断幕や垂れ幕が設置される位置や領域、あるいは看板等が設置される位置や領域である。

また、イベント会場の実際の寸法を推定するためのオブジェクトは、寸法が規格化あるいは標準化されているオブジェクトや寸法が既知のオブジェクト等である。これらに該当するオブジェクトとして、例えばスポーツ用のコート、信号機、交通標識、体育館や劇場等の建物の種別毎の舞台の高さ、照明器具、オフィス用の机やキャビネット、ピアノ、バイオリン、ギター等の楽器、非常口のサイン、消火器や消火栓、ランドセル等が挙げられる。また、男女／年齢／人種等毎に層別された人、乗用車／トラック／バス／電車等の種別毎に層別された交通手段を用いることもできる。

イベント会場の実際の寸法を推定するためのオブジェクトは、後述するように、掲示物の実際の寸法を推定し、掲示物の画像を画像データ５０に合成するために用いられる。

印刷物の印字内容５２は、掲示物に印刷されるべき内容（コンテンツ）であり、例えば単語、標語、キャッチフレーズ、イベント内容、スケジュール、式次第等である。図１では、印字内容の一例として「Ｈａｐｐｙ」なる英単語を挙げている。

印刷物処理装置１０は、画像データ５０と印字内容５２を入力すると、印字内容を掲示物に印刷してイベント会場に掲示したと想定したときの、掲示物の寸法やフォント、色等をシミュレーションして画像データ５０に合成して表示する。図１には、例として、４つの合成画像が示されている。

画像５４は、画像データ５０と、印字内容５２を印字した掲示物を初期寸法でイベント会場に掲示したと想定して合成した画像である。初期寸法は、印刷物処理装置１０が画像データ５０から得られるイベント会場の実際の寸法に適応すると推定される掲示物の寸法であり、ユーザの操作指示により適宜変更され得る寸法である。

また、画像５６は、画像データ５０と、画像５４の場合よりも掲示物の寸法を縮小してイベント会場に掲示したと想定して合成した画像である。

また、画像５８は、画像データ５０と、画像５６の場合の掲示物の寸法を維持し、印字内容のフォントを変更してイベント会場に掲示したと想定して合成した画像である。

さらに、画像６０は、画像データ５０と、画像５８の場合の掲示物の寸法及びフォントを維持し、印字内容の背景色を変更してイベント会場に掲示したと想定して合成した画像である。

印刷物処理装置１０は、ユーザからの操作に応じ、シミュレーションして得られたこれらの合成画像５４，５６，５８，６０を順次、表示装置に表示してユーザに提示する。ユーザは、これらの合成画像５４，５６，５８，６０を視認することで、掲示物が掲示された場合のイベント会場の様子を合成画像上で確認することができ、掲示物の寸法やフォント、背景色がイベント会場の環境に適しているか否かを判断できる。

より具体的には、ユーザは、合成画像５４を表示装置で視認した場合、イベント会場のステージ上に掲示する掲示物として、周りのオブジェクトが遮蔽されるため寸法が大き過ぎると感じるであろう。このとき、ユーザは、掲示物の寸法をより小さくするように印刷物処理装置１０に操作指示する。

印刷物処理装置１０は、ユーザからの掲示物寸法の縮小操作指示を受けて、掲示物の寸法を所定量、あるいは操作指示量だけ小さくして掲示物の画像を作成し、イベント会場の画像データ５０と合成することで合成画像５６を作成し表示装置に再表示する。

次に、ユーザは、合成画像５６を表示装置で視認した場合、イベント会場に掲示する掲示物の寸法は適当であると判断するが、他方で、掲示物の文字のフォントが適当でないと判断すると、掲示物のフォントを変更するように印刷物処理装置１０に操作指示する。

印刷物処理装置１０は、ユーザからの掲示物フォントの変更操作指示を受けて、掲示物のフォントを別のフォントに変更して掲示物の画像を作成し、イベント会場の画像データと合成して合成画像５８を作成し表示装置に再表示する。

次に、ユーザは、合成画像５８を表示装置で視認した場合、イベント会場に掲示する掲示物のフォントは適当であると判断するが、さらに、ユーザは、掲示物の背景色を変えてみようと欲すると、ユーザは、掲示物の背景色を変更するように印刷物処理装置１０に操作指示する。

印刷物処理装置１０は、ユーザからの背景色の変更操作指示を受けて、掲示物の背景色を変更して掲示物の画像を作成し、イベント会場の画像データ５０と合成して合成画像６０を作成し表示装置に表示する。例えば、背景色を青色からオレンジ色に変更して合成画像６０を作成する。

ユーザは、合成画像６０を表示装置で視認した場合、イベント会場に掲示する掲示物の背景色としてはオレンジ色よりもむしろ変更前の青色の方が適当であると判断する。そして、最終的に合成画像５８が最もイベント会場のステージ上に掲示する掲示物として適当であると判断すると、その旨を印刷物処理装置１０に操作指示する。図１では、合成画像５８に太枠が表示されており、合成画像５８がユーザにより最終的に最も適当と選択されたことを示す。

なお、印刷物処理装置１０は、合成画像５４～６０を１つずつ表示装置に順次表示するのではなく、表示装置に並列表示してもよく、これによりユーザは合成画像５４～６０を直接対比観察し得る。

印刷物処理装置１０は、ユーザからの指示を受けて、合成画像５８で規定される掲示物の寸法、フォント、及び背景色を掲示物の印刷条件として確定し、当該印刷条件を含む印刷制御データをプリンタ１２に出力する。プリンタ１２は、印刷物処理装置１０からの印刷制御データに基づいて掲示物６２を出力する。プリンタ１２は、横断幕や垂れ幕等の印刷が可能な大判プリンタが望ましいが、必ずしもこれに限定されない。

このように、本実施形態では、印刷物処理装置１０は、環境に掲示物を掲示した場合にどのように見えるかを合成画像でシミュレーションし、ユーザに提示（プレビュー）する。ユーザは、合成画像を視認しながら、掲示物の寸法やフォント、色等の印刷条件を種々変更し、掲示するのに最も適切な印刷条件を探索することができる。

これにより、本実施形態では、印刷物が設置されるときのイメージを把握することが困難な場合であっても、効率的な掲示物印刷が可能となる。

ここで、本実施形態では、印刷物処理装置１０は、イベント会場の画像データ５０と、掲示物の画像との合成画像５４～６０を表示装置に表示してユーザに提示するが、プリンタ１２に対しては掲示物の印刷条件を含む印刷制御データのみを出力し、プリンタ１２では掲示物のみを印刷出力する点に留意されたい。すなわち、プリンタ１２の印刷対象はあくまで掲示物、すなわちイベント会場に掲示される実物であり、イベント会場の画像データ５０でも合成画像５４～６０のいずれかでもない。

図２は、印刷物処理装置１０における、掲示物の印刷条件の変更のみを抽出して示す。

ユーザは、掲示物の印字内容５２を決定して印刷物処理装置１０に入力する。印字内容５２は、例えば「Ｈａｐｐｙ」であり、キーボード等から入力される。このとき、ユーザは、初期値として、文字のフォントや背景色等を指定してもよいし、デフォルトのフォントや背景色でもよい。

また、印刷物処理装置１０は、イベント会場の画像データを取得し、取得したイベント会場の画像データに対する掲示物の適応寸法を推定して、掲示物の画像５４ａを生成する。例えば、イベント会場のステージ上に掲示する横断幕の場合、イベント会場のステージの大きさを推定し、当該ステージに掲示する横断幕の適応寸法を長さ１０ｍ、幅１ｍ等と推定し、推定した適応寸法に基づいて印字内容５２を配置して初期の画像５４ａを生成する。初期の画像５４ａは、イベント会場の画像データ５０に合成され、合成画像５４として表示装置に表示される。イベント会場の画像データ５０に対する画像５４ａの合成位置は、例えばユーザが合成画像データ５４を視認しつつ決定して印刷物処理装置１０に操作指示する。

印刷物処理装置１０は、ユーザから合成画像５４に対する寸法変更の操作指示、例えば寸法縮小の指示を受けると、当該ステージに掲示する横断幕の適応寸法を長さ１０ｍ、幅１ｍから長さ８ｍ、幅８０ｃｍ等に変更し、変更した寸法に基づいて印字内容５２を配置して画像５６ａを生成する。画像５６ａは、イベント会場の画像データ５０に合成され、合成画像５６として表示装置に表示される。イベント会場の画像データに対する画像５６ａの合成位置は、先にユーザが決定して印刷物処理装置１０に操作指示した位置である。

印刷物処理装置１０は、ユーザからフォント変更の操作指示を受けると、当該ステージに掲示する横断幕の適応寸法を長さ８ｍ、幅８０ｃｍのまま維持し、印字内容５２のフォントを変更して画像５８ａを生成する。画像５８ａは、イベント会場の画像データに合成され、合成画像５８として表示装置に表示される。イベント会場の画像データに対する画像５８ａの合成位置は、先にユーザが決定して印刷物処理装置１０に操作指示した位置である。

印刷物処理装置１０は、ユーザからさらに背景色変更の操作指示を受けると、当該ステージに掲示する横断幕の寸法及びフォントを維持し、印字内容５２の背景色を例えば青色からオレンジ色に変更して画像６０ａを生成する。画像６０ａは、イベント会場の画像データに合成され、合成画像６０として表示装置に表示される。イベント会場の画像データに対する画像６０の合成位置は、先にユーザが決定して印刷物処理装置１０に操作指示した位置である。

ユーザが最終的に合成画像５８を最も適当であると判断して決定すると、印刷物処理装置１０は、合成画像５８を作成する際に用いた画像５８ａの寸法（長さ８ｍ、幅８０ｃｍ）、フォント、背景色（青色）を印刷条件として確定し、プリンタ１２に印刷制御データを出力する。印刷制御データには、イベント会場の画像データに関する情報は含まれない。

なお、この例では、ユーザは基本的に複数の合成画像５４～６０のうち、最も適当と判断する１個の合成画像を選択することで１つの印刷条件を確定しているが、場合によっては複数の合成画像を選択することで複数の印刷条件を確定することもできる。但し、無駄な印刷を排除する観点からはその上限を設定してもよい。

次に、本実施形態の印刷物処理装置１０の具体的構成について説明する。

図３は、印刷物処理装置１０の構成ブロック図である。印刷物処理装置１０は、コンピュータで構成され、プロセッサ１６、ＲＯＭ１８、ＲＡＭ２０、通信インターフェイス（Ｉ／Ｆ）２２、入力装置２４、表示装置２６、及び記憶装置２８を備える。

プロセッサ１６は、ＲＯＭ１８等のプログラムメモリに記憶されたプログラムを読み込み、ＲＡＭ２０をワーキングメモリとして用いて当該プログラムを実行することで、各種処理を実現する。プロセッサ１６の処理は、具体的には以下の通りである。
・イベント会場の画像データを取得して入力する
・印字内容を入力する
・イベント会場に掲示物が掲示された場合に、どのように見えるかを示す合成画像を生成して表示装置２６に表示する
・ユーザ操作に応じて掲示物の印刷条件を変更して合成画像を生成して表示装置２６に表示する
・ユーザ操作に応じて掲示物の印刷条件を確定して印刷制御データをプリンタ１２に出力する

通信Ｉ／Ｆ２２は、ネットワーク１４を介してプリンタ１２とデータを送受信する。プロセッサ１６は、通信Ｉ／Ｆ２２及びネットワーク１４を介してプリンタ１２に印刷制御データを出力する。

入力装置２４は、イベント会場の画像データ及び印字内容を入力する。入力装置２４は、キーボードやマウス、タッチパネル、スキャナ等で構成される。

表示装置２６は、液晶ディスプレイや有機ＥＬディスプレイ等で構成される。タッチパネルで構成されてもよい。

記憶装置２８は、ＨＤＤやＳＳＤ等で構成され、入力された画像データや印字内容、合成画像、印刷条件等を記憶する。

ネットワーク１４は、有線／無線を問わず、公衆回線／専用回線を問わない。ネットワーク１４の一例は無線ＬＡＮ（ローカルエリアネットワーク）である。

図３では、印刷物処理装置１０とプリンタ１２がネットワーク１４で接続されているが、さらに、ユーザ端末と印刷物処理装置１０とプリンタ１２がネットワーク１４で接続されていてもよい。この場合、図３における印刷物処理装置１０の入力装置２４及び表示装置２６の機能をユーザ端末が担い得る。ユーザ端末はスマートフォン等の携帯端末でもよく、ＰＣやタブレット端末等でもよい。携帯端末の場合、ユーザはイベント会場において当該イベント会場の写真を撮影して印刷物処理装置１０に送信し、印刷物処理装置１０からの合成画像を携帯端末で確認し、当該イベント会場にいながらイベント会場のステージ上に掲示されるべき横断幕の寸法やフォント、色等を決定し得る。

また、後述するように、プロセッサ１６は、機械学習モデルを用いてイベント会場の画像から当該イベント会場及び掲示物の実際の寸法を推定するが、この際の学習用データセットは、ネットワーク１４に接続された別のサーバコンピュータから取得してもよい。学習用データセット及び機械学習モデルの各種パラメータは、記憶装置２８に記憶され得る。

次に、本実施形態における処理を詳細に説明する。

図４は、本実施形態の処理フローチャートであり、印刷物処理装置１０を利用するユーザの操作フローチャートである。

まず、ユーザは、印刷物処理装置１０にインストールされている処理プログラム（アプリケーション）を起動し、掲示物に印字されるべき印字内容５２を入力装置２４から入力する（Ｓ１０３）。印字内容５２は、単語や標語、フレーズ、式次第等である。ここでは、「Ｈａｐｐｙ」なる英単語を入力したとする。プロセッサ１６は、印字内容５２を入力すると、記憶装置２８に記憶するとともに、表示装置２６に表示する。印字内容５２とともに、印字内容５２が印字されるべき印刷媒体を特定して入力してもよい。例えば、「横断幕」、「垂れ幕」、「看板」等である。また、それらの寸法が分かる場合、寸法も入力してもよい。また、掲示物の基本的な形状を入力してもよい。「矩形」、「横長」、「縦長」等である。

ユーザは、表示装置２６に表示された印字内容５２を確認し（Ｓ１０４）、印字内容５２が正しければ次に進み、そうでなければ適宜、入力装置２４から変更内容を入力する。

印字内容５２を確認した後、ユーザは、会場写真をイベント会場の画像データ５０として入力装置２４から入力する。例えば、ユーザは、イベント会場の写真などを携帯端末やデジタルカメラ等で撮影して画像データ５０として取得しておく。既にイベント会場の写真が存在すれば、その写真を援用してもよい。また、このとき、入力装置２４は画像データ５０の取得部として機能する。具体的には、会場写真をスキャナでデジタルデータに変換して入力する。携帯端末から有線あるいは無線で入力してもよい。このとき、通信Ｉ／Ｆ２２は画像データ５０の取得部として機能する。プロセッサ１６は、イベント会場の画像データ５０を取得すると、この画像データ５０を処理して、イベント会場の寸法、特に掲示物が掲示されるステージの寸法を推定するとともに、当該イベント会場に掲示される掲示物の寸法を推定する。

プロセッサ１６は、イベント会場の寸法及び掲示物の寸法を推定する場合、例えば機械学習モデルを用いてよい。モデルを構築するための学習データは、横断幕や垂れ幕等の大判プリンタで作成可能な掲示物が写っている複数の写真データである。これらの写真データにおける、学習データセットとして、当該写真データに写っている掲示物の寸法、絵文字等の属性データ、例えばフォント寸法、フォント種別、及び当該写真データに写っている別のオブジェクトの寸法を用意する。

別のオブジェクトは、寸法が規格化されている物と寸法が既知のものが好ましい。規格化されているものの例としては、スポーツ用のコート、信号機、交通標識等が挙げられる。また、寸法が既知のものは東京タワーや東京ドーム等の著名建造物が挙げられる。また、標準的な寸法が決まっているものを用いることもできる。標準的な寸法が決まっているものの例としては、体育館や劇場等の建物の種別毎のステージ、照明器具、オフィスに備えられる机やファイルキャビネット、ピアノ、バイオリンやギター等の楽器、非常口のサイン、消火器や消火栓、ランドセル等が挙げられる。さらに、男女／年齢／人種等毎に層別された人、乗用車／トラック／バス／電車等の種毎に層別された交通手段等を用いてもよい。

これらの学習データセットを用いて機械学習されたモデルを用いることによって、寸法のデータを有さない写真から、イベント会場の寸法、絵文字の寸法を推定することができる。また、横断幕等のフォント種別も推定することができる。

機械学習モデルを用いるための前処理として、取得して入力した画像データ５０に写っているオブジェクトを割り出す物体認識を行い、学習データセットで用いたオブジェクトを検索する。このとき、寸法が規格化されているオブジェクトと寸法が既知のオブジェクトを優先的に検索し、これらが検出できない場合に、標準的な寸法が決まっているオブジェクトを次に優先して検索する。そして、機械学習モデルのうち、検出されたオブジェクトを学習データセットとして用いた機械学習モデルを選択することで、イベント会場の実際の寸法、ひいては当該イベント会場に掲示される掲示物の実際の寸法やフォントを精度良く推定し得る。

一例として、各種のイベント会場の写真データにおいて、ステージ及びステージ上に掲示された横断幕や垂れ幕がオブジェクトとして写り込んでいる写真データを学習データセットとして用いて機械学習させ、写真データを入力すれば、掲示物の寸法、さらには掲示物のフォント種別やフォント寸法を出力するような機械学習モデルを生成する。プロセッサ１６は、この機械学習モデルに、Ｓ１０５で取得し入力した会場写真を入力データとして入力し、掲示物の寸法、さらには掲示物のフォント種別やフォント寸法を出力データとして出力する。プロセッサ１６は、学習用データセットを学習器に入力して機械学習モデル、言い換えれば寸法推定モデルを作成するが、学習器は、例えばニューラルネットワーク（ＮＮ）や畳み込みニューラルネットワーク（ＣＮＮ）等を用いることができる。但し、本実施形態の機械学習モデルは特定のモデルに限定されない。

プロセッサ１６は、機械学習モデルを用いて推定した掲示物の寸法、さらには掲示物のフォント種別やフォント寸法を印字内容５２の文字に反映させて掲示物の画像として表示装置２６に表示する。

ユーザは、表示装置２６に表示された掲示物の寸法（サイズ）を確認し（Ｓ１０６）、必要に応じて適宜寸法を増減修正する（Ｓ１０７）。なお、この時点では、未だ掲示物の画像はイベント会場の画像データ５０と合成されておらず、掲示物がイベント会場に掲示された場合にどのように見えるかのイメージが具体的に把握できない状態なので、ある程度の修正でよい。

次に、ユーザは、寸法が調整された掲示物の画像をＳ１０５で入力した会場写真に合成する（Ｓ１０８）。プロセッサ１６は、会場写真の画像データ５０と寸法調整された掲示物の画像とを共に表示し、ユーザ操作に応じて掲示物の画像の位置を移動させる。例えば、ユーザは、入力装置２４としてのマウスを操作し、掲示物画像をドラッグアンドドロップして合成位置を決定する。これ以外にも、上下左右のカーソルキーを操作することで掲示物の画像を上下左右に移動させて合成位置を決定してもよい。また、マウスを操作し、画像を回転させ、画像の傾きを決定することもできる。プロセッサ１６は、ユーザ操作により決定された合成位置において、会場写真の画像データ５０と掲示物の画像とを合成し、合成画像を表示装置２６に表示する。

図５は、会場写真の画像データ５０と掲示物の画像の合成処理を示す。図５（ａ）に示すように、会場写真の画像データ５０と掲示物の画像５４ａが表示装置２６に並列表示される。ユーザは、例えば掲示物画像５４ａをマウスでドラッグアンドドロップして画像データ５０の所望位置、具体的にはステージ上の横断幕位置まで移動させる。また、掲示物の画像５４ａの近傍には掲示物の画像５４ａを回転操作するための操作アイコン５５が表示される。ユーザは、この操作アイコン５５を操作することで、掲示物の画像５４ａを所望の角度だけ回転させ、掲示物の画像５４ａの傾きを決定する。図５（ｂ）は、掲示物の画像５４ａを移動した後の状態を示す。プロセッサ１６は、この位置を合成位置として認識し、その位置情報をＲＡＭ２０あるいは記憶装置２８に記憶する。以後のシミュレーションでは、記憶されたこの位置情報を用いて合成のシミュレーションを実行する。

ユーザは、例えば画像データ５０において合成位置や領域をマウスやカーソル等で指定し、プロセッサ１６が指定された位置や領域まで掲示物の画像５４ａを自動的に移動させることで合成してもよい。あるいは、プロセッサ１６は、画像データ５０内において掲示物の画像５４ａの合成位置あるいは領域を自動認識し、当該位置あるは領域に掲示物の画像５４ａを合成してもよい。合成位置の認識は、既述した機械学習を用いて実行し得る。具体的には、学習用データセットからステージ上の横断幕の位置を学習し、画像データ５０から横断幕と認識される領域を抽出して掲示物の画像５４ａを合成する。

再び図４に戻り、表示装置２６に合成画像が表示されると、ユーザは合成画像を確認する（Ｓ１０９）。そして、合成画像がＯＫか否かを判断する（Ｓ１１０）。合成画像がＯＫであれば、ユーザはその旨を入力装置２４から入力（例えば表示装置２６に表示された「ＯＫ」ボタンを操作する等）して印刷条件を確定する（Ｓ１１２）。

他方で、ユーザが合成画像はＯＫでないと判断した場合（Ｓ１１０でＮＯ）、ユーザはその旨を入力装置２４から入力（例えば表示装置２６に表示された「変更」ボタンを操作する等）し、掲示物の画像５４ａの寸法やフォント、背景色等の変更を指示する（Ｓ１１１）。以上の処理を合成画像がＯＫと判断されるまで繰り返し実行する。また、Ｓ１１０でＮＯであった場合、その時に作成された合成画像をＳ１０９における、ユーザの最終比較用としてＲＡＭ２０あるいは記憶装置２８に記憶することができる。

変更時には変更メニューが表示装置２６に表示され、寸法、フォント、色のいずれかを選択し、寸法を選択した場合にはさらに拡大・縮小のメニューが表示され、フォントを選択した場合にはさらにフォント種別が表示され、色を選択した場合には各種の色メニューが表示されてユーザが所望の寸法、フォント、色を順次選択する。変更の都度、その時点での合成画像をＳ１０９における、ユーザの最終比較用としてＲＡＭ２０あるいは記憶装置２８に記憶することができる。

図６は、本実施形態の処理フローチャートであり、プロセッサ１６のフローチャートである。

まず、プロセッサ１６は、入力装置２４から入力された印字内容５２を受信し（Ｓ２０１）、記憶装置２８に記憶するとともに、表示装置２６に当該印字内容５２を表示する（Ｓ２０２）。

次に、プロセッサ１６は、入力装置２４から取得した会場写真の画像データ５０を受信し（Ｓ２０３）、記憶装置２８に記憶する。会場写真の画像データ５０は、ユーザからの指示に応じ、ネットワーク１４を介して外部のサーバやコンピュータから取得してもよいし、ユーザのスマートフォン等の携帯端末に当該会場写真が記憶されている場合に、ネットワーク１４を介して当該携帯端末に記憶された会場写真を取得してもよい。

次に、プロセッサ１６は、会場写真の画像データ５０を受信すると、会場写真の画像データに基づいて掲示物の寸法を推定して表示装置２６に表示する（Ｓ２０４）。この処理は、図４におけるＳ１０６の処理に対応するものであり、機械学習モデルを用いてイベント会場の実際の寸法、及び掲示物の寸法を推定する。そして、ユーザが入力装置２４から掲示物の寸法の修正指示を行うと、この修正指示を受信し（Ｓ２０５）、掲示物寸法を修正する（Ｓ２０６）。なお、後に合成画像を視認しながらの修正操作があるので、このステップを省略してもよい。機械学習モデルの精度が高い場合には、このステップを省略し得る。

次に、会場写真の画像データ５０と掲示物の画像５４ａを合成する際の、合成位置を決定する（Ｓ２０７）。この処理は、図４におけるＳ１０８の処理に対応するものである。合成位置の決定は、ユーザによる手動決定と、プロセッサ１６による自動決定のいずれかであるが、ユーザが手動／自動のいずれかを選択できるように構成してもよい。

具体的には、プロセッサ１６は、表示装置２６に「手動」、「自動」のボタンを表示し、ユーザが手動を選択操作した場合には図５に示す手順でユーザが合成位置を手動で決定する。また、ユーザが自動を選択操作した場合には機械学習モデルを用いて合成位置を推定してユーザに提示する。自動決定の場合にも、最終的にはユーザの確認操作を経て決定するのが好ましい。機械学習モデルで画像データ５０における合成位置あるいは合成領域を推定して画像データ５０の当該位置あるいは領域を強調表示してユーザに提示する等の半自動処理としてもよい。

次に、プロセッサ１６は、決定した合成位置をＲＡＭ２０あるいは記憶装置２８に記憶し、会場写真の画像データ５０と寸法修正された掲示物の画像５４ａとを画像合成し（Ｓ２０８）、合成画像を表示装置２６に表示する（Ｓ２０９）。

次に、プロセッサ１６は、ユーザからの指示に基づいて合成画像がＯＫか否かを判定する（Ｓ２１０）。すなわち、表示装置２６に「ＯＫ」ボタン及び「変更」ボタンを表示し、ユーザが「ＯＫ」ボタンを操作すれば合成画像はＯＫと判定し、そのときに合成画像として表示されている掲示物の画像５４ａの寸法、フォント、背景色を印刷条件として確定する（Ｓ２１２）。そして、プリンタ１２に対してこれらの印刷条件を含む印刷制御データを出力して掲示物を印刷する（Ｓ２１３）。図７は、表示装置２６での表示例を示す。例えば合成画像の下部に「ＯＫ」ボタン７０及び「変更ボタン」７２が表示される。ユーザは入力装置２４からいずれかのボタンを選択操作して入力する。

他方、ユーザが「変更」ボタンを操作すれば合成画像はＯＫでないと判定し（Ｓ２１０でＮＯ）、プロセッサ１６は、ユーザ操作指示に応じて掲示物の画像５４ａの寸法、フォント、色等を変更して（Ｓ２１１）再び合成画像を作成し（Ｓ２０８）、表示装置２６に表示する（Ｓ２０９）。以上の処理を合成画像がＯＫとなるまで繰り返し実行する。また、Ｓ２１０でＮＯであった場合と、変更中にユーザが合成画像を保存した場合、この時点での合成画像をＳ２０９での合成画像比較用として、ＲＡＭ２０あるいは記憶装置２８に記憶する。

具体的には、図２に示すように、掲示物画像５４ａの寸法を縮小して掲示物画像５６ａとし、掲示物画像５６ａのフォントを変更して掲示物画像５８ａとし、掲示物画像５８ａの背景色を変更して掲示物画像６０ａとして合成画像５４～６０を順次生成する等である。

以上、本発明の実施形態について説明したが、本発明はこれに限定されるものではなく、種々の変更が可能である。

例えば、本実施形態では、印刷条件として寸法、フォント、色（背景色）を例示したが、これ以外にも模様や解像度、用紙の種類、材質等を含めてもよい。模様や解像度等に関しても、機械学習モデルで推定して初期値として模様や解像度等を設定し、ユーザからの変更操作指示に応じて種々変更すればよい。

また、本実施形態では、イベント会場の写真を撮影して画像データ５０として取得しているが、当該イベント会場の写真が存在しない場合には、当該イベント会場に類似する会場の画像データをインターネット上で検索して取得してもよい。例えば、イベント会場の名称が既知であれば、当該名称を検索キーとしてインターネット上で画像を検索し、類似する環境の画像データとして用いる等である。掲示物がステージ上の横断幕であれば、検索キーとしてさらに「ステージ」あるいは「舞台」を用いることも好適であろう。「類似」の程度は、検索して得られた画像データを表示装置２６に表示し、ユーザが目視で判断すればよい。過去に同じイベント会場でイベントが開催された事実があれば、そのときの画像データを類似する環境の画像データとして用いることができる。

具体的な処理アルゴリズムとしては、
（１）イベント会場の写真があればそれを画像データ５０として用いる
（２）イベント会場の写真がなければ、過去のイベント会場の写真を画像データとして用いる
（３）過去のイベント写真がなければ、インターネット上で検索する
となるが、これに限定されない。インターネットで検索してもイベント会場に類似する画像データが存在しない場合には、その旨をユーザに提示し、ユーザが手動でイベント会場の実際の寸法、ステージの実際の寸法等を入力する。但し、この場合には合成すべき画像データ５０が存在しないので、例えば実際の寸法に近いデフォルトのテンプレート画像を画像データ５０として用いてこれに掲示物の画像を合成して表示装置２６に表示する。

また、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ（例えばCPU：Central Processing Unit等）や、専用のプロセッサ（例えばGPU：Graphics Processing Unit、ASIC：Application Specific Integrated Circuit、FPGA：Field Programmable Gate Array、プログラマブル論理デバイス等）を含むものである。

また、プロセッサの動作は、１つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は実施形態において記載した順序のみに限定されるものではなく、適宜変更してもよい。

１０ 印刷物処理装置（コンピュータ）、１２ プリンタ、１４ ネットワーク、１６ プロセッサ、１８ ＲＯＭ、２０ ＲＡＭ、２２ 通信Ｉ／Ｆ、２４ 入力装置、２６ 表示装置、２８ 記憶装置、６２ 掲示物。

Claims (9)

1. 印刷物が設置される環境の画像データを取得する取得部と、
   プロセッサと、
   表示部と、
   を備え、前記プロセッサは、プログラムを実行することで、
   前記取得部で取得された前記画像データを入力し、
   前記環境に前記印刷物が設置された場合に、どのように見えるかを、前記印刷物の印刷条件に対応させて前記画像データ中に前記印刷物を合成して前記表示部に表示し、
   ユーザ操作に応じて前記印刷物の印刷条件を変更して表示することで前記印刷物の印刷条件を決定する、
   印刷物処理装置。
2. 前記印刷条件は、前記印刷物の寸法、色、模様、フォント、解像度の少なくともいずれかを含む、
   請求項１に記載の印刷物処理装置。
3. 前記プロセッサは、
   入力した前記画像データから前記環境の画像データに対する前記印刷物の少なくとも適応寸法を推定し、
   推定した適応寸法で前記画像データ中に前記印刷物を合成して前記表示部に表示する、
   請求項１，２のいずれかに記載の印刷物処理装置。
4. 前記プロセッサは、
   前記画像データ内の対象物の既知寸法に基づいて前記適応寸法を推定する、
   請求項３に記載の印刷物処理装置。
5. 前記プロセッサは、
   機械学習モデルを用いて前記画像データから前記適応寸法を推定する、
   請求項３に記載の印刷物処理装置。
6. 前記取得部は、前記環境の写真データを前記画像データとして取得する、
   請求項１に記載の印刷物処理装置。
7. 前記取得部は、前記環境の画像データが存在しない場合に、前記環境に類似する環境の画像データを取得する、
   請求項１に記載の印刷物処理装置。
8. 前記印刷物は、掲示物、壁紙、ポスター、カバーのいずれかである、
   請求項１～７のいずれかに記載の印刷物処理装置。
9. コンピュータに、
   印刷物が設置される環境の画像データを入力するステップと、
   前記環境に前記印刷物が設置された場合に、どのように見えるかを、前記印刷物の印刷条件に対応させて前記画像データ中に前記印刷物を合成して前記表示部に表示するステップと、
   ユーザ操作に応じて前記印刷物の印刷条件を変更して表示することで前記印刷物の印刷条件を決定するステップと、
   を実行させるプログラム。
   

Images