JP2004295441A

JP2004295441A - Automatic photograph preparing device and method

Info

Publication number: JP2004295441A
Application number: JP2003086577A
Authority: JP
Inventors: Satoshi Tatsumi; 聡辰巳; Tadashi Noma; 忠野間
Original assignee: Tatsumi Denshi Kogyo KK
Current assignee: Tatsumi Denshi Kogyo KK
Priority date: 2003-03-26
Filing date: 2003-03-26
Publication date: 2004-10-21

Abstract

<P>PROBLEM TO BE SOLVED: To provide an automatic photograph preparing device and method for changing an additional image to be combined with a photographic image with a high degree of freedom according to the tastes of a user. <P>SOLUTION: In this automatic photograph preparing device for play, a scribbling time is set after one of photographic images is selected (S31), and whether a stamp image is selected is decided (S32). When the stamp image is selected, the stamp image is plotted from three-dimensional data according to elapsed time in a status that a touch pen is depressed (S33). Then, whether a scrabbling pen is selected or not is decided. When the scrabbling pen is selected, a stereoscopic image generated from the three-dimensional data are plotted along the locus of the touch pen (S35). The above processing is repeated until the scrabbling time ends (S36). Thus, the three-dimensional data are prepared according to the locus and depressing time of the touch pen so that it is possible for a user to efficiently and easily generate a composite image matching his or her tastes. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、利用者をカメラで撮影し、その撮影画像に基づき生成される合成画像を写真として出力する自動写真作成装置に関する。
【０００２】
【従来の技術】
従来より、利用者をカメラで撮影し、その撮影画像を写真として出力する遊戯用写真作成装置が知られている。このような遊戯用写真作成装置は、遊戯性または娯楽性が高いことから、撮影画像と合成すべき画像（以下「付加画像」という）を、利用者の嗜好に応じて、予め用意された多種多様な背景画像および前景画像から選択したり、タッチペンやライトペン等のペン型入力手段を用いて利用者が自由に描いたりできるように構成されているものが多い。利用者によるこのような行為は、撮影画像に対してなされるため、「落書き」と呼ばれる。
【０００３】
この落書きの例としては、ペン型入力手段により所定の太さや色などを有する曲線を画面上に自由に描く動作や、予め用意された複数の比較的小さな画像の１つを選択して画面上の任意の位置に貼り付け合成する動作などがある。前者の動作は「落書きペンによる落書き」と呼ばれ、画面上に当該曲線を形成する命令または曲線を形成するための位置を示すカーソルは「落書きペン」と呼ばれる。また、後者の画像は「スタンプ」と呼ばれる。
【０００４】
【発明が解決しようとする課題】
しかし、遊戯用写真作成装置において、上記落書きペンまたは上記スタンプは、１つまたは複数が予め用意されるので、その種類には限界がある。そのため、利用者は、落書きペンによる軌跡やスタンプの貼り付け位置または貼り付け数を自由に決定できるとしても、用意された種類以外の外観が生じるような落書きペンまたはスタンプによる落書きをすることができない。よって、従来の遊戯用写真作成装置では、落書きペンまたはスタンプを利用者の嗜好に応じた外観が生じるように変化させることによる遊戯性または娯楽性を得ることができない。
【０００５】
そこで本発明では、撮影画像と合成すべき付加画像を利用者の嗜好に応じて高い自由度で変化させることができる自動写真作成装置および自動写真作成方法を提供することを目的とする。
【０００６】
【課題を解決するための手段および発明の効果】
第１の発明は、所定の撮影領域における被写体である利用者を撮影する撮像手段と、当該撮像手段により得られる撮影画像を含む合成画像を表示する表示手段と、当該合成画像を写真として出力する出力手段とを備える自動写真作成装置であって、
前記利用者による操作を受け付ける入力手段と、
前記入力手段により受け付けられた操作に応じて、前記撮影画像に合成されるべき付加画像を生成するための３次元モデルデータに対して所定の属性を設定する設定手段と、
前記設定手段により設定される所定の属性に応じて、前記３次元モデルデータから２次元の画像である前記付加画像を生成する付加画像生成手段と、
前記付加画像と前記撮影画像とを合成することにより前記合成画像を生成する合成手段と
を備えることを特徴とする。
【０００７】
このような第１の発明によれば、予め用意された（または利用者により作成された）１つまたは複数の３次元データに基づいて入力手段の操作に応じた新たな属性を有する付加画像を作成する。このことにより、撮影画像と合成すべき付加画像を利用者の嗜好に応じて高い自由度で変化させることができる。したがって、例えば落書きペンによる画像またはスタンプ画像のような付加画像を利用者の嗜好に応じた外観が生じるように変化させることによる遊戯性または娯楽性を得ることができる。
【０００８】
また、当該３次元データが予め記憶される場合、当該３次元データのみから多様な付加画像を生成することができるので、必要となる記憶容量を比較的小さくすることができる。
【０００９】
第２の発明は、第１の発明において、
前記入力手段は、入力位置を示す座標を取得可能なペン型入力手段であることを特徴とする。
【００１０】
このような第２の発明によれば、ペン型入力手段の操作により付加画像が作成されるため、利用者は簡単な操作で自らの嗜好に合った合成画像を効率よく容易に生成することができる。特に、遊技用写真作成装置では、操作の習熟を利用者に期待できず、また撮影時間や落書き時間などの利用時間に制限が設けられているため、ペン型入力手段により簡単かつ直感的に操作可能である上記構成は極めて有効である。
【００１１】
第３の発明は、第１または第２の発明において、
前記入力手段は、前記表示手段と一体的に構成されることを特徴とする。
【００１２】
このような第３の発明によれば、利用者は表示手段に表示される画像（例えば撮影画像やペンの軌跡など）を見ながら付加画像を作成できるので、利用者は自らの嗜好に合った合成画像を効率よく容易に生成することができ、また撮影画像に対して化粧を行っているかのような落書きによる遊戯性または娯楽性を得ることができる。
【００１３】
第４の発明は、第１から第３の発明のいずれかにおいて、
前記設定手段は、前記入力手段による入力位置の軌跡に応じて前記所定の属性を設定し、
前記付加画像生成手段は、前記３次元モデルデータから前記軌跡に応じた付加画像を作成することを特徴とする。
【００１４】
このような第４の発明によれば、例えばタッチペンなどの入力手段の軌跡に応じて新たな付加画像が作成されるため、利用者は簡単な操作で自らの嗜好に合った合成画像を効率よく容易に生成することができる。特に、遊技用写真作成装置では、操作の習熟を利用者に期待できず、また撮影時間や落書き時間などの利用時間に制限が設けられているため、軌跡を利用することにより簡単かつ直感的に操作可能である上記構成は極めて有効である。
【００１５】
第５の発明は、第１から第３までのいずれかの発明において、
前記設定手段は、前記入力手段による所定の入力状態の継続時間に応じて前記所定の属性を設定し、
前記付加画像生成手段は、前記３次元モデルデータから前記経過時間に応じた付加画像を作成することを特徴とする。
【００１６】
このような第５の発明によれば、例えばタッチペンなどの入力手段の入力状態の継続時間（例えば押下時間）に応じて新たな付加画像が作成されるため、利用者は簡単な操作で自らの嗜好に合った合成画像を効率よく容易に生成することができる。特に、遊技用写真作成装置では、操作の習熟を利用者に期待できず、また撮影時間や落書き時間などの利用時間に制限が設けられているため、入力状態の継続時間に応じて簡単かつ直感的に操作可能である上記構成は極めて有効である。
【００１７】
第６の発明は、第１から第３までのいずれかの発明において、
前記設定手段は、前記入力手段に対して前記利用者により加えられる押圧力に応じて前記所定の属性を設定し、
前記付加画像生成手段は、前記３次元モデルデータから前記押圧力に応じた付加画像を作成することを特徴とする。
【００１８】
このような第６の発明によれば、例えばタッチペンなどの入力手段の押圧力（例えば筆圧）に応じて新たな付加画像が作成されるため、利用者は簡単な操作で自らの嗜好に合った合成画像を効率よく容易に生成することができる。特に、遊技用写真作成装置では、操作の習熟を利用者に期待できず、また撮影時間や落書き時間などの利用時間に制限が設けられているため、押圧力により簡単かつ直感的に操作可能である上記構成は極めて有効である。
【００１９】
第７の発明は、所定の撮影領域における被写体である利用者を撮影する撮影ステップと、当該撮影ステップにより得られる撮影画像を含む合成画像を表示する表示ステップと、当該合成画像を写真として印刷する出力ステップとを備える自動写真作成方法であって、
前記利用者による操作を受け付ける入力ステップと、
前記入力ステップにおいて受け付けられた操作に応じて、前記撮影画像に合成されるべき付加画像を生成するための３次元モデルデータに対して所定の属性を設定する設定ステップと、
前記設定ステップにおいて設定される所定の属性に応じて、前記３次元モデルデータから２次元の画像である前記付加画像を生成する付加画像生成ステップと、
前記付加画像と前記撮影画像とを合成することにより前記合成画像を生成する合成ステップと
を含むことを特徴とする。
【００２０】
第８の発明は、第７の発明に記載の自動写真作成方法をコンピュータに実行させることを特徴とするプログラムである。
【００２１】
第９の発明は、第７の発明に記載の自動写真作成方法により写真として印刷されたことを特徴とする印刷媒体である。
【００２２】
【発明の実施の形態】
以下、本発明の一実施形態につき添付図面を参照して説明する。
＜１．全体構成＞
図１は、本発明の一実施形態に係る自動写真作成装置である遊戯用写真作成装置を側面から見た図であり、図２は、この遊戯用写真作成装置の本体部４を正面から（被写体としての利用者Ｕから見た）図である。以下、図１および図２を参照して、本実施形態に係る遊戯用写真作成装置の全体構成について説明する。
【００２３】
この遊戯用写真作成装置は、利用者Ｕが入る撮影室２と、利用者Ｕの撮影画像を含む合成画像を生成して写真シール（または写真カード）として出力する本体部４とを備えており、撮影室２内には利用者Ｕの背景を提供する背景パネルを備えている。
【００２４】
本体部４は、利用者Ｕを撮影する撮像手段としてのカメラ１０と、当該カメラ１０の上方の適宜の位置に配置され閃光を発するフラッシュ１１と、当該カメラ１０の下方に配置されたＣＲＴ（ＣａｔｈｏｄｅＲａｙＴｕｂｅ）または液晶ディスプレイパネル等からなる表示装置であるプレビューモニタ２２と、撮影画像を表示し、利用者Ｕによる自由な作図（落書き）を行うための画面や、操作画面などを提供する液晶ディスプレイおよび当該操作画面を覆う操作位置検出用の透明シートからなる液晶タッチパネル２０と、液晶タッチパネル２０に対する操作に使用されるタッチペン２１とを備える。なお、図ではこのタッチペン２１は１つ備えられるが、２つ以上備えられてもよい。また、液晶タッチパネル２０は、上記透明シートを含まない静電誘導方式の操作位置検出機能を有する液晶タッチパネルであってもよい。カメラ１０は、撮影室２の床面上に存在する利用者Ｕを被写体として撮影し、その撮影画像を表す画像信号を出力する。典型的には、ＣＣＤ（電荷結合素子）を利用してデジタル画像信号を生成するデジタルカメラが使用される。プレビューモニタ２２は、上記画像信号の表す画像をリアルタイムで表示するように構成されており、カメラ１０によって得られる撮影画像を確認するために使用される。液晶タッチパネル２０は、後述の落書き処理の際に撮影画像を指定するための操作手段や、落書きを行うための操作手段などとして機能する。
【００２５】
また本体部４は、コンピュータを中心に構成され各部の制御や上記画像合成等の画像処理を行う主制御装置およびＩ／Ｏ制御装置や、カメラ１０により得られる撮影画像または当該撮影画像を含む合成画像を写真シール（または写真カード）として出力するプリンタ等を内蔵している。さらに、本体部４は、前面下方にコイン投入口２６を、側面に写真シールの取出口２８を、それぞれ備えている。さらにまた、本体部４は、本遊戯用写真作成装置の動作中は常時点灯される照明装置２０１Ｌ，２０１Ｒをカメラ１０の左右にそれぞれ備えている。
【００２６】
＜２．機能的構成＞
図３は、本実施形態に係る遊戯用写真作成装置の要部を機能面から見た構成を示すブロック図である。この遊戯用写真作成装置は、機能的には、撮像部５２と、確認表示部５４と、メイン表示・操作部６２と、出力部６４と、照明部７０と、Ｉ／Ｏ制御部７２と、主制御部８０とから構成される。
【００２７】
この構成において、撮像部５２は、ＣＣＤ等の撮像素子を用いて構成されるカメラ１０に相当し、リアルタイムに画像を取り込んで当該画像（この画像は「スルー画像」と呼ばれることがあるが、以下では「モニタ用撮影画像」というものとする）を表す画像信号を出力する。この画像信号は主制御部８０に入力されて、その内部のメモリにモニタ用画像データとして一時的に記憶される。また、このモニタ用画像データは、モニタ用画像信号として主制御部８０から確認表示部５４に供給される。確認表示部５４は、プレビューモニタ２２に相当し、そのモニタ用画像信号に基づきモニタ用撮影画像をリアルタイムで表示する。
【００２８】
メイン表示・操作部６２は、液晶タッチパネル２０に相当し、後述の落書き処理に関連する利用者Ｕの操作や、シャッター操作、プリント出力のための操作等を受け付け、これらの操作を示す信号は、操作信号として主制御部８０に入力される。いま、利用者Ｕの撮影のためにシャッターボタン（不図示）が押下されたとすると、主制御部８０からの指示に基づき、数秒程度の予め決められた時間の経過後にカメラ１０の撮影方向にフラッシュ１１から閃光が放たれ、利用者Ｕの撮影画像を表す信号として撮像部５２から出力される画像信号が主制御部８０に入力され、主制御部８０内のメモリまたは補助記憶装置としてのハードディス装置等に撮影画像データとして格納される。出力部６４は、本体部４に内蔵されるプリンタに相当し、主制御部８０からの指示に基づき、この撮影画像データの表す画像を写真シール（または写真カード）として出力する。
【００２９】
照明部７０は、本体部４における照明装置２０１Ｌ，２０１Ｒとフラッシュ１１とに相当し、主制御部８０からの指示に基づきＩ／Ｏ制御部７２によって点灯／消灯および調光が制御される。
【００３０】
Ｉ／Ｏ制御部７２は、本体部４に内蔵されるＩ／Ｏ制御装置に相当し、主制御部８０からの指示に基づき、照明部７０を制御すると共に、後述のコイン検出部（不図示）からの検出信号等の入力信号を主制御部８０へ転送する。
【００３１】
主制御部８０は、本体部４に内蔵され、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）や、メモリ、フレームバッファ、タイマー、補助記憶装置などを含むコンピュータを中心に構成される主制御装置に相当し、内部メモリに格納された所定プログラムをＣＰＵが実行することにより、上述のようにして入力される操作信号に基づき各部を制御するために、上述のように各部に指示を出す。また、撮影画像に対する後述の落書き処理を行い、操作信号に基づき上記の撮影画像データの一部を書き換えることにより、撮影画像に所定画像を描画した画像である合成画像を生成する。生成された画像はフレームバッファに書き込まれることにより、メイン表示・操作部６２に表示される。なお、ここで描画されるうる画像としては、後述する落書き処理により生成される立体形状の画像のほか、予め複数種類の３次元または２次元の形状を有する画像（典型的には星形を表す画像やハート形を表す画像のような周知パターンの画像であるが、これに限定されるものではなく、例えば予め取得された撮影画像であってもよい）が用意されて主制御部８０内のメモリまたは補助記憶装置に格納されていてもよい。上記のような画像合成が終了すると、その後、出力部からは合成画像が写真シール等として出力される。出力された写真シール等は、本体部４の側面に設けられた取出口２８から取り出される。
【００３２】
上記の構成要素の他、本体部４におけるコイン投入口２６に投入されたコインを検出するためのコイン検出部（不図示）が更に本体部４に設けられており、主制御部８０は、コイン検出部での検出結果に基づき、利用者Ｕに所定時間だけ撮影や撮影画像に対する描画等による合成画像の生成など、本遊戯用写真作成装置によるプレイを許容するように各部を制御する。このコイン検出部やその検出結果に基づく主制御部８０による制御動作は、従来の遊戯用写真作成装置と同様であって周知であるので、その詳しい説明を省略する。
【００３３】
なお、主制御装置において実行される上記所定プログラムは、例えば、そのプログラムを記録した記録媒体であるＣＤ−ＲＯＭによって提供される。すなわち、上記所定プログラムの記録媒体としてのＣＤ−ＲＯＭが主制御装置内に補助記憶装置として内蔵されたＣＤ−ＲＯＭ駆動装置に装着され、そのＣＤ−ＲＯＭから所定プログラムが読み出されて補助記憶装置としてのハードディスク装置にインストールされる。そして、本遊戯用写真作成装置の起動のための所定操作がなされると、ハードディスク装置にインストールされた所定プログラムは、主制御装置内のメモリに転送されてそこに一時的に格納され、主制御装置内のＣＰＵによって実行される。これにより、主制御装置による上記各部の制御や後述の画像処理が実現される。
【００３４】
＜３．動作＞
上述のように本実施形態における主制御部８０の動作は、その内部のＣＰＵが上記所定プログラムを実行により実現される。図４は、このようにして実現される主制御部８０の動作を示すフローチャートである。本実施形態では、コイン投入口２６に所定のコインが投入されると、主制御部８０（主制御装置）は、以下のように動作する。
【００３５】
まず、主制御部８０は、装置の初期化処理、すなわち各ハードウェアの初期化や、設定値として主制御部８０に記憶されるデータの初期化処理を行う（ステップＳ１０）。
【００３６】
次に、利用者Ｕを撮影するための撮影処理が行われる（ステップＳ２０）。この撮影処理が開始されると、主制御部８０は、まず、予め決められた時間（以下「撮影時間」という）が経過するとタイムアウトとなるようにタイマーを設定し、そのタイマーをスタートさせる。その後、タイムアウトとなるまで、図示されないシャッターボタンまたはメイン表示・操作部６２の画面に表示されるシャッターボタンが押下されたか否かを操作信号によって調べる。この間にシャッターボタンが押下されると、主制御部８０は、撮影開始を利用者にメイン表示・操作部６２の画面で知らせ、数秒程度の予め決められた時間の経過後に撮像部（カメラ）５２に撮影信号（シャッター信号）を送る。これにより、撮像部５２のシャッター動作と同期して照明部（フラッシュ）７０が閃光を放ち、主制御部８０がキャプチャ処理を開始する。すなわち、主制御部８０は、照明部（フラッシュ）７０からの閃光で照らされた利用者Ｕの撮影画像を表す信号として撮像部５２から出力される画像信号を受け取り、メモリまたは補助記憶装置内に撮影画像の画像ファイルとして格納する。このようにして所定の撮影時間の間、シャッターボタンが押下される毎にキャプチャ処理が実行され、撮影画像が画像ファイルとして一時的に保存される。撮影時間が経過すると、タイムアウトとなって撮影処理を終了する。また、撮影時間の経過前であっても、メイン表示・操作部６２に対して撮影処理の終了を指示する操作が行われると、撮影処理を終了する。
【００３７】
続いて、落書きのための利用者Ｕによる操作を受け付け、当該操作に応じた画像処理を含む落書き処理が行われる（ステップＳ３０）。ここで、この落書き処理の詳しい処理（サブルーチン）について説明する。図５は、このサブルーチンの手順を示すフローチャートである。
【００３８】
まず、撮影画像が複数取得された場合、主制御部８０は、そのうちのひとつを利用者に選択させた後、落書き処理のために予め決められた時間（以下「落書き時間」という）を設定する（ステップＳ３１）。すなわち、撮影画像が複数取得された場合、まずこれらの撮影画像をメイン表示・操作部６２の画面に表示し、いずれの画像が選択（例えばタッチペン２１で画面の所定部分が押下）されたかを操作信号によって調べ、選択された撮影画像を落書き対象となるべき撮影画像（以下「対象撮影画像」という）として設定する。さらに、予め決められた時間（以下「落書き時間」という）が経過するとタイムアウトとなるようにタイマーを設定し、そのタイマーをスタートさせる。そして、この落書き時間を示すタイムアウトまでの残り時間、対象撮影画像、および各種落書きのための操作アイコン等を含む落書きのための初期画面がメイン表示・操作部６２に表示される。
【００３９】
次に、主制御部８０は、落書きのため予めメイン表示・操作部６２の初期画面に表示された所定の立体形状を有する複数のスタンプ画像の中から、いずれかの画像を選択するための操作がメイン表示・操作部６２において行われたか否かを判定する（ステップＳ３２）。この判定の結果、このようなスタンプ画像の選択操作が行われていない場合は、そのままステップＳ３４の処理へ進み、このような選択操作が行われた場合には、当該選択操作に応じて、後述する３次元スタンプ描画処理を行い（ステップＳ３３）、その後にステップＳ３４の処理へ進む。
【００４０】
ステップＳ３４では、落書きのためメイン表示・操作部６２の初期画面上に予め用意された所定の軌跡を有する複数の（仮想的な）落書きペンの中から、いずれかのペンを選択するための操作がメイン表示・操作部６２において行われたか否かを判定する。この判定の結果、このような落書きペンの選択操作が行われていない場合は、そのままステップＳ３６の処理へ進み、このような選択操作が行われた場合には、当該選択操作に基づき、後述する３次元落書きペン描画処理を行い（ステップＳ３５）、その後にステップＳ３６の処理へ進む。
【００４１】
ステップＳ３６では、落書きが終了したか否か、すなわち落書き時間が経過したか、または落書き時間の経過前にメイン表示・操作部６２に対する操作により落書きが中止（または印刷開始が指示）されたか否かを判定する。この判定の結果、落書きが終了した場合、主制御部８０は、図４に示す処理へ復帰し、ステップＳ４０における印刷処理へ進む。落書き処理が終了しない場合には、ステップＳ３２の処理に戻り、落書き処理が終了するまで上記処理が繰り返される。
【００４２】
なお、図５に示す落書き処理では、３次元スタンプ描画処理および３次元落書きペン描画処理のみが含まれるが、これらに限定されるものではなく、合成画像を作成するための手書き画像描画処理や所定の画像処理などが含まれていてもよいし、予め用意された複数の背景画像または前景画像（フレーム）からひとつが適宜選択されてもよい。また、対象撮影画像の選択はステップＳ３１のほか、例えばステップＳ３６の処理中または処理直前において再度または繰り返して何度も行われてもよい。
【００４３】
図４に示すステップＳ４０における印刷処理では、主制御部８０は、印刷指示を示す操作信号を受け取ると、これに基づき、その時点でメイン表示・操作部６２に表示されている合成画像の出力を出力部（プリンタ）６４に指示する。これにより、出力部６４としてプリンタは、その合成画像を写真シールとして出力する。これにより、印刷処理が終了する。出力された写真シールは、本体部４の側面に設けられた取出口２８から利用者Ｕによって取り出される。この印刷処理が終了すると、全ての処理は終了され、所定の金額に相当するコインが新たにコイン投入口２６に投入されるまで待機状態となる。この待機状態において、所定の金額に相当するコインが新たに投入されると、上記と同様の処理（ステップＳ１０〜Ｓ４０）が実行され、その後、再びステップＳ１０へ戻る。
【００４４】
ここで、図５に示すステップＳ３３の３次元スタンプ描画処理についての詳しい処理（サブルーチン）について説明する。図６は、このサブルーチンの手順を示すフローチャートである。
【００４５】
まず、主制御部８０は、メイン表示・操作部６２の画面の中から選択されたスタンプ画像に対応する、所定の立体形状を作成するための３次元モデルを構成するデータ（以下「３次元データ」という）を補助記憶装置から呼び出し、３次元画像処理のための各種設定値とともにメモリに一時記憶する（ステップＳ３３１）。なお、スタンプ画像の選択操作は、メイン表示・操作部６２の画面における所定部分をタッチペン２１により押下する動作、より詳しくはタッチペン２１を一旦画面上に下ろした後に上げる（画面から離す）動作によりなされる。したがって、スタンプ画像が選択されたとき、タッチペン２１は上げられている。
【００４６】
次に、メイン表示・操作部６２に対しタッチペン２１が下ろされる操作がなされたか否かを判定する（ステップＳ３３２）。この判定の結果、タッチペン２１が未だ下ろされていない場合には、下ろされるまで待機し、タッチペン２１が下ろされた場合に、ステップＳ３３３の処理へ進む。なお、上記待機中には所定のキャンセルのための操作に基づくキャンセル処理または所定時間の経過に基づくタイムアウト処理がなされるものとする。
【００４７】
続いて、主制御部８０は、メイン表示・操作部６２の画面上でのタッチペン２１の位置座標（Ｘ，Ｙ）と、タッチペン２１が当該画面上に下ろされたときからの経過時間ＴＤとを取得する（ステップＳ３３３）。
【００４８】
そして、上記ステップＳ３３１において呼び出された所定の３次元データから、この経過時間ＴＤに応じて属性を変化させた新たな３次元データを作成する（ステップＳ３３４）。ここで、上記属性は、３次元データが構成する立体の配置位置、向き、大きさ、色、または表面の模様や反射率などのほか、球に徐々に近似させる（丸みを付ける）ような変形を行う場合や、放射状の星形に徐々に近似させるような変形を行う場合などに生じる、あらゆる外観を含む。また、経過時間ＴＤは、上記属性の変化量や変化率、変形率など、上記属性の変化量または変化率と関連づけられる。例えば、経過時間ＴＤが大きくなるほど、色が赤くなったり、大きさが大きくなったり、形が丸みを帯びたりするように、属性変化と経過時間ＴＤとが関連づけられる。なお、上記属性の変化は、例えば、経過時間ＴＤが大きくなることにより、最大値まで増加すると次に最小値まで戻り再び増加するような循環的な変化、または最大値まで増加すると減少に転じさらに最小値まで減少すると増加に転じるような振動的な変化が好ましい。図７は、このようなスタンプ画像の画面上での属性の変化を示す図である。図７（ａ）に示すスタンプ画像は、タッチペン２１で押下された（タッチペン２１が下ろされた）状態で維持されると時計回りに回転し、所定時間の経過後には、時計回りに９０度回転された図７（ｂ）に示すスタンプ画像となるように属性（配置方向）が変化する。
【００４９】
さらに、このようにして作成された３次元データに対して、所定のレンダリングが行われることにより立体形状を表す２次元のスタンプ画像が作成される（ステップＳ３３５）。このレンダリングには、所定の座標変換、隠面消去、シェーディング、およびテクスチャマッピングなどの各種の手法が含まれるが、これらの手法は公知であるためその詳細な内容については説明を省略する。なお、ステップＳ３３４での属性の変化を上記レンダリングにより実現することができる場合、ステップＳ３３４，Ｓ３３５の両処理は一体的になされる。すなわち、上記ステップＳ３３１において呼び出された所定の３次元データに対して、経過時間ＴＤに応じて属性を変化させるように所定のレンダリングが行われることにより上記スタンプ画像が作成される。
【００５０】
この２次元のスタンプ画像は、画面上のタッチペン２１の位置座標（Ｘ，Ｙ）に対応するフレームバッファのアドレス位置を基点として描画される（ステップＳ３３６）。このことにより、メイン表示・操作部６２に当該２次元のスタンプ画像が表示される。具体的には、すでに表示されている対象撮影画像上の一部分に、当該スタンプ画像が合成表示（例えば上書き）される。なお、ペンが画面上に下ろされたまま動かされる（ドラッグされる）場合、上記位置座標（Ｘ，Ｙ）が変化するため、この変化に応じて上記２次元のスタンプ画像の描画位置も移動する。
【００５１】
続いて、メイン表示・操作部６２に対しタッチペン２１が上げられる操作がなされたか否かを判定する（ステップＳ３３７）。この判定の結果、タッチペン２１が下ろされている場合、ステップＳ３３３の処理に戻り、ペンが上げられるまで上記処理が繰り返される（Ｓ３３７→Ｓ３３３→Ｓ３３４→Ｓ３３５→Ｓ３３６→Ｓ３３７）。ペンが上げられた場合、３次元スタンプ画像描画処理は終了して図５に示す処理へ復帰し、ステップＳ３４の処理へ進む。前述したように、ステップＳ３４では、いずれかの落書きペンを選択するための操作がメイン表示・操作部６２において行われたか否かが判定され、この判定の結果、当該選択操作が行われた場合には、３次元落書きペン描画処理が行われる（ステップＳ３５）。
【００５２】
ここで、上記ステップＳ３５の３次元落書きペン描画処理についての詳しい処理（サブルーチン）について説明する。図８は、このサブルーチンの手順を示すフローチャートである。
【００５３】
まず、主制御部８０は、メイン表示・操作部６２の画面の中から選択された落書きペンに対応する所定の３次元データを補助記憶装置から呼び出し、３次元画像処理のための各種設定値とともにメモリに一時記憶する（ステップＳ３５１）。なお、落書きペンの選択操作もスタンプ画像の選択操作と同様、タッチペン２１を一旦メイン表示・操作部６２の画面上に下ろした後に上げる動作によりなされるので、落書きペンが選択されたとき、タッチペン２１は上げられている。
【００５４】
次に、メイン表示・操作部６２に対しタッチペン２１が下ろされる操作がなされたか否かを判定する（ステップＳ３５２）。この判定の結果、タッチペン２１が未だ下ろされていない場合には、下ろされるまで待機し、タッチペン２１が下ろされた場合に、ステップＳ３５３の処理へ進む。なお、上記待機中には所定のキャンセル処理またはタイムアウト処理がなされる。
【００５５】
続いて、主制御部８０は、メイン表示・操作部６２の画面上でのタッチペン２１の現在の位置座標（Ｘ，Ｙ）を取得し、連続的な軌跡を示す座標列としてとしてメモリに記憶する（ステップＳ３５３）。
【００５６】
さらに、画面上のタッチペン２１の位置座標（Ｘ，Ｙ）に対応するフレームバッファのアドレス位置に、上記軌跡を示す連続的な線が描画される（ステップＳ３５４）。このことにより、メイン表示・操作部６２に当該軌跡が表示される。具体的には、すでに表示されている対象撮影画像上の一部分に、当該軌跡が合成表示される。
【００５７】
続いて、メイン表示・操作部６２に対しタッチペン２１が上げられる操作がなされたか否かを判定する（ステップＳ３５５）。この判定の結果、タッチペン２１が下ろされている場合、ステップＳ３５３の処理に戻り、ペンが上げられるまで上記処理が繰り返される（Ｓ３５５→Ｓ３５３→Ｓ３５４→Ｓ３５５）。ペンが上げられた場合には、ステップＳ３５６の処理へ進む。
【００５８】
次に、上記ステップＳ３５１において呼び出された所定の３次元データから、上記ステップＳ３５３において得られた座標列により示される当該軌跡を変形方向（の基準線）とする新たな３次元データを作成する（ステップＳ３５６）。具体的には、軌跡により与えられた変形方向の基準線に沿って引き延ばすように上記所定の３次元データを変形することにより、新たな３次元データを作成する。したがって、ここでは３次元データの形状（例えば奥行き）という属性が変化することになる。
【００５９】
さらに、このようにして作成された３次元データに対して、所定のレンダリングが行われることにより立体形状を表す２次元画像が作成される（ステップＳ３５７）。なお、ステップＳ３５６，Ｓ３５７の両処理は、ステップＳ３３４，Ｓ３３５の両処理と同様に、一体的になされる場合も考えられる。この場合には、上記ステップＳ３５１において呼び出された所定の３次元データに対して、上記軌跡に応じて形状を変化させるように所定のレンダリングが行われることにより上記２次元画像が作成される。
【００６０】
続いて、上記ステップＳ３５４において描画された軌跡を示す線が消去された後、上記２次元画像は、軌跡を示す線の位置に対応するフレームバッファのアドレス位置に描画される（ステップＳ３５８）。このことにより、メイン表示・操作部６２に当該２次元画像が、すでに表示されている対象撮影画像上の一部分に合成表示される。その後、３次元落書きペン描画処理は終了して図５に示す処理へ復帰し、ステップＳ３６の処理へ進む。
【００６１】
図９は、このような３次元落書きペン描画処理における表示例を示す図である。メイン表示・操作部６２の画面上にタッチペン２１が下ろされて動かされると、図９（ａ）に示すような軌跡を示す線が描画される。その後、タッチペン２１が上げられると、図９（ｂ）に示すような立体形状を有する２次元画像が描画される。
【００６２】
＜４．変形例＞
ここで、上記ステップＳ３５の３次元落書きペン描画処理についての変形例を示す詳しい処理（サブルーチン）について説明する。図１０は、この変形例であるサブルーチンの手順を示すフローチャートである。
【００６３】
まず、主制御部８０は、メイン表示・操作部６２の画面の中から選択された落書きペンに対応する所定の３次元データを補助記憶装置から呼び出し、３次元画像処理のための各種設定値とともにメモリに一時記憶する（ステップＳ５５１）。次に、メイン表示・操作部６２に対しタッチペン２１が下ろされる操作がなされたか否かを判定する（ステップＳ５５２）。この判定の結果、タッチペン２１が未だ下ろされていない場合には、下ろされるまで待機し、タッチペン２１が下ろされた場合に、ステップＳ５５３の処理へ進む。なお、上記待機中には所定のキャンセル処理またはタイムアウト処理がなされる。
【００６４】
さらに、主制御部８０は、メイン表示・操作部６２の画面上でのタッチペン２１の初期位置座標（Ｘ０，Ｙ０）を取得する（ステップＳ３５３）。この初期位置座標（Ｘ０，Ｙ０）は、画面上での落書きペンが最初に下ろされる位置に相当する。ここでは前述のように軌跡を示す線が引かれるのではなく、この初期位置から動かされる落書きペンの軌跡に沿って、立体形状を表す２次元画像が画面上に順次描画される。
【００６５】
続いて、主制御部８０は、メイン表示・操作部６２の画面上でのタッチペン２１の現在の位置座標（Ｘ，Ｙ）を取得し、初期位置座標（Ｘ０，Ｙ０）からの連続的な軌跡を示す座標列としてとしてメモリに記憶する（ステップＳ５５４）。もちろん、タッチペン２１が上記画面上に下ろされた直後には、タッチペン２１の現在の位置座標（Ｘ，Ｙ）は初期位置座標（Ｘ０，Ｙ０）と等しいが、その後タッチペン２１が動かされるにつれて、その軌跡を示す新たな座標列が得られる。
【００６６】
そして、上記ステップＳ５５１において呼び出された所定の３次元データから、上記ステップＳ５５４において得られた座標列により示される軌跡を変形方向（の基準線）とする新たな３次元データを作成する（ステップＳ５５５）。なお、この変形方向の基準線は所定の長さの初期値を有しており、タッチペン２１が上記画面上に下ろされた直後であっても所定の形状を有する３次元データが作成される。ここで、上記軌跡は変形方向を規定するが、これに限定されるわけではなく、例えば、３次元データにより表される立体図形の所定部分が延ばされるように変形されるときの変形位置や変形量を規定してもよい。
【００６７】
さらに、このようにして作成された３次元データに対して、所定のレンダリングが行われることにより立体形状を表す２次元画像が作成される（ステップＳ５５６）。続いて、上記２次元画像は、初期位置座標（Ｘ０，Ｙ０）に対応するフレームバッファのアドレス位置を基点として描画される（ステップＳ５５７）。このことにより、メイン表示・操作部６２に当該２次元画像が、すでに表示されている対象撮影画像上の一部分に合成表示される。
【００６８】
続いて、メイン表示・操作部６２に対しタッチペン２１が上げられる操作がなされたか否かを判定する（ステップＳ５５８）。この判定の結果、タッチペン２１が下ろされている場合、ステップＳ５５４の処理に戻り、ペンが上げられるまで上記処理が繰り返される（Ｓ５５８→Ｓ５５４→Ｓ５５５→Ｓ５５６→Ｓ５５７→Ｓ５５８）。ペンが上げられた場合、３次元落書きペン描画処理は終了して図５に示す処理へ復帰し、ステップＳ３６の処理へ進む。
【００６９】
次に、上記ステップＳ３３の３次元スタンプ画像描画処理についての変形例を示す詳しい処理（サブルーチン）について説明する。図１１は、この変形例であるサブルーチンの手順を示すフローチャートである。
【００７０】
まず、主制御部８０は、メイン表示・操作部６２の画面の中から選択されたスタンプ画像に対応する３次元データを補助記憶装置から呼び出し、３次元画像処理のための各種設定値とともにメモリに一時記憶する（ステップＳ５３１）。次に、メイン表示・操作部６２に対しタッチペン２１が下ろされる操作がなされたか否かを判定する（ステップＳ５３２）。この判定の結果、タッチペン２１が未だ下ろされていない場合には、下ろされるまで待機し、タッチペン２１が下ろされた場合に、ステップＳ５３３の処理へ進む。
【００７１】
続いて、主制御部８０は、メイン表示・操作部６２の画面上でのタッチペン２１の位置座標（Ｘ，Ｙ）と、タッチペン２１が利用者の手により当該画面上に押しつけられるときの押圧力（以下「筆圧」という）Ｆｔとを取得する（ステップＳ５３３）。なお、この筆圧を検知可能であるタッチペンには静電結合方式などが用いられるが、その構成は公知であるため説明を省略する。
【００７２】
そして、上記ステップＳ５３１において呼び出された所定の３次元データから、この筆圧Ｆｔに応じて属性を変化させた新たな３次元データを作成する（ステップＳ５３４）。この属性の変化の例としては、筆圧が大きくなるほどスタンプ画像が大きくなる変化などが考えられるが、この属性の変化にはあらゆる外観上の変化が含まれることについては前述した通りである。さらに、このようにして作成された３次元データに対して、所定のレンダリングが行われることにより立体形状を表す２次元のスタンプ画像が作成される（ステップＳ５３５）。なお、ステップＳ５３４，Ｓ５３５の両処理が一体的になされる場合があることについては前述した通りである。
【００７３】
このようにして作成された２次元のスタンプ画像は、画面上のタッチペン２１の位置座標（Ｘ，Ｙ）に対応するフレームバッファのアドレス位置を基点として描画される（ステップＳ５３６）。このことにより、メイン表示・操作部６２に当該２次元のスタンプ画像が表示される。
【００７４】
続いて、メイン表示・操作部６２に対しタッチペン２１が上げられる操作がなされたか否かを判定する（ステップＳ５３７）。この判定の結果、タッチペン２１が下ろされている場合、ステップＳ５３３の処理に戻り、ペンが上げられるまで上記処理が繰り返される（Ｓ５３７→Ｓ５３３→Ｓ５３４→Ｓ５３５→Ｓ５３６→Ｓ５３７）。ペンが上げられた場合、３次元スタンプ画像描画処理は終了して図５に示す処理へ復帰し、ステップＳ３４の処理へ進む。なお、上記の繰り返し処理が利用者の動作速度よりも極めて速い速度で行われる場合、ペンを上げる利用者の動作が筆圧を小さくする動作であるものして処理が行われることもあり得るため、上記繰り返し処理の速度を遅くするか、または筆圧がほぼ一定の状態から急激に小さくなりペンが上げられた場合にのみペンが上げられたものと判定されるなどの処理が行われることが好ましい。
【００７５】
また、以上のように筆圧に基づく動作は、３次元落書きペン描画処理においても適用可能である。例えば、ステップＳ３５６（またはＳ５５５）において、描画されるべき立体形状の太さ（すなわち軌跡に対して垂直方向の幅）が筆圧に応じて変化するように当該３次元データが作成されることなどが考えられる。
【００７６】
上記実施形態では、各種スタンプ画像または落書きペンに対応する３次元データは、予め補助記憶装置などに記憶されているが、この３次元データは（空間上の）所定の平面を示すものであってもよい。例えば、落書きペンの断面を示す平面が３次元データとして予め記憶されており、タッチペンの軌跡に沿って当該平面が移動するときに得られる体形状が生成される構成などが考えられる。また、この３次元データは利用者により作成されてもよい。例えば、利用者がメイン表示・操作部６２にタッチペンで平面的な絵（例えばハートマークなど）を描くことにより、この絵に基づく平面を示す３次元データが作成され、この３次元データに基づき各種スタンプ画像または落書きペンに対応する画像が描画される構成などが考えられる。
【００７７】
上記実施形態では、入力手段としてペン型入力手段であるタッチペンが備えられるが、入力位置の座標を取得可能な入力手段として、例えば指などで押すことにより座標入力が可能なタッチパネルやディジタイザ、マウス、またはトラックボールなどであってもよい。また、筆圧に相当する押圧力を検知するための圧力検知手段が新たに備えられてもよい。さらに、３次元データから所望の２次元画像を得るために必要な属性または属性変化を入力することができる入力手段であれば、必ずしも入力位置の座標を取得可能である必要はなく、例えばボタンやキーボード、画像認識や音声認識による入力装置などであってもよい。
【００７８】
＜１．４効果＞
上記のように本実施形態によれば、予め用意された（または利用者により作成された）１つまたは複数の３次元データに基づいてタッチペンの操作に応じた新たな属性を有する付加画像を作成する。このことにより、撮影画像と合成すべき付加画像を利用者の嗜好に応じて高い自由度で変化させることができる。したがって、落書きペンまたはスタンプ画像を利用者の嗜好に応じた外観が生じるように変化させることによる遊戯性または娯楽性を得ることができる。また、当該３次元データが予め記憶される場合、当該３次元データのみから多様な付加画像を生成することができるので、必要となる記憶容量を比較的小さくすることができる。
【００７９】
さらに、本実施形態によれば、タッチペンの軌跡、押下時間、または筆圧に応じて新たな付加画像が作成されるため、利用者は簡単な操作で自らの嗜好に合った合成画像を効率よく容易に生成することができる。特に、遊技用写真作成装置では、操作の習熟を利用者に期待できず、また撮影時間や落書き時間などの利用時間に制限が設けられているため、タッチペンにより簡単かつ直感的に操作可能である上記構成は極めて有効である。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る遊戯用写真作成装置の側面図である。
【図２】一実施形態に係る遊戯用写真作成装置の本体部を示す正面図である。
【図３】一実施形態に係る遊戯用写真作成装置の要部を機能面から見た構成を示すブロック図である。
【図４】一実施形態に係る遊戯用写真作成装置における主制御部の動作を説明するためのフローチャートである。
【図５】一実施形態におけるステップＳ３０のサブルーチン処理の手順を示すフローチャートである。
【図６】一実施形態におけるステップＳ３３のサブルーチン処理の手順を示すフローチャートである。
【図７】一実施形態におけるスタンプ画像の画面上での属性の変化を示す図である。
【図８】一実施形態におけるステップＳ３５のサブルーチン処理の手順を示すフローチャートである。
【図９】一実施形態における３次元落書きペン描画処理における表示例を示す図である。
【図１０】一実施形態の変形例におけるステップＳ３５のサブルーチン処理の手順を示すフローチャートである
【図１１】一実施形態の変形例におけるステップＳ３３のサブルーチン処理の手順を示すフローチャートである
【符号の説明】
２ …撮影室
４ …本体部
１０ …カメラ
２０ …液晶タッチパネル
２１ …タッチペン
５２ …撮像部（カメラ）
５４ …確認表示部（プレビューモニタ）
６２ …操作部（液晶タッチパネル）
６４ …出力部（プリンタ）
７０ …照明部
７２ …Ｉ／Ｏ制御部（Ｉ／Ｏ制御装置）
８０ …主制御部（主制御装置）
ＴＤ …経過時間
Ｆｔ …筆圧
Ｕ …利用者[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an automatic photograph creation device that photographs a user with a camera and outputs a composite image generated based on the photographed image as a photograph.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, there has been known an amusement photo creator that captures a user with a camera and outputs the captured image as a photograph. Such a game photo creation device has a high level of playability or recreation, so that an image to be combined with a photographed image (hereinafter referred to as an “additional image”) can be prepared in various types in accordance with the user's preference. Many are configured so that a user can select from various background images and foreground images, and freely draw using a pen-type input unit such as a touch pen or a light pen. Such an action by the user is performed on the photographed image, and is therefore called “graffiti”.
[0003]
Examples of the graffiti include an operation of freely drawing a curve having a predetermined thickness and color on the screen by the pen-type input means, and selecting one of a plurality of relatively small images prepared in advance on the screen. There is an operation of pasting and synthesizing at an arbitrary position. The former operation is called “graffiti with a graffiti pen”, and the cursor for indicating the command for forming the curve or the position for forming the curve on the screen is called “graffiti pen”. The latter image is called a “stamp”.
[0004]
[Problems to be solved by the invention]
However, since one or more of the graffiti pens or the stamps are prepared in advance in the amusement photo creator, the types thereof are limited. For this reason, even if the user can freely determine the locus of the doodle pen or the sticking position or the number of stickers of the stamp, the user cannot do the scribbling with the scribble pen or the stamp such that an appearance other than the prepared type is generated. . Therefore, in the conventional amusement photo creator, it is not possible to obtain the amusement or entertainment by changing the graffiti pen or the stamp so as to have an appearance according to the user's preference.
[0005]
Therefore, an object of the present invention is to provide an automatic photo creation device and an automatic photo creation method that can change an additional image to be combined with a photographed image with a high degree of freedom according to a user's preference.
[0006]
Means for Solving the Problems and Effects of the Invention
According to a first aspect of the present invention, an imaging unit for imaging a user who is a subject in a predetermined imaging region, a display unit for displaying a composite image including a captured image obtained by the imaging unit, and outputting the composite image as a photograph An automatic photo creation device comprising output means,
Input means for receiving an operation by the user;
Setting means for setting a predetermined attribute to three-dimensional model data for generating an additional image to be combined with the photographed image in accordance with an operation received by the input means;
An additional image generation unit configured to generate the additional image that is a two-dimensional image from the three-dimensional model data according to a predetermined attribute set by the setting unit;
Synthesizing means for generating the synthesized image by synthesizing the additional image and the photographed image;
It is characterized by having.
[0007]
According to the first aspect, an additional image having a new attribute corresponding to an operation of an input unit is created based on one or a plurality of three-dimensional data prepared in advance (or created by a user). create. Thus, the additional image to be combined with the captured image can be changed with a high degree of freedom according to the user's preference. Therefore, it is possible to obtain playability or entertainment by changing an additional image such as an image using a graffiti pen or a stamp image so as to have an appearance according to the user's preference.
[0008]
When the three-dimensional data is stored in advance, various additional images can be generated only from the three-dimensional data, so that the required storage capacity can be made relatively small.
[0009]
In a second aspect, in the first aspect,
The input means is a pen-type input means capable of acquiring coordinates indicating an input position.
[0010]
According to the second aspect, since the additional image is created by the operation of the pen-type input unit, the user can efficiently and easily generate a composite image that suits his / her taste by a simple operation. it can. In particular, in the game photo creation device, since the user is not expected to be proficient in the operation, and the use time such as the shooting time and the graffiti time is limited, the operation can be easily and intuitively performed by the pen-type input means. The above possible configurations are extremely effective.
[0011]
A third invention is a method according to the first or second invention,
The input means is integrally formed with the display means.
[0012]
According to the third aspect, the user can create the additional image while viewing the image (for example, the photographed image or the locus of the pen) displayed on the display means. It is possible to efficiently and easily generate a composite image, and it is possible to obtain playability or amusement by graffiti as if makeup is applied to a captured image.
[0013]
In a fourth aspect, in any one of the first to third aspects,
The setting means sets the predetermined attribute according to a locus of an input position by the input means,
The additional image generation unit may generate an additional image according to the trajectory from the three-dimensional model data.
[0014]
According to the fourth aspect, a new additional image is created according to the trajectory of an input unit such as a touch pen, so that the user can efficiently create a composite image that matches his or her taste by a simple operation. Can be easily generated. In particular, in the game photo creation device, since the user cannot expect the mastery of the operation, and the use time such as the photographing time and the graffiti time is limited, the use of the trajectory makes it easy and intuitive. The above operable configuration is extremely effective.
[0015]
According to a fifth aspect, in any one of the first to third aspects,
The setting means sets the predetermined attribute according to the duration of a predetermined input state by the input means,
The additional image generation unit may generate an additional image according to the elapsed time from the three-dimensional model data.
[0016]
According to the fifth aspect, a new additional image is created in accordance with the duration (for example, pressing time) of the input state of the input unit such as a touch pen, so that the user can perform his or her own operation with a simple operation. It is possible to efficiently and easily generate a synthesized image that matches the taste. In particular, with a game photo creation device, the user cannot expect the user to become proficient in the operation, and there are restrictions on the usage time such as shooting time and graffiti time. The above-mentioned configuration which can be operated operatively is extremely effective.
[0017]
According to a sixth aspect, in any one of the first to third aspects,
The setting means sets the predetermined attribute according to a pressing force applied by the user to the input means,
The additional image generation unit may generate an additional image according to the pressing force from the three-dimensional model data.
[0018]
According to the sixth aspect, a new additional image is created according to a pressing force (for example, a pen pressure) of an input unit such as a touch pen, so that the user can easily match his / her preference with a simple operation. The synthesized image can be efficiently and easily generated. In particular, in the game photo creation device, the user cannot expect the mastery of the operation, and since the use time such as the photographing time and the graffiti time is limited, the operation can be easily and intuitively performed by the pressing force. Some of the above configurations are extremely effective.
[0019]
According to a seventh aspect, a photographing step of photographing a user who is a subject in a predetermined photographing area, a display step of displaying a composite image including a photographed image obtained by the photographing step, and printing the composite image as a photograph An automatic photo creation method comprising:
An input step of receiving an operation by the user;
A setting step of setting a predetermined attribute to three-dimensional model data for generating an additional image to be combined with the photographed image in accordance with the operation received in the input step;
An additional image generating step of generating the additional image that is a two-dimensional image from the three-dimensional model data according to a predetermined attribute set in the setting step;
A combining step of generating the combined image by combining the additional image and the captured image;
It is characterized by including.
[0020]
An eighth invention is a program for causing a computer to execute the automatic photo creation method according to the seventh invention.
[0021]
A ninth invention is a print medium characterized by being printed as a photograph by the automatic photograph creation method according to the seventh invention.
[0022]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings.
<1. Overall Configuration>
FIG. 1 is a side view of an amusement photo creator, which is an automatic photographic creator according to an embodiment of the present invention, and FIG. FIG. 3 is a diagram (as viewed from a user U as a subject). Hereinafter, with reference to FIG. 1 and FIG. 2, an overall configuration of the game photo creation device according to the present embodiment will be described.
[0023]
This game photo creation device includes a photographing room 2 in which a user U enters, and a main body unit 4 that generates a composite image including a photographed image of the user U and outputs it as a photo sticker (or photo card). The photographing room 2 is provided with a background panel for providing the background of the user U.
[0024]
The main body unit 4 includes a camera 10 as an imaging unit for photographing the user U, a flash 11 arranged at an appropriate position above the camera 10 to emit a flash, and a CRT (Cathode) arranged below the camera 10. (Ray Tube) or a preview monitor 22 which is a display device including a liquid crystal display panel, and a liquid crystal display for displaying a captured image and providing a screen for performing a free drawing (graffiti) by the user U, an operation screen, and the like. And a liquid crystal touch panel 20 made of a transparent sheet for detecting an operation position that covers the operation screen, and a touch pen 21 used for operations on the liquid crystal touch panel 20. Although one touch pen 21 is provided in the drawing, two or more touch pens may be provided. Further, the liquid crystal touch panel 20 may be a liquid crystal touch panel having an electrostatic induction type operation position detection function that does not include the transparent sheet. The camera 10 photographs a user U present on the floor of the photographing room 2 as a subject, and outputs an image signal representing the photographed image. Typically, a digital camera that generates a digital image signal using a CCD (charge coupled device) is used. The preview monitor 22 is configured to display an image represented by the image signal in real time, and is used to confirm a captured image obtained by the camera 10. The liquid crystal touch panel 20 functions as an operation unit for designating a captured image at the time of graffiti processing described later, an operation unit for performing graffiti, and the like.
[0025]
The main unit 4 is mainly composed of a computer, and is a main control device and an I / O control device that control each unit and perform image processing such as the image synthesis described above, a captured image obtained by the camera 10, or a synthesis including the captured image. It has a built-in printer that outputs images as photo stickers (or photo cards). Further, the main body 4 is provided with a coin insertion slot 26 on the lower front side and an outlet 28 for a photo sticker on the side face. Furthermore, the main body unit 4 includes illumination devices 201L and 201R that are always turned on during the operation of the game photo creator on the left and right sides of the camera 10, respectively.
[0026]
<2. Functional configuration>
FIG. 3 is a block diagram showing a configuration of a main part of the game photo creation device according to the present embodiment viewed from a functional aspect. Functionally, the game photograph creation device includes an imaging unit 52, a confirmation display unit 54, a main display / operation unit 62, an output unit 64, an illumination unit 70, an I / O control unit 72, And a main control unit 80.
[0027]
In this configuration, the imaging unit 52 corresponds to the camera 10 configured by using an imaging device such as a CCD, and captures an image in real time to obtain the image (this image may be referred to as a “through image”. In this case, an image signal representing the “captured monitor image” is output. This image signal is input to the main control unit 80, and is temporarily stored in the internal memory as monitor image data. The monitor image data is supplied from the main control unit 80 to the confirmation display unit 54 as a monitor image signal. The confirmation display unit 54 corresponds to the preview monitor 22, and displays a captured image for monitoring in real time based on the image signal for monitoring.
[0028]
The main display / operation unit 62 corresponds to the liquid crystal touch panel 20 and receives an operation of the user U, a shutter operation, an operation for print output, and the like related to the graffiti processing described later, and a signal indicating these operations is: It is input to the main control unit 80 as an operation signal. Now, assuming that a shutter button (not shown) is pressed for photographing by the user U, the camera 10 flashes in the photographing direction of the camera 10 after a lapse of a predetermined time of about several seconds based on an instruction from the main control unit 80. 11 emits a flash, and an image signal output from the imaging unit 52 as a signal representing a captured image of the user U is input to the main control unit 80, and a hard disk as a memory in the main control unit 80 or as an auxiliary storage device. It is stored as photographed image data in a device or the like. The output unit 64 corresponds to a printer built in the main unit 4, and outputs an image represented by the captured image data as a photo sticker (or photo card) based on an instruction from the main control unit 80.
[0029]
The illuminating unit 70 corresponds to the illuminating devices 201L and 201R and the flash 11 in the main body unit 4. Lighting / extinguishing and dimming are controlled by the I / O control unit 72 based on an instruction from the main control unit 80.
[0030]
The I / O control unit 72 corresponds to an I / O control device built in the main body unit 4, controls the illumination unit 70 based on an instruction from the main control unit 80, and also controls a coin detection unit (not shown). ) Is transferred to the main control unit 80.
[0031]
The main control unit 80 is built in the main body unit 4 and corresponds to a main control device mainly composed of a computer including a CPU (Central Processing Unit), a memory, a frame buffer, a timer, an auxiliary storage device, and the like. When the CPU executes the predetermined program stored in the CPU, the CPU issues an instruction to each unit as described above in order to control each unit based on the operation signal input as described above. In addition, a combined image, which is an image obtained by drawing a predetermined image on the captured image, is generated by performing a later-described graffiti process on the captured image and partially rewriting the captured image data based on the operation signal. The generated image is displayed on the main display / operation unit 62 by being written into the frame buffer. In addition, as an image that can be drawn here, in addition to an image of a three-dimensional shape generated by a graffiti process described later, an image having a plurality of types of three-dimensional or two-dimensional shapes (typically representing a star shape) It is an image of a well-known pattern such as an image or an image representing a heart shape, but is not limited thereto, and may be, for example, a photographed image acquired in advance. It may be stored in a memory or an auxiliary storage device. After the completion of the image synthesis as described above, the output unit outputs the synthesized image as a photo sticker or the like. The output photo sticker or the like is taken out from an outlet 28 provided on the side surface of the main body 4.
[0032]
In addition to the above-described components, a coin detection unit (not shown) for detecting a coin inserted into the coin insertion slot 26 of the main body unit 4 is further provided in the main body unit 4. Based on the detection result of the detection unit, each unit is controlled so as to allow the user U to play for a predetermined period of time by the present photo-creating apparatus, such as taking a photograph or generating a composite image by drawing a photographed image. The control operation by the main control unit 80 based on the coin detection unit and the detection result is the same as that of the conventional amusement photo creator and is well known, and therefore, detailed description thereof will be omitted.
[0033]
The predetermined program executed by the main control device is provided, for example, by a CD-ROM which is a recording medium on which the program is recorded. That is, a CD-ROM as a recording medium of the predetermined program is mounted on a CD-ROM drive device built in the main control device as an auxiliary storage device, and the predetermined program is read from the CD-ROM and is stored in the auxiliary storage device. Is installed on the hard disk device. Then, when a predetermined operation for starting the present game photo creation device is performed, a predetermined program installed in the hard disk device is transferred to a memory in the main control device and temporarily stored therein, and is stored in the main control device. It is executed by the CPU in the device. As a result, control of each unit by the main controller and image processing described later are realized.
[0034]
<3. Operation>
As described above, the operation of the main control unit 80 in the present embodiment is realized by the internal CPU executing the predetermined program. FIG. 4 is a flowchart showing the operation of the main control unit 80 realized in this way. In the present embodiment, when a predetermined coin is inserted into the coin insertion slot 26, the main controller 80 (main controller) operates as follows.
[0035]
First, the main control unit 80 performs initialization processing of the device, that is, initialization of each hardware and initialization processing of data stored in the main control unit 80 as set values (step S10).
[0036]
Next, a photographing process for photographing the user U is performed (step S20). When the photographing process is started, first, the main control unit 80 sets a timer so as to time out after a predetermined time (hereinafter referred to as “photographing time”) has elapsed, and starts the timer. After that, until a timeout occurs, it is checked by an operation signal whether a shutter button (not shown) or a shutter button displayed on the screen of the main display / operation unit 62 is pressed. If the shutter button is pressed during this time, the main control unit 80 notifies the user of the start of shooting on the screen of the main display / operation unit 62, and after a predetermined time of about several seconds elapses, the imaging unit (camera) 52 To send a shooting signal (shutter signal). Thereby, the illumination unit (flash) 70 emits a flash in synchronization with the shutter operation of the imaging unit 52, and the main control unit 80 starts the capture process. That is, the main control unit 80 receives the image signal output from the imaging unit 52 as a signal representing the captured image of the user U illuminated by the flash from the illumination unit (flash) 70, and stores the image signal in the memory or the auxiliary storage device. It is stored as an image file of the captured image. In this way, the capture process is executed each time the shutter button is pressed during the predetermined shooting time, and the shot image is temporarily stored as an image file. When the photographing time elapses, a timeout occurs and the photographing process ends. In addition, even before the lapse of the photographing time, if an operation for instructing the main display / operation unit 62 to end the photographing processing is performed, the photographing processing is ended.
[0037]
Subsequently, an operation by the user U for graffiti is received, and a graffiti process including image processing according to the operation is performed (step S30). Here, a detailed process (subroutine) of the graffiti process will be described. FIG. 5 is a flowchart showing the procedure of this subroutine.
[0038]
First, when a plurality of captured images are acquired, the main control unit 80 sets a predetermined time (hereinafter, referred to as “doodle time”) for the doodle processing after allowing the user to select one of them. (Step S31). That is, when a plurality of photographed images are acquired, first, these photographed images are displayed on the screen of the main display / operation unit 62, and it is determined which image is selected (for example, a predetermined portion of the screen is pressed with the touch pen 21). A photographed image is examined by a signal, and the selected photographed image is set as a photographed image to be a graffiti target (hereinafter, referred to as a “target photographed image”). Furthermore, a timer is set so that a timeout occurs when a predetermined time (hereinafter, referred to as “doodle time”) elapses, and the timer is started. Then, an initial screen for graffiti including the remaining time until the timeout indicating the graffiti time, the target photographed image, and operation icons for various graffiti is displayed on the main display / operation unit 62.
[0039]
Next, the main control unit 80 performs an operation for selecting any one of a plurality of stamp images having a predetermined three-dimensional shape previously displayed on the initial screen of the main display / operation unit 62 for graffiti. Is determined on the main display / operation unit 62 (step S32). If the result of this determination is that such a stamp image selection operation has not been performed, the process proceeds directly to step S34, and if such a selection operation has been performed, the process proceeds to step S34 in accordance with the selection operation. A three-dimensional stamp drawing process is performed (step S33), and thereafter, the process proceeds to step S34.
[0040]
In step S34, an operation for selecting one of a plurality of (virtual) graffiti pens having a predetermined locus prepared in advance on the initial screen of the main display / operation unit 62 for graffiti Is determined on the main display / operation unit 62. If the result of this determination is that such a selection operation of a graffiti pen has not been performed, the process proceeds directly to step S36, and if such a selection operation has been performed, it will be described later based on the selection operation. A three-dimensional graffiti pen drawing process is performed (step S35), and thereafter, the process proceeds to step S36.
[0041]
In step S36, whether or not the graffiti has ended, that is, whether or not the graffiti time has elapsed, or whether or not the graffiti has been stopped (or the start of printing has been instructed) by an operation on the main display / operation unit 62 before the elapse of the graffiti time. Is determined. As a result of this determination, when the graffiti ends, the main control unit 80 returns to the processing illustrated in FIG. 4 and proceeds to the printing processing in step S40. If the graffiti processing does not end, the process returns to step S32, and the above processing is repeated until the graffiti processing ends.
[0042]
Note that the graffiti processing shown in FIG. 5 includes only three-dimensional stamp drawing processing and three-dimensional graffiti pen drawing processing, but is not limited thereto. May be included, or one of a plurality of background images or foreground images (frames) prepared in advance may be appropriately selected. In addition to the step S31, the selection of the target photographed image may be performed again or repeatedly, for example, during or immediately before the processing of the step S36.
[0043]
In the printing process in step S40 shown in FIG. 4, upon receiving an operation signal indicating a print instruction, the main control unit 80 outputs an output of the composite image currently displayed on the main display / operation unit 62 based on the operation signal. The output unit (printer) 64 is instructed. Accordingly, the printer as the output unit 64 outputs the composite image as a photo sticker. Thus, the printing process ends. The output photo sticker is taken out by the user U from an outlet 28 provided on the side surface of the main body 4. When the printing process is completed, all the processes are completed, and a standby state is established until a coin corresponding to a predetermined amount is newly inserted into the coin insertion slot 26. In this standby state, when a coin corresponding to a predetermined amount is newly inserted, the same processing as described above (steps S10 to S40) is performed, and thereafter, the flow returns to step S10 again.
[0044]
Here, a detailed process (subroutine) of the three-dimensional stamp drawing process in step S33 shown in FIG. 5 will be described. FIG. 6 is a flowchart showing the procedure of this subroutine.
[0045]
First, the main control unit 80 generates data (hereinafter referred to as “three-dimensional data”) for forming a three-dimensional model for creating a predetermined three-dimensional shape corresponding to the stamp image selected from the screen of the main display / operation unit 62. Is called from the auxiliary storage device and temporarily stored in a memory together with various setting values for three-dimensional image processing (step S331). The operation of selecting a stamp image is performed by an operation of pressing a predetermined portion of the screen of the main display / operation unit 62 with the touch pen 21, and more specifically, an operation of once lowering the touch pen 21 on the screen and then raising (remove from the screen). You. Therefore, when the stamp image is selected, the touch pen 21 is raised.
[0046]
Next, it is determined whether or not an operation of lowering the touch pen 21 has been performed on the main display / operation unit 62 (step S332). If the result of this determination is that the touch pen 21 has not yet been lowered, the process waits until the touch pen 21 is lowered, and if the touch pen 21 has been lowered, the process proceeds to step S333. During the standby, a cancel process based on a predetermined cancel operation or a timeout process based on the elapse of a predetermined time is performed.
[0047]
Subsequently, the main control unit 80 determines the position coordinates (X, Y) of the touch pen 21 on the screen of the main display / operation unit 62 and the elapsed time TD from when the touch pen 21 is lowered on the screen. It is acquired (step S333).
[0048]
Then, from the predetermined three-dimensional data called in step S331, new three-dimensional data whose attribute is changed according to the elapsed time TD is created (step S334). Here, the above attributes include the arrangement position, orientation, size, color, surface pattern and reflectivity of the solid formed by the three-dimensional data, and a deformation that gradually approximates (rounds) a sphere. , Or a deformation that gradually approximates a radial star shape. In addition, the elapsed time TD is associated with the change amount or change rate of the attribute, such as the change amount, change rate, and deformation rate of the attribute. For example, the attribute change is associated with the elapsed time TD such that the larger the elapsed time TD, the redder the color, the larger the size, or the rounder the shape. Note that the change in the attribute is, for example, a cyclic change in which the elapsed time TD increases, increases to the maximum value, returns to the next minimum value and then increases again, or decreases to the maximum value, and then decreases. Oscillatory changes are preferred, such that when they decrease to a minimum, they turn to increase. FIG. 7 is a diagram showing a change in attribute of such a stamp image on the screen. The stamp image shown in FIG. 7A rotates clockwise when maintained in a state where the stamp pen 21 is pressed down (touch pen 21 is lowered), and rotates 90 degrees clockwise after a predetermined time has elapsed. The attribute (arrangement direction) changes so that the stamp image shown in FIG. 7B is obtained.
[0049]
Further, a predetermined rendering is performed on the three-dimensional data created in this way, thereby creating a two-dimensional stamp image representing a three-dimensional shape (step S335). The rendering includes various methods such as a predetermined coordinate transformation, hidden surface removal, shading, and texture mapping. Since these methods are known, detailed description thereof will be omitted. If the attribute change in step S334 can be realized by the above-described rendering, the processes in steps S334 and S335 are performed integrally. That is, the predetermined three-dimensional data called in step S331 is subjected to predetermined rendering so as to change the attribute according to the elapsed time TD, thereby creating the stamp image.
[0050]
The two-dimensional stamp image is drawn based on the address position of the frame buffer corresponding to the position coordinates (X, Y) of the touch pen 21 on the screen (step S336). Thus, the two-dimensional stamp image is displayed on the main display / operation unit 62. Specifically, the stamp image is superimposed (for example, overwritten) on a part of the target captured image that is already displayed. When the pen is moved (dragged) while being lowered on the screen, the position coordinates (X, Y) change, and the drawing position of the two-dimensional stamp image also moves according to the change. .
[0051]
Subsequently, it is determined whether an operation of raising the touch pen 21 has been performed on the main display / operation unit 62 (step S337). If the result of this determination is that the touch pen 21 is down, the process returns to step S333, and the above processing is repeated until the pen is raised (S337 → S333 → S334 → S335 → S336 → S337). When the pen is raised, the three-dimensional stamp image drawing processing ends, returns to the processing shown in FIG. 5, and proceeds to the processing of step S34. As described above, in step S34, it is determined whether or not an operation for selecting one of the graffiti pens has been performed on the main display / operation unit 62. As a result of this determination, if the selection operation has been performed, , A three-dimensional graffiti pen drawing process is performed (step S35).
[0052]
Here, a detailed process (subroutine) of the three-dimensional graffiti pen drawing process in step S35 will be described. FIG. 8 is a flowchart showing the procedure of this subroutine.
[0053]
First, the main control unit 80 calls predetermined three-dimensional data corresponding to the graffiti pen selected from the screen of the main display / operation unit 62 from the auxiliary storage device together with various setting values for three-dimensional image processing. It is temporarily stored in the memory (step S351). Similar to the operation of selecting a stamp image, the operation of selecting a graffiti pen is performed by once lowering the touch pen 21 on the screen of the main display / operation unit 62 and then raising the touch pen. Is raised.
[0054]
Next, it is determined whether or not an operation of lowering the touch pen 21 has been performed on the main display / operation unit 62 (step S352). If the result of this determination is that the touch pen 21 has not yet been lowered, the process waits until the touch pen 21 is lowered, and if the touch pen 21 has been lowered, the process proceeds to step S353. Note that a predetermined canceling process or a timeout process is performed during the standby.
[0055]
Subsequently, the main control unit 80 acquires the current position coordinates (X, Y) of the touch pen 21 on the screen of the main display / operation unit 62 and stores the coordinates in the memory as a coordinate sequence indicating a continuous trajectory. (Step S353).
[0056]
Further, a continuous line indicating the trajectory is drawn at the address position of the frame buffer corresponding to the position coordinates (X, Y) of the touch pen 21 on the screen (step S354). Thus, the locus is displayed on the main display / operation unit 62. Specifically, the trajectory is combined and displayed on a part of the target captured image that is already displayed.
[0057]
Subsequently, it is determined whether or not an operation of raising the touch pen 21 is performed on the main display / operation unit 62 (step S355). If the result of this determination is that the touch pen 21 is down, the process returns to step S353, and the above processing is repeated until the pen is raised (S355 → S353 → S354 → S355). If the pen is raised, the process proceeds to step S356.
[0058]
Next, from the predetermined three-dimensional data called in step S351, new three-dimensional data in which the trajectory indicated by the coordinate sequence obtained in step S353 is a deformation direction (a reference line) is created (step S353). Step S356). Specifically, new three-dimensional data is created by deforming the predetermined three-dimensional data so as to extend along a reference line in the deformation direction given by the trajectory. Therefore, here, the attribute of the shape (eg, depth) of the three-dimensional data changes.
[0059]
Further, a predetermined rendering is performed on the three-dimensional data created in this way, thereby creating a two-dimensional image representing a three-dimensional shape (step S357). Note that both the processes of steps S356 and S357 may be integrally performed, similarly to the processes of steps S334 and S335. In this case, the predetermined three-dimensional data called in step S351 is subjected to predetermined rendering so as to change the shape according to the trajectory, thereby creating the two-dimensional image.
[0060]
Subsequently, after the line indicating the locus drawn in step S354 is deleted, the two-dimensional image is drawn at the address position of the frame buffer corresponding to the position of the line indicating the locus (step S358). As a result, the two-dimensional image is displayed on the main display / operation unit 62 on a part of the target captured image that is already displayed. Thereafter, the three-dimensional graffiti pen drawing process ends, returns to the process shown in FIG. 5, and proceeds to the process of step S36.
[0061]
FIG. 9 is a diagram showing a display example in such a three-dimensional graffiti pen drawing process. When the touch pen 21 is moved down on the screen of the main display / operation unit 62, a line indicating a locus as shown in FIG. 9A is drawn. Thereafter, when the touch pen 21 is raised, a two-dimensional image having a three-dimensional shape as shown in FIG. 9B is drawn.
[0062]
<4. Modification>
Here, a detailed process (subroutine) showing a modification of the three-dimensional graffiti pen drawing process in step S35 will be described. FIG. 10 is a flowchart showing the procedure of a subroutine that is a modification example.
[0063]
First, the main control unit 80 calls predetermined three-dimensional data corresponding to the graffiti pen selected from the screen of the main display / operation unit 62 from the auxiliary storage device together with various setting values for three-dimensional image processing. It is temporarily stored in the memory (step S551). Next, it is determined whether or not an operation of lowering the touch pen 21 has been performed on the main display / operation unit 62 (step S552). If the result of this determination is that the touch pen 21 has not yet been lowered, the process waits until the touch pen 21 is lowered, and if the touch pen 21 has been lowered, the process proceeds to step S553. Note that a predetermined canceling process or a timeout process is performed during the standby.
[0064]
Further, the main control unit 80 acquires the initial position coordinates (X0, Y0) of the touch pen 21 on the screen of the main display / operation unit 62 (step S353). The initial position coordinates (X0, Y0) correspond to the position where the graffiti pen is first lowered on the screen. Here, instead of drawing the line indicating the trajectory as described above, the two-dimensional image representing the three-dimensional shape is sequentially drawn on the screen along the trajectory of the graffiti pen moved from the initial position.
[0065]
Subsequently, the main control unit 80 acquires the current position coordinates (X, Y) of the touch pen 21 on the screen of the main display / operation unit 62, and obtains a continuous trajectory from the initial position coordinates (X0, Y0). Is stored in the memory as a coordinate sequence indicating (step S554). Of course, immediately after the touch pen 21 is dropped on the screen, the current position coordinates (X, Y) of the touch pen 21 are equal to the initial position coordinates (X0, Y0). A new coordinate sequence indicating the trajectory is obtained.
[0066]
Then, from the predetermined three-dimensional data called in step S551, new three-dimensional data in which the trajectory indicated by the coordinate sequence obtained in step S554 is a deformation direction (a reference line) is created (step S555). ). The reference line in the deformation direction has an initial value of a predetermined length, and three-dimensional data having a predetermined shape is created even immediately after the touch pen 21 is dropped on the screen. Here, the trajectory defines a deformation direction, but is not limited to this. For example, a deformation position or deformation when a predetermined portion of a three-dimensional figure represented by three-dimensional data is deformed to be extended. The amount may be specified.
[0067]
Further, a predetermined rendering is performed on the three-dimensional data created in this way, thereby creating a two-dimensional image representing a three-dimensional shape (step S556). Subsequently, the two-dimensional image is drawn based on the address position of the frame buffer corresponding to the initial position coordinates (X0, Y0) (step S557). As a result, the two-dimensional image is displayed on the main display / operation unit 62 on a part of the target captured image that is already displayed.
[0068]
Subsequently, it is determined whether or not an operation of raising the touch pen 21 has been performed on the main display / operation unit 62 (step S558). If the result of this determination is that the touch pen 21 is down, the process returns to step S554, and the above processing is repeated until the pen is raised (S558 → S554 → S555 → S556 → S557 → S558). If the pen is raised, the three-dimensional graffiti pen drawing process ends, returns to the process shown in FIG. 5, and proceeds to the process of step S36.
[0069]
Next, a detailed process (subroutine) showing a modification of the three-dimensional stamp image drawing process in step S33 will be described. FIG. 11 is a flowchart showing the procedure of a subroutine that is a modification example.
[0070]
First, the main control unit 80 calls the three-dimensional data corresponding to the stamp image selected from the screen of the main display / operation unit 62 from the auxiliary storage device, and stores it in the memory together with various setting values for the three-dimensional image processing. It is temporarily stored (step S531). Next, it is determined whether or not an operation of lowering the touch pen 21 has been performed on the main display / operation unit 62 (step S532). If the result of this determination is that the touch pen 21 has not yet been lowered, the process waits until the touch pen 21 is lowered, and if the touch pen 21 has been lowered, the process proceeds to step S533.
[0071]
Subsequently, the main control unit 80 determines the position coordinates (X, Y) of the touch pen 21 on the screen of the main display / operation unit 62 and the pressing force when the touch pen 21 is pressed on the screen by the user's hand. Ft (hereinafter referred to as "pen pressure") is obtained (step S533). In addition, an electrostatic coupling method or the like is used for the touch pen capable of detecting the writing pressure.
[0072]
Then, from the predetermined three-dimensional data called in step S531, new three-dimensional data whose attributes are changed according to the pen pressure Ft is created (step S534). As an example of the change of the attribute, a change in which the stamp image becomes larger as the pen pressure becomes larger can be considered. However, as described above, the change of the attribute includes any change in appearance. Further, a predetermined rendering is performed on the three-dimensional data created in this way, thereby creating a two-dimensional stamp image representing a three-dimensional shape (step S535). It is to be noted that both the processes of steps S534 and S535 may be performed integrally as described above.
[0073]
The two-dimensional stamp image created in this way is drawn based on the address position of the frame buffer corresponding to the position coordinates (X, Y) of the touch pen 21 on the screen (step S536). Thus, the two-dimensional stamp image is displayed on the main display / operation unit 62.
[0074]
Subsequently, it is determined whether or not an operation of raising the touch pen 21 has been performed on the main display / operation unit 62 (step S537). If the result of this determination is that the touch pen 21 is down, the process returns to step S533, and the above processing is repeated until the pen is raised (S537 → S533 → S534 → S535 → S536 → S537). When the pen is raised, the three-dimensional stamp image drawing processing ends, returns to the processing shown in FIG. 5, and proceeds to the processing of step S34. If the above-described repetitive processing is performed at a speed much higher than the operation speed of the user, the processing of the user raising the pen may be performed assuming that the operation of reducing the pen pressure is performed. It is possible to perform processing such as reducing the speed of the above-described repetitive processing, or determining that the pen has been raised only when the pen pressure has risen due to a sharp decrease in the pen pressure from a substantially constant state. preferable.
[0075]
The operation based on the pen pressure as described above is also applicable to the three-dimensional graffiti pen drawing process. For example, in step S356 (or S555), the three-dimensional data is created such that the thickness of the three-dimensional shape to be drawn (that is, the width in the direction perpendicular to the locus) changes according to the pen pressure. Can be considered.
[0076]
In the above embodiment, three-dimensional data corresponding to various stamp images or graffiti pens is stored in advance in an auxiliary storage device or the like, but this three-dimensional data indicates a predetermined plane (in space). Is also good. For example, a configuration is conceivable in which a plane indicating a cross section of a graffiti pen is stored in advance as three-dimensional data, and a body shape obtained when the plane moves along the trajectory of the touch pen is generated. The three-dimensional data may be created by a user. For example, when a user draws a two-dimensional picture (for example, a heart mark) on the main display / operation unit 62 with a touch pen, three-dimensional data indicating a plane based on the picture is created. A configuration in which a stamp image or an image corresponding to a graffiti pen is drawn is conceivable.
[0077]
In the above embodiment, a touch pen, which is a pen-type input unit, is provided as an input unit.As an input unit capable of acquiring coordinates of an input position, for example, a touch panel or a digitizer capable of inputting coordinates by pressing with a finger or the like, a mouse, Alternatively, it may be a trackball or the like. Further, a pressure detecting means for detecting a pressing force corresponding to the pen pressure may be newly provided. Further, if the input means is capable of inputting an attribute or an attribute change necessary to obtain a desired two-dimensional image from three-dimensional data, it is not always necessary to be able to obtain the coordinates of the input position. It may be a keyboard, an input device based on image recognition or voice recognition, or the like.
[0078]
<1.4 Effects>
As described above, according to the present embodiment, an additional image having a new attribute corresponding to a touch pen operation is created based on one or a plurality of three-dimensional data prepared in advance (or created by a user). I do. Thus, the additional image to be combined with the captured image can be changed with a high degree of freedom according to the user's preference. Therefore, it is possible to obtain playability or entertainment by changing the graffiti pen or the stamp image so as to have an appearance according to the user's preference. When the three-dimensional data is stored in advance, various additional images can be generated only from the three-dimensional data, so that the required storage capacity can be made relatively small.
[0079]
Furthermore, according to the present embodiment, a new additional image is created according to the locus of the touch pen, the pressing time, or the pen pressure, so that the user can efficiently create a composite image that matches his / her taste with a simple operation. Can be easily generated. In particular, in the game photo creation device, since the user cannot expect the mastery of the operation, and the use time such as the shooting time and the graffiti time is limited, the operation can be easily and intuitively performed by the touch pen. The above configuration is extremely effective.
[Brief description of the drawings]
FIG. 1 is a side view of an amusement photo creator according to an embodiment of the present invention.
FIG. 2 is a front view showing a main body of the game photo creation device according to the embodiment.
FIG. 3 is a block diagram showing a configuration of a main part of the game photo creation device according to the embodiment as viewed from a functional aspect.
FIG. 4 is a flowchart for explaining the operation of a main control unit in the game picture creating device according to one embodiment.
FIG. 5 is a flowchart illustrating a procedure of a subroutine process in step S30 according to one embodiment.
FIG. 6 is a flowchart illustrating a procedure of a subroutine process in step S33 according to the embodiment.
FIG. 7 is a diagram illustrating a change in an attribute of a stamp image on a screen according to an embodiment.
FIG. 8 is a flowchart illustrating a procedure of a subroutine process in step S35 according to one embodiment.
FIG. 9 is a diagram showing a display example in a three-dimensional graffiti pen drawing process according to one embodiment.
FIG. 10 is a flowchart illustrating a procedure of a subroutine process in step S35 in a modified example of one embodiment.
FIG. 11 is a flowchart illustrating a procedure of a subroutine process in step S33 according to a modified example of the embodiment.
[Explanation of symbols]
2 ... shooting room
4 Body part
10. Camera
20… LCD touch panel
21… Touch pen
52 ... Imaging unit (camera)
54… Confirmation display section (preview monitor)
62… Operation unit (liquid crystal touch panel)
64… Output unit (printer)
70: Lighting unit
72 ... I / O control unit (I / O control device)
80… Main control unit (main control device)
TD ... elapsed time
Ft… pen pressure
U: User

Claims

An image pickup device for photographing a user who is a subject in a predetermined photographing area, a display device for displaying a composite image including a photographed image obtained by the image capture device, and an output device for outputting the composite image as a photograph A photo creator,
Input means for receiving an operation by the user;
Setting means for setting a predetermined attribute to three-dimensional model data for generating an additional image to be combined with the photographed image in accordance with an operation received by the input means;
An additional image generation unit configured to generate the additional image that is a two-dimensional image from the three-dimensional model data according to a predetermined attribute set by the setting unit;
An automatic photograph creation device, comprising: a combining unit that generates the combined image by combining the additional image and the captured image.

The automatic photograph creation device according to claim 1, wherein the input unit is a pen-type input unit that can acquire coordinates indicating an input position.

The automatic photograph creation apparatus according to claim 1, wherein the input unit is configured integrally with the display unit.

The setting means sets the predetermined attribute according to a locus of an input position by the input means,
4. The automatic photograph creation device according to claim 1, wherein the additional image generation unit creates an additional image according to the trajectory from the three-dimensional model data. 5.

The setting means sets the predetermined attribute according to the duration of a predetermined input state by the input means,
4. The automatic photograph creation device according to claim 1, wherein the additional image generation unit creates an additional image according to the elapsed time from the three-dimensional model data. 5.

The setting means sets the predetermined attribute according to a pressing force applied by the user to the input means,
4. The automatic photograph creation device according to claim 1, wherein the additional image generation unit creates an additional image according to the pressing force from the three-dimensional model data. 5.

An automatic step including: a photographing step of photographing a user who is a subject in a predetermined photographing area; a display step of displaying a composite image including a photographed image obtained by the photographing step; and an output step of printing the composite image as a photograph. How to create a photo,
An input step of receiving an operation by the user;
A setting step of setting a predetermined attribute to three-dimensional model data for generating an additional image to be combined with the photographed image in accordance with the operation received in the input step;
An additional image generating step of generating the additional image that is a two-dimensional image from the three-dimensional model data according to a predetermined attribute set in the setting step;
A synthesizing step of synthesizing the additional image and the photographed image to generate the synthesized image.

A program for causing a computer to execute the automatic photo creation method according to claim 7.

A print medium printed as a photograph by the automatic photograph creation method according to claim 7.