JP4192487B2 - 画像処理方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、画像処理方法に関し、特に、例えば、デジタルスチルカメラで撮影された画像からアニメーション画像を作成する場合に用いて好適な画像処理方法に関する。
【０００２】
【従来の技術】
従来、デジタルスチルカメラには、撮影モードや再生モードなどの様々なモードが搭載されている。さらに機種によっては、複数の静止画像が連続して再生される、アニメーション画像を作成するモードを有するものがある。
【０００３】
通常、アニメーション画像を作成するモードを利用する場合、ユーザは、被写体を撮影する前にそのモードを設定し、設定したモード下で、連続してシャッタを押下して被写体の撮影を行う。これにより、複数の連続した画像から、１つのアニメーション画像が作成される。
【０００４】
【発明が解決しようとする課題】
しかしながら、ユーザは、アニメーション画像を作成するモードを変えることなく、連続して撮影を行わなければならず、一旦作成されたアニメーション画像に、他の画像を追加したり、または、複数の連続した画像で構成されるアニメーション画像の中から所定の画像を削除するといった編集を行うことができない課題があった。
【０００５】
そのため、ユーザは、納得のいくアニメーション画像が作成されるまで、何度も同じ条件下で、アニメーション画像を作成するための撮影を行わなければならなかった。
【０００６】
またアニメーション画像の作成に、静止画像だけでなく動画像を用いることができれば、より好ましい。
【０００７】
本発明はこのような状況に鑑みてなされたものであり、静止画像や動画像などの様々な画像素材から、簡単かつ効率的に、アニメーション画像の編集を行うことができるようにするものである。
【００１２】
【課題を解決するための手段】
本発明の第１の画像処理方法は、撮影された被写体の画像の記録を制御する記録制御ステップと、指定された画像から生成されたサムネイル画像を１つのコマとし、画像としての静止画像から生成されたサムネイル画像、および画像としての動画像から生成されたサムネイル画像から生成されたアニメーション画像から、アニメーション画像に対応するインデックス画像を生成する生成ステップと、画像から生成されたインデックス画像、およびアニメーション画像に対応するインデックス画像を並べて表示する表示ステップと、表示ステップの処理において表示されているアニメーション画像に対応するインデックス画像が選択された場合、ユーザの操作に応じて、選択されたインデックス画像に対応するアニメーション画像の再生、削除、再編集、または印刷の制御の何れかの処理を実行する実行ステップとを含み、生成ステップにおいて、アニメーション画像を記憶手段に展開し、記憶手段に一時的に記憶されているアニメーション画像から、インデックス画像を生成し、ユーザの操作によりアニメーション画像の再編集が指示された場合、実行ステップにおいて、画像から生成されたインデックス画像をさらに表示し、表示されているインデックス画像から、アニメーション画像の再編集に用いる画像のインデックス画像として選択された所定のインデックス画像に対応する画像が動画像であるとき、動画像を構成する複数コマのうちの所定のコマからアニメーション画像の基になるサムネイル画像を生成し、そのサムネイル画像を再編集が指示されたアニメーション画像に対して追加して、新たなアニメーション画像を編集することを特徴とする。
【００１５】
本発明の第１の画像処理方法においては、撮影された被写体の画像が記録され、指定された画像から生成されたサムネイル画像を１つのコマとし、画像としての静止画像から生成されたサムネイル画像、および画像としての動画像から生成されたサムネイル画像から生成されたアニメーション画像から、アニメーション画像に対応するインデックス画像が生成され、画像から生成されたインデックス画像、およびアニメーション画像に対応するインデックス画像が並べられて表示される。また、アニメーション画像に対応するインデックス画像が選択された場合、ユーザの操作に応じて、選択されたインデックス画像に対応するアニメーション画像の再生、削除、再編集、または印刷の制御の何れかの処理が実行され、インデックス画像が生成される場合、アニメーション画像が記憶手段に展開され、記憶手段に一時的に記憶されているアニメーション画像から、インデックス画像が生成される。さらに、ユーザの操作によりアニメーション画像の再編集が指示された場合、画像から生成されたインデックス画像がさらに表示され、表示されているインデックス画像から、アニメーション画像の再編集に用いる画像のインデックス画像として選択された所定のインデックス画像に対応する画像が動画像であるとき、動画像を構成する複数コマのうちの所定のコマからアニメーション画像の基になるサムネイル画像が生成され、そのサムネイル画像が再編集が指示されたアニメーション画像に対して追加されて、新たなアニメーション画像が編集される。
本発明の第２の画像処理方法は、静止画像から生成されたサムネイル画像、および動画像から生成されたサムネイル画像からなるアニメーション画像の再編集が指示された場合、撮影され、記録されている複数の被写体の画像から生成されるインデックス画像を表示する第１の表示ステップと、第１の表示ステップの処理により表示されているインデックス画像から、所定のインデックス画像が選択され、選択された所定のインデックス画像に対応する画像が動画像である場合、動画像を構成する複数コマのうちの所定のコマから、アニメーション画像の基になるサムネイル画像を生成する第１の生成ステップと、再編集が指示されたアニメーション画像に対して、第１の生成ステップの処理により生成された前記サムネイル画像を追加して新たなアニメーション画像を編集する編集ステップと、画像から生成されるインデックス画像、および新たなアニメーション画像から生成された新たなアニメーション画像に対応するインデックス画像を並べて表示する第２の表示ステップとを含むことを特徴とする。
画像処理方法には、画像および新たなアニメーション画像を記憶手段に展開し、記憶手段に一時的に記憶されている画像および新たなアニメーション画像から、第２の表示ステップの処理により表示されるインデックス画像を生成する第２の生成ステップがさらに含まれるようにすることができる。
画像処理方法には、選択された所定のインデックス画像に対応する動画像を表示する第３の表示ステップをさらに含まれるようにし、第１の生成ステップにおいて、表示された動画像の選択された所定のコマからサムネイル画像を生成させることができる。
本発明の第２の画像処理方法においては、静止画像から生成されたサムネイル画像、および動画像から生成されたサムネイル画像からなるアニメーション画像の再編集が指示された場合、撮影され、記録されている複数の被写体の画像から生成されるインデックス画像が表示され、表示されているインデックス画像から、所定のインデックス画像が選択され、選択された所定のインデックス画像に対応する画像が動画像である場合、動画像を構成する複数コマのうちの所定のコマから、アニメーション画像の基になるサムネイル画像が生成され、再編集が指示されたアニメーション画像に対して、生成されたサムネイル画像が追加されて新たなアニメーション画像が編集され、画像から生成されるインデックス画像、および新たなアニメーション画像から生成された新たなアニメーション画像に対応するインデックス画像が並べられて表示される。
【００１６】
【発明の実施の形態】
以下、図を参照して、本発明の実施の形態について説明する。
【００１７】
図１および図２は、本発明を適用したデジタルスチルカメラの外観の構成例を示す図である。
【００１８】
デジタルスチルカメラ１は、本体２、本体２に内蔵される表示部３、および、各種操作ボタンなどにより構成されている。図１は本体２の背面図、図２は本体２に設けられている後述する十字キー１３の拡大図である。
【００１９】
表示部３の正面には、画像を表示するためのLCD（Liquid Crystal Display）１１が設けられており、後述するアニメーション画像編集処理において、インデックス画像や各種ボタンなどを表示させる。
【００２０】
本体２には、LCD１１に表示されるカーソルを移動させる場合などに操作される十字キー１３、LCD１１にメニュー画面を表示させる場合や表示状態を切り換える場合などに操作されるボタン群１４、LCD１１に表示されている画像の縮小表示または拡大表示を行う場合に操作されるズームレバー１５、および、スクロール動作や画像のコマ送り動作等が実行される、図中上下方向に回動自在なジョグダイヤル１６が、その背面に設けられている。また、モードを選択する場合に操作されるモードダイヤル１２、および、被写体を撮影する場合に押下されるシャッタボタン１７が、その上面に設けられている。
【００２１】
十字キー１３は、例えば、本体２の背面の表示部３の図中左側に設けられている。図２に示すように、十字キー１３は、LCD１１に表示されているカーソルを上方向に移動させる場合に操作される上ボタン１３ａ、下方向に移動させる場合に操作される下ボタン１３ｂ、左方向に移動させる場合に操作される左ボタン１３ｃ、右方向に移動させる場合に操作される右ボタン１３ｄ、および、その操作の確定を実行する場合に操作されるセンターボタン１３ｅにより構成されている。
【００２２】
図３は、デジタルスチルカメラの電気的構成例を示すブロック図である。
【００２３】
レンズブロック２１は被写体からの光を、撮像素子２２に集光する。例えば、CCD（Charge Coupled Devices）などで構成される撮像素子２２は被写体からの光を電気信号に変換し、AGC（Automatic Gain Control）回路２３に出力する。AGC回路２３は、入力された信号のレベルを調整する。
【００２４】
SDRAM（Synchronous Dynamic Random Access Memory）インターフェースモジュール２４には、AGC回路２３からの入力信号を処理するカメラ信号処理部４１、SDRAM２５からの信号を表示用のRGB（Red Green Blue）信号に変換するビデオエンコード＆オンスクリーンディスプレイ部４２、JPEG（Joint Photographic Experts Group）方式で画像信号を圧縮または解凍するJPEGモジュール４３、並びに画像を指定されたサイズに変更するレゾリューションコンバータ４４が備えられている。
【００２５】
SDRAMインターフェースモジュール２４には、データを一次的に記憶するとともに、記憶したデータを呼び出す機能を有するSDRAM２５が接続されている。SDRAM２５には、記憶するデータの種類によって、エリア５１（例えば、カメラ信号処理部４１の出力画像を記憶する）、エリア５２（例えば、記録画像を記憶する）、およびエリア５３（例えば、表示画像を記憶する）が備えられている。
【００２６】
マイクロコントローラ２６には、ユーザが各種の指令を入力するとき操作するモードダイヤル１２、十字キー１３、ボタン群１４、ズームレバー１５、ジョグダイヤル１６、およびシャッタボタン１７、マイクロコントローラ２６の処理におけるデータを一次的に記憶するとともに、記憶したデータを呼び出す機能を有するSDRAM２７、並びに、一時的にSDRAM２７に記憶したデータを永続的に保存するための記録メディア２８が接続されている。マイクロコントローラ２６が実行するプログラムの一部には、画像データをファイル化するファイルシステムが備えられている。SDRAMインターフェースモジュール４には、撮影した画像を表示するためのLCD１１が接続されている。
【００２７】
マイクロコントローラ２６にはまた、必要に応じてドライブ２９が接続され、ドライブ２９には、磁気ディスク３１、光ディスク３２、光磁気ディスク３３、または半導体メモリ３４などが必要に応じて装着される。ドライブ２９は、磁気ディスク３１、光ディスク３２、光磁気ディスク３３、または半導体メモリ３４に記録されているデータまたはプログラムを読み出して、そのデータまたはプログラムを、マイクロコントローラ２６に供給する。
【００２８】
次に図４のフローチャートを参照して、図３のデジタルスチルカメラが実行する撮影処理について説明する。なお、この処理は、ユーザが、モードダイヤル１２を操作して撮影モードに設定したとき開始される。
【００２９】
ステップＳ１において、レンズブロック２１は、被写体からの光を取り込む。ステップＳ２において、撮像素子２２は、取り込まれた光を電気信号に変換する。ステップＳ３において、AGC回路２３は撮像素子２２から入力された信号の信号レベルを調節する。信号レベルが調節された画像信号は、カメラ信号処理部４１により、ゲイン調整やカメラ信号処理などが施され、SDRAM２５に展開される。
【００３０】
ステップＳ４において、SDRAM２５のエリア５１は、カメラ信号処理部４１より供給された画像信号を一時的に記憶する。ステップＳ５において、レゾリューションコンバータ４４は、SDRAM４５のエリア５１に一次的に記憶されている画像信号を読み出し、画像サイズをLCD１１に表示させるための３２０×２４０（ピクセル）の画像サイズに変更する処理を実行する。画像サイズが変更された画像信号は、SDRAM２５に展開される。
【００３１】
ステップＳ６において、SDRAM２５のエリア５３は、画像サイズが変更された画像を一時的に記憶する。ステップＳ７において、ビデオエンコード＆オンスクリーンディスプレイ部４２は、SDRAM２５のエリア５３に一次的に記憶されている画像信号を読み出し、RGB信号に変換した後、LCD１１に出力する。ステップＳ８において、LCD１１は、撮影した画像を表示する。
【００３２】
この様にして、LCD１１に被写体の画像がリアルタイムで表示される。ユーザが所定のタイミングで、シャッタボタン１７を操作すると、マイクロコントローラ２６は、ステップＳ９において、記録処理を実行する。
【００３３】
すなわち、レゾリューションコンバータ４４は、このときSDRAM２５のエリア５１に一次的に記憶されている画像信号を読み出し、その画像信号に対して、画像サイズを、ユーザが指示する画像サイズに変換する処理を施す。画像サイズが変更された画像信号は、SDRAM２５のエリア５２に展開される。SDRAM２５のエリア５２は、画像サイズが変更された画像信号を一時的に記憶する。JPEGモジュール４３は、SDRAM２５のエリア５２に一次的に記憶されている画像信号を読み出し、JPEG方式で圧縮した後、マイクロコントローラ２６に転送する。マイクロコントローラ２６は、ファイルシステムを制御し、JPEG方式で圧縮された画像信号を基に画像データ（ファイル）を作成してSDRAM２７に展開させた後、そのデータを読み出し、記録メディア２８に保存させる。
【００３４】
以上の様にして、１枚の画像が１個の画像データとして、任意の枚数だけ記録メディア２８に記録される。勿論、TIFF（Tagged Image File Format）形式やMPEG（Moving Picture Experts Group）形式、あるいは、その他各種フォーマットの画像なども記憶メディア２８に保存することができる。
【００３５】
次に、図５および図６のフローチャートを参照して、デジタルスチルカメラが実行するアニメーション画像編集処理について説明する。なお、この処理は、ユーザがモードダイヤル１２を操作して、再生モードに設定し、さらにボタン群１４や十字キー１３などを操作して、複数毎（例えば、９枚）の画像を再生できるインデックスモードに設定したときに開始される。ここで、アニメーション画像とは、例えば、アニメーションGIF（Graphics Interchange Format）といったように、複数の画像を連続して再生することによってアニメーションを実現するような画像を意味する。
【００３６】
ステップＳ２１において、マイクロコントローラ２６は、ユーザからのアニメーション画像編集処理開始の指示に基づいて、記録メディア２８に保存されている画像データを読み出し、SDRAM２７に展開する。そして、マイクロコントローラ２６は、SDRAM２７を介して画像信号を読み出し、JPEGモジュール４３に転送する。JPEGモジュール４３は、転送されてきたインデックス画像をSDRAM２５を介して、レゾリューションコンバータ４４に出力する。
【００３７】
レゾリューションコンバータ４４は、SDRAM２５を介して入力される画像信号に基づいて、インデックス画像を生成し、SDRAM２５のエリア５３に展開する。ビデオエンコード＆オンスクリーンディスプレイ部４２は、SDRAM２５のエリア５３に一次的に記憶されているインデックス画像を読み出し、LCD１１に出力する。なお、インデックス画像は予め生成し、記録メディア２８に画像信号とともに記録させておくこともできる。この場合、ステップＳ２１では、記録メディア２８に記録されているインデックス画像の読み出し処理が実行される。ステップＳ２２において、LCD１１は生成されたインデックス画像を並べて表示する。
【００３８】
図７は、この場合のインデックス画像の表示例を示している。この例では、８枚のインデックス画像１００が表示されており、説明の便宜上、それらには、番号０乃至７が付されている。また、インデックス画像１００の下には、削除ボタン１０１、クリップボタン１０２、プリントボタン１０３、およびコピーボタン１０４が表示されている。これらのボタンは、それぞれ、インデックス画像１００を削除するとき、クリップするとき（アニメーション画像を生成するための画像を選択するとき）、プリントするとき、またはコピーするとき、ユーザが十字キー１３の左ボタン１３ｃまたは右ボタン１３ｄを操作することによって選択される。いまの場合、クリップ処理（アニメーション画像生成処理）を行うため、ユーザは、クリップボタン１０２を選択する。
【００３９】
クリップボタン１０２が選択されたとき、ステップＳ２３において、マイクロコントローラ２６は、クリップモードを設定する。そしてこのとき、マイクロコントローラ２６は、LCD１１における表示を、図８に示されるように変更する。この例では、インデックス画像１００の下に、キャンセルボタン１１１、および選択ボタン１１２が表示されている。これらのボタンは、それぞれ、アニメーション画像編集処理をキャンセルするとき、またはアニメーション画像を生成するためのフレーム毎の画像を選択（クリップ）するとき、ユーザが十字キー１３の左ボタン１３ｃまたは右ボタン１３ｄを操作することによって選択される。
【００４０】
選択ボタン１１２が選択されたとき、マイクロコントローラ２６は、LCD１１における表示を、図９に示されるように変更する。この例では、所定のインデックス画像１００（図９の例では、番号０のインデックス画像１００）に対応して、アンカー１２１が表示されている。ユーザは、十字キー１３を操作して、アンカー１２１を上下左右に移動させ、所望位置でセンターボタン１３ｅを操作することで、所定のインデックス画像を選択する。
【００４１】
図５の説明に戻る。ステップ２４において、マイクロコントローラ２６は、ユーザにより、アニメーション画像を作成するためのインデックス画像が選択されたか否かを判定する。アニメーション画像を作成するためのインデックス画像（例えば、図９に示した番号０のインデックス画像１００）の選択が指示されたと判定された場合、ステップＳ２５に進み、マイクロコントローラ２６はさらに、選択されたインデックス画像に対応する元画像が静止画像であるか否かを判定する。静止画像から生成されたインデックス画像が選択されたと判定された場合、ステップＳ２６に進み、マイクロコントローラ２６は、インデックス画像に選択の順番を表わす番号を表示させるとともに、対応する画像信号の識別番号を選択順に記憶する。
【００４２】
例えば、番号０のインデックス画像１００（このインデックス画像に対応する元画像は静止画像である）が選択された場合、マイクロコントローラ２６は、図１０に示されるように、番号０のインデックス画像１００に、インデックス画像の選択の順番を表す番号（いまの場合、初めて選択されたので、番号１）のアイコン１３１を表示させるとともに、対応する画像信号の識別番号を選択順に記憶する。これにより、アニメーション画像の選択番号１に対応付けて、番号０のインデックス画像１００に対応する画像信号の識別番号が記憶される。
【００４３】
ステップＳ２６の処理の後、または、ステップＳ２４の処理で、アニメーション画像を作成するためのインデックス画像の選択が指示されなかった（すなわち、図８に示したキャンセルボタン１１１が操作された）と判定された場合、ステップＳ３２に進み、マイクロコントローラ２６は、画像選択が終了したか否か、すなわち、ユーザによって、ボタン群１４を構成するメニューボタンが操作されたか否かを判定する。画像選択が終了していないと判定された場合、ステップＳ２４に戻り、上述した処理が繰り返し実行される。なお、メニューボタンが操作される場合、マイクロコントローラ２６は、LCD１１における表示を、図２０（後述）に示されるように変更する。
【００４４】
以下、このステップＳ２４乃至Ｓ２６の処理について、さらに詳述する。
【００４５】
例えば、ユーザによって、図１１に示されるように、番号２のインデックス画像１００（このインデックス画像に対応する元画像は静止画像である）が選択され（ステップＳ２４）、そのインデックス画像に対応する元画像が静止画像であると判定されると（ステップＳ２５）、マイクロコントローラ２６は、図１２に示されるように、選択された番号２のインデックス画像１００に、選択の順番を表す番号２のアイコン１３１を表示させるとともに、対応する画像信号の識別番号を選択順に記憶する。これにより、アニメーション画像の選択番号２に対応付けて、番号２のインデックス画像１００に対応する画像信号の識別番号が記憶される。
【００４６】
また例えば、ユーザによって、図１３に示されるように、番号４のインデックス画像１００（このインデックス画像に対応する元画像は静止画像である）が選択され（ステップＳ２４）、そのインデックス画像に対応する元画像が静止画像であると判定されると（ステップＳ２５）、マイクロコントローラ２６は、図１４に示されるように、選択された番号４のインデックス画像１００に、選択の順番を表す番号３のアイコン１３１を表示させるとともに、対応する画像信号の識別番号を選択順に記憶する。これにより、アニメーション画像の選択番号３に対応付けて、番号４のインデックス画像１００に対応する画像信号の識別番号が記憶される。
【００４７】
以上のようにして、アニメーション画像に利用したい静止画像が選択される。
【００４８】
さらに例えば、ユーザによって、図１５に示されるように、番号６のインデックス画像１００（このインデックス画像に対応する元画像は動画像である）が選択された場合（ステップＳ２４）、ステップＳ２５において、そのインデックス画像に対応する元画像が静止画像ではない、すなわち動画像であると判定されるため、ステップＳ２７に進み、マイクロコントローラ２６は、動画像を再生するシングルモードに設定し、LCD１１における表示を、図１６に示されるように、動画像を再生するための画面に変更する。
【００４９】
図１６の例では、動画像１４１（いまの場合、動画像を構成する１フレーム分の画像Ａ）が表示されており、動画像１４１の下には、動画像全体の再生尺度を示すバー１４２および現在の再生位置を示すカーソル１４３が表示されている。図中、カーソル１４３が最左端に位置している場合、動画像１４１を構成する第１フレーム（コマ）目の画像が表示されるようになされており、カーソル１４３が最右端に位置している場合、動画像１４１の最後のフレームの画像が表示されるようになされている。
【００５０】
ユーザは、十字キー１３のセンターボタン１３ｅを操作することで、動画像１４１の再生を開始する。これにより、図１７に示されるように、動画像１４１の上に、現在再生中であることを示すアイコン１５１が表示される。また、動画像１４１は、再生が進むことで画像Ａ（図１６）から画像Ｆに表示が切り替わっている。なお、動画像１４１の再生中に、再び十字キー１３のセンターボタン１３ｅが操作されると、再生が停止される。
【００５１】
ユーザは、動画像１４１の再生中、十字キー１３の右ボタン１３ｄを操作するか、またはジョグダイヤル１６を上側に回動させて動画像１４１をコマ送りし、十字キー１３の左ボタン１３ｃを操作するか、またはジョグダイヤル１６を下側に回動させて動画像１４１をコマ戻しすることで、アニメーション画像に利用したい画像（１コマ）を表示させる。
【００５２】
ユーザは、クリップ（選択）したい画像（例えば、画像Ｈ）上で、ボタン群１４を構成するメニューボタンを操作すると、マイクロコントローラ２６は、図１８に示されるように、動画像１４１の下に、キャンセルボタン１６１、および選択ボタン１６２を表示させる。これらのボタンは、それぞれ、動画像のクリップ処理をキャンセルするとき、またはアニメーション画像を生成するための画像（いまの場合、動画像を構成する１コマ分の画像）を選択するとき操作される。
【００５３】
なお、図１６乃至図１８のいずれかの表示状態において、シングルモードで所定のボタン（９枚インデックス画像遷移ボタン）キャンセルボタンが操作された場合、マイクロコントローラ２６は、LCD１１における表示を、以前、９枚の画像を再生するインデックスモードで選択されていた画面に戻す（図１４）。この場合、動画像は選択されずに、そのまま図１４のインデックス画像の表示に戻る。
【００５４】
図５の説明に戻る。ステップＳ２８において、マイクロコントローラ２６は、画像が選択されたか否か、すなわち、所望の画像１４１上で、メニューボタンが操作され、さらに選択ボタン１６２（図１８）が操作されたか否かを判定し、画像が選択されたと判定した場合、ステップＳ２９に進み、選択された画像をキャプチャして、SDRAM２５のエリア５２に記憶する。ステップＳ３０において、マイクロコントローラ２６は、LCD１１における表示を、図１９に示されるように変更し、番号６のインデックス画像１００に、選択の順番を表わす番号４のアイコン１３１を表示させるとともに、SDRAM２５のエリア５２に格納したキャプチャ画像の格納場所を選択順に記憶する。これにより、アニメーション画像の選択番号４に対応付けて、キャプチャ画像を格納したSDRA２５のエリア５２の格納場所が記憶される。
【００５５】
ステップＳ２８において、選択ボタン１６２が操作されていないと判定した場合、ステップＳ３１に進み、マイクロコントローラ２６は、画像選択されずに終了が指示されたか否か、すなわち、図１４の表示状態に戻るための所定ボタン（９枚インデックス画像遷移ボタン）が操作されたか否かを判定し、終了が指示されていないと判定した場合、ステップＳ２８に戻り、上述した処理を繰り返し実行する。
【００５６】
ステップＳ３１において、画像選択されずに終了が指示されたと判定された場合、マイクロコントローラ２６は、LCD１１の表示を、図１４に示した表示に戻す。
【００５７】
ステップＳ２６，Ｓ３０、またはＳ３１の処理の後、ステップＳ３２において、画像選択が終了したと判定された場合、すなわち、インデックス画像の表示状態においてボタン群１４を構成するメニューボタンが操作されたと判定された場合、ステップＳ３３に進み、マイクロコントローラ２６は、図２０に示されるように、インデックス画像１００の下に、レビューボタン１７１、終了ボタン１７２、および実行ボタン１７３を表示させる。これらのボタンは、それぞれ、クリップした画像をレビューするとき、クリップ処理を終了するとき、またはクリップ処理を実行するとき、ユーザが十字キー１３の左ボタン１３ｃまたは右ボタン１３ｄを操作することによって選択される。
【００５８】
ステップＳ３３において、マイクロコントローラ２６は、ユーザにより、アニメーション画像を作成するための処理の実行が指示されたか否か、すなわち、実行ボタン１７３が操作されたか否かを判定し、実行が指示されていないと判定した場合、ステップＳ３４に進み、さらに、ユーザからアニメーション画像を作成するための処理の終了が指示されたか否か、すなわち、終了ボタン１７２が操作されたか否かを判定する。
【００５９】
ステップＳ３４において、終了ボタン１７２が操作されていないと判定された場合、ステップＳ２４に戻り、上述したそれ以降の処理が繰り返し実行され、アニメーション画像作成処理を終了するための終了ボタン１７２が操作されたと判定された場合、マイクロコントローラ２６は、アニメーション画像を編集せずに処理を終了させる。
【００６０】
ステップＳ３３において、実行ボタン１７３が操作されたと判定された場合、ステップＳ３５に進み、マイクロコントローラ２６は、自身で記憶している、アニメーション画像に利用する画像の選択番号のうち、Ｎ番目（いまの場合、１番目）に選択されている画像を呼び出す。ここで、静止画像が選択されている場合には、選択番号に対応付けて識別番号が記憶されているため、マイクロコントローラ２６は、その識別番号に基づいて、記録メディア２８から対応する１枚の画像信号を呼び出す。また動画像が選択されている場合には、選択番号に対応付けてSDRAM２５のエリア５２の格納場所が記憶されているため、マイクロコントローラ２６は、その格納場所に基づいて、SDRAM２５のエリア５２から対応するキャプチャ画像を呼び出す。
【００６１】
静止画像が呼び出された場合、ステップＳ３６において、マイクロコントローラ２６は、SDRAM２７に画像信号を一時的に記録する。ステップＳ３７において、マイクロコントローラ２６は、SDRAM２７から画像信号を読み出し、JPEGモジュール４３に転送する。JPEGモジュール４３は、入力された画像信号をJPEG方式で解凍し、SDRAM２５に展開する。ステップＳ３８において、SDRAM２５のエリア５２は、解凍された画像を一時的に記憶する。ステップＳ３９において、レゾリューションコンバータ４４は、SDRAM２５のエリア５２に記憶されている解凍された画像を読み出し、その画像サイズを、１６０×１２０（ピクセル）のサイズ（以下、サムネイルサイズと称する）に縮小する。
【００６２】
一方、キャプチャ画像（動画像）が呼び出された場合、ステップＳ３６乃至Ｓ３８の処理は実行せず、ステップＳ３９において、レゾリューションコンバータ４４は、SDRAM２５のエリア５２から呼び出されたキャプチャ画像の画像サイズを、サムネイルサイズに縮小する。
【００６３】
すなわち、ステップＳ３９の処理で、アニメーション画像を表示するためのサムネイル画像が生成される。ステップＳ４０において、レゾリューションコンバータ４４は、SDRAM２５のエリア５２にサムネイル画像を展開し、そこに一次的に記憶させる。
【００６４】
ステップＳ４１において、マイクロコントローラ２６は、SDRAM２５のエリア５２からサムネイル画像を読み出し、LZW（Lempel-Zev-Welch）により圧縮する。圧縮された画像データは、アニメーション画像の１コマとしてマイクロコントローラ２６のSDRAM２７に一時的に記憶される。
【００６５】
ステップＳ４２において、マイクロコントローラ２６は、ユーザによって、アニメーション画像を作成するために複数の画像が選択されており、まだ作成されていないアニメーション画像のコマ画像があるか否かを判定する。まだ作成されていないコマ画像があると判定された場合、ステップＳ３５に戻り、上述したそれ以降の処理が繰り返し実行される。具体的には、同様の処理を繰り返すことによって、アニメーション画像を作成するために選択された画像から、２枚目、３枚目のコマ画像が作成される。
【００６６】
ステップＳ４２において、アニメーション画像を作成するために選択された全ての画像について処理が終了したと判定された場合、ステップＳ４３に進む。ステップＳ４３において、マイクロコントローラ２６は、ファイルシステムを制御し、圧縮されたサムネイル画像信号を含む１つのファイル（１つのインデックスとして表示される（取り扱われる））を作成してSDRAM２７に展開させた後、そのファイルを記録メディア２８に保存させる。また、このとき、そのアニメーション画像に対応するインデックス画像が生成され、図２０に示されるように、番号８のインデックス画像として表示される。ここで、インデックス画像は、例えば、アニメーション画像を構成するサムネイル画像信号のうち、１番目のサムネイル画像信号から生成されるようにする。
【００６７】
以上の処理によって、ユーザの判断に基づいて選択した任意の数の静止画像から、サムネイル画像からなる１つのアニメーション画像（いわゆるアニメーションGIF）が生成される。従って、ユーザが記録メディア２８の再生を指示すると、マイクロコントローラ２６は、LCD１１に、図２１に示されるようなインデックス画像を表示させる。図２１と図７を比較して明らかなように、作成されたアニメーション画像に対応するインデックス画像が番号８のインデックス画像１００Ａとして表示されているとともに、アニメーション画像であることを示すアイコン１８１（図２１の例の場合、CLIP）が表示されている。
【００６８】
これにより、ユーザは、インデックス画像の中でアニメーション画像がどれであるかを容易に知ることができ、また、アニメーション画像を、１つの静止画像と同様に選択することができる。
【００６９】
なお、上述したステップＳ３３において実行が指示されると、アニメーション画像を作成するために選択された全ての画像から、アニメーション画像の作成処理（すなわち、ステップＳ３５乃至Ｓ４２の処理）が直ちに実行されるが、ユーザは、実行を指示する前に、図２０に示したレビューボタン１７を操作することで、クリップした画像をレビューさせることができる。従って、ユーザは、クリップした画像を確認しながら、アニメーション画像の編集を行うことができるため、より自分好みのアニメーション画像を容易に作成することができる。
【００７０】
次に、図２２のフローチャートを参照して、上述した一連の処理で作成されたアニメーション画像、静止画像、および動画像を再生する画像再生処理について説明する。この処理は、ユーザが、モードダイヤル１２を操作して再生モードに設定し、さらに複数枚の画像を再生できるインデックスモードに設定した後、複数枚の画像の中から１つのインデックス画像を選択したときに開始される。
【００７１】
ステップＳ７１において、マイクロコントローラ２６は、記録メディア２８から、ユーザによって指定された１つの画像データを呼び出す。ステップＳ７２において、マイクロコントローラ２６は、呼び出した画像データをSDRAM２７に展開し、一時的に記憶させる。ステップＳ７３において、解凍処理が行われる。選択された画像が静止画像である場合、SDRAMインターフェースモジュール２４のJPEGモジュール４３は、SDRAM２７に記憶しているデータをJPEG方式で解凍する。選択された画像が動画像である場合、SDRAM２７に記憶されているデータが、例えば、MPEG方式で解凍される。選択された画像がアニメーション画像である場合、マイクロコントローラ２６は、SDRAM２７に記憶しているデータをLZW方式で解凍する。
【００７２】
ステップＳ７４において、SDRAM２５のエリア５３は、解凍された画像を一時的に記憶する。ステップＳ７５において、ビデオエンコード＆オンスクリーンディスプレイ部４２は、画像をビデオ出力するために、画像を指定されたサイズ（この場合、LCD１１に表示させるための画像サイズ）に変更する。ステップＳ７６において、LCD１１は、画像をディスプレイ上に表示する。選択された画像が静止画像であれば静止画像が表示され、選択された画像が動画像であれば動画像が表示され、選択された画像がアニメーション画像であれば、アニメーション画像（擬似動画）が表示される。
【００７３】
以上の処理によって、ユーザは、静止画像、動画像、およびアニメーション画像を、その種類に関わらず同じ再生モードで再生させることができる。
【００７４】
またユーザは、以上の処理によって生成されたアニメーション画像に、さらに画像を追加したり、削除したり、あるいは、再生順を変更するといった、アニメーション画像の再編集を行うこともできる。
【００７５】
例えば、ユーザがボタン群１４や十字キー１３などを操作して、アニメーション画像の再編集処理を指示したとき、マイクロコントローラ２６は、ユーザからの指示に基づいて、記録メディア２８に保存されているアニメーション画像（上述した処理によって作成されたアニメーション画像）を読み出し、SDRAM２７に展開し、一時的に記憶させた後、LZW方式で解凍処理を行う。そして、解凍された画像がSDRAM２５のエリア５３に一時的に記憶され、ビデオエンコード＆オンスクリーンディスプレイ部４２によって、指定サイズに変更された後、LCD１１に、アニメーション画像のサムネイル画像が並べて表示される。
【００７６】
図２３は、この場合のアニメーション画像の各サムネイル画像の表示例を示している。この例では、４枚のサムネイル画像２００および所定のサムネイル画像２００（いまの場合、番号０のサムネイル画像２００）に対応していアンカー２１１が表示されている。これらのサムネイル画像２００は、上述した処理によって、番号０、番号２、番号４、および番号６の画像順でサムネイル画像が作成されたため、その作成順で表示されているとともに、選択順を表わすアイコン２１２（選択番号１乃至４）が表示されている。またサムネイル画像２００の下には、追加ボタン２０１、削除ボタン２０２、ソートボタン２０３、およびキャンセルボタン２０４が表示されている。これらのボタンは、それぞれ、アニメーション画像に新たに画像を追加するとき、削除するとき、ソートする（並べ替える）とき、または、再編集処理をキャンセルするとき、ユーザが十字キー１３の左ボタン１３ｃまたは右ボタン１３ｄを操作することによって選択される。
【００７７】
ユーザが追加ボタン２０１を選択したとき、マイクロコントローラ２６は、LCD１１の表示を、図９に示したインデックス画像の表示に変更する。これにより、ユーザは、十字キー１３を操作して、アンカー１２１を上下左右に移動させ、所望位置でセンターボタン１３ｅを操作することで、新たに追加したい画像を選択する。このとき、マイクロコントローラ２６は、追加された画像信号の識別番号を記憶する。なお、選択処理を続けて行うことで、複数の画像を選択することもできる。
【００７８】
例えば、番号５のインデックス画像１００が選択された場合、マイクロコントローラ２６は、LCD１１の表示を、図２４に示されるように変更する。この例では、アンカー２１１が番号０のサムネイル画像２００を選択している状態で、追加処理が実行されたため、番号０のサムネイル画像の前に番号５のインデックス画像が追加される。これにより、選択順を表わすアイコン２１２の表示が更新され、番号５のインデックス画像が選択番号１となる。このとき、マイクロコントローラ２６は、選択番号１に対応付けて番号５のインデックス画像に対応する画像信号の識別番号を記憶するとともに、番号０、番号２、番号４、および番号６のサムネイル画像を、それぞれ選択番号２乃至５に対応付けてSDRAM２７に記憶させる。
【００７９】
またユーザが、図２３の各サムネイル画像の表示において、アンカー２１２を番号２のサムネイル画像２００に移動させて削除ボタン２０２を選択したとき、マイクロコントローラ２６は、LCD１１の表示を、図２５に示されるように変更する。この例では、番号２の画像が削除されることによって、選択番号が更新され、番号４のサムネイル画像２００のアイコン２１２が番号２に変更されるとともに、番号６のサムネイル画像２００のアイコン２１２が番号３に変更される。このとき、マイクロコントローラ２６は、番号０、番号４、および番号６のサムネイル画像を、それぞれ選択番号１乃至３に対応付けてSDRAM２７に記憶させる。
【００８０】
またユーザが、図２３の各サムネイル画像の表示において、ソートボタン２０３を選択したとき、マイクロコントローラ２６は、LCD１１の表示を、図２６に示されるように変更する。この例では、アイコン２１２の表示が消去され、画像の選択順を変更することができるようになされる。またサムネイル画像２００の下には、OKボタン２２１、およびキャンセルボタン２２２が表示されている。これらのボタンは、それぞれ、新たに選択した順にサムネイル画像を並べ替えるとき、または、サムネイル画像の並べ替えをキャンセルするとき、ユーザが十字キー１３の左ボタン１３ｃまたは右ボタン１３ｄを操作することによって選択される。
【００８１】
ユーザは、十字キー１３を操作して、所望位置でセンターボタン１３ｅを操作することで、所定のサムネイル画像を選択する。そして、所定のサムネイル画像が選択されたとき、マイクロコントローラ２６は、そのサムネイル画像に、選択の順番を表わす番号のアイコン２１２を表示させる。
【００８２】
例えば、図２７に示されるように、番号４、番号６、番号２、および番号０のサムネイル画像の順で選択され、OKボタン２２１が操作された場合、マイクロコントローラ２６は、LCD１１の表示を、図２８に示されるように変更する。この例では、サムネイル画像が並べ替えられることによって選択番号が更新され、番号４のサムネイル画像のアイコン２１２が番号１に変更され、番号６のサムネイル画像のアイコン２１２が番号２に変更され、番号２のサムネイル画像のアイコン２１２が番号３に変更され、番号０のサムネイル画像のアイコンが番号４に変更される。このとき、マイクロコントローラ２６は、番号４、番号６、番号２、および番号０のサムネイル画像を、それぞれ選択番号１乃至４に対応付けてSDRAM２７に記憶させる。
【００８３】
以上のようにして、一旦作成されたアニメーション画像の再編集を行うことができる。そして、ユーザによって、ボタン群１４を構成するメニューボタンが操作されると、マイクロコントローラ２６は、図２９に示されるように、サムネイル画像２００の下に、レビューボタン２３１、終了ボタン２３２、および実行ボタン２３３を表示させる。これらのボタンは、それぞれ、再編集した画像をレビューするとき、再編集処理を終了するとき、または再編集処理を実行するとき、ユーザが十字キー１３の左ボタン１３ｃまたは右ボタン１３ｄを操作することによって選択される。
【００８４】
ユーザが、実行ボタン２３３を操作すると、アニメーション画像が再編集される。具体的には、アニメーション画像に新たな画像が追加された場合には、マイクロコントローラ２６は、自身で記憶している、追加画像の識別番号に基づいて、対応する画像信号を記録メディア２８から呼び出し、SDRAM２７を介してJPEGモジュール４３に転送し、そこでJPEG方式で解凍させる。解凍された画像は、SDRAM２５のエリア５２に一次的に記憶され、レゾリューションコンバータ４４で画像サイズがサムネイルサイズに縮小され、SDRAM２５のエリア５２を介してマイクロコントローラ２６でLZW圧縮され、SDRAM２７に一次的に記憶される。マイクロコントローラ２６は、ファイルシステムを制御し、再編集されたサムネイル画像信号を含む１つのファイルを作成してSDRAM２７に展開させた後、そのファイルを記録メディア２８に上書きするか、あるいは、別ファイルとして記録メディア２８に保存させる。
【００８５】
また、アニメーション画像のサムネイル画像がソートまたは削除された場合には、マイクロコントローラ２６は、ファイルシステムを制御し、SDRAM２７に記憶されている再編集されたサムネイル画像信号を含む１つのファイルを作成させ、記憶メディア２８に保存させる。
【００８６】
以上の処理によって、一旦作成されたアニメーション画像の再編集が行われる。従って、ユーザは、自由にアニメーション画像の作成を行ったり、画像の追加、削除、あるいは並べ替えといった再編集を行うことができ、アニメーション画像作成の操作性が向上する。
【００８７】
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【００８８】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを記録する記録媒体は、図３に示されるように、磁気ディスク３１（フレキシブルディスクを含む）、光ディスク３２（CD-ROM、DVD(Digital Versatile Disc)を含む）、光磁気ディスク３３（MD(Mini-Disc)（登録商標）を含む）、もしくは半導体メモリ３４などよりなるパッケージメディア、または、プログラムが一時的もしくは永続的に記録されるFlash ROMやハードディスクドライブなどにより構成される。記録媒体へのプログラムの記録は、必要に応じてルータ、モデムなどのインターフェースを介して、公衆回線網、ローカルエリアネットワーク、またはインターネットなどのネットワーク、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【００８９】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【００９０】
【発明の効果】
以上のように、本発明によれば、簡単かつ効率的にアニメーション画像の編集を行うことができる。
【００９１】
また本発明によれば、静止画像や動画像などの様々な画像素材から、簡単かつ効率的にアニメーション画像の編集を行うことができる。
【図面の簡単な説明】
【図１】本発明を適用したデジタルスチルカメラの外観の構成例を示す図である。
【図２】図１のデジタルスチルカメラの十字キーの拡大図である。
【図３】デジタルスチルカメラの電気的構成例を示すブロック図である。
【図４】撮影処理を説明するフローチャートである。
【図５】アニメーション画像編集処理を説明するフローチャートである。
【図６】図４に続くフローチャートである。
【図７】インデックス画像の表示例を示す図である。
【図８】図７のクリップボタンが選択された場合のインデックス画像の表示例を示す図である。
【図９】図８の選択ボタンが選択された場合のインデックス画像の表示例を示す図である。
【図１０】他のインデックス画像の表示例を示す図である。
【図１１】他のインデックス画像の表示例を示す図である。
【図１２】他のインデックス画像の表示例を示す図である。
【図１３】他のインデックス画像の表示例を示す図である。
【図１４】他のインデックス画像の表示例を示す図である。
【図１５】他のインデックス画像の表示例を示す図である。
【図１６】動画像再生画面の表示例を示す図である。
【図１７】再生が指示された場合の動画像再生画面の表示例を示す図である。
【図１８】他の動画像再生画面の表示例を示す図である。
【図１９】インデックス画像の表示例を示す図である。
【図２０】他のインデックス画像の表示例を示す図である。
【図２１】他のインデックス画像の表示例を示す図である。
【図２２】画像再生処理を説明するフローチャートである。
【図２３】アニメーション画像の各サムネイル画像の表示例を示す図である。
【図２４】図２３の追加ボタンが選択された場合の各サムネイル画像の表示例を示す図である。
【図２５】図２３の削除ボタンが選択された場合の各サムネイル画像の表示例を示す図である。
【図２６】図２３のソートボタンが選択された場合の各サムネイル画像の表示例を示す図である。
【図２７】他の各サムネイル画像の表示例を示す図である。
【図２８】他の各サムネイル画像の表示例を示す図である。
【図２９】他の各サムネイル画像の表示例を示す図である。
【符号の説明】
１ デジタルスチルカメラ， ２ 本体， ３ 表示部， １１ LCD， １２ モードダイヤル， １３ 十字キー， １４ ボタン群， １５ ズームレバー， １６ ジョグダイヤル， １７ シャッタボタン， ２４ SDRAMインターフェースモジュール， ２５ SDRAM， ２６ マイクロコントローラ， ２７ SDRAM， ２８ 記録メディア， ２９ ドライブ， ３１ 磁気ディスク， ３２ 光ディスク， ３３ 光磁気ディスク， ３４ 半導体メモリ， ４１ カメラ信号処理部， ４２ ビデオエンコード＆オンスクリーンディスプレイ部， ４３ JPEGモジュール， ４４ レゾリューションコンバータ， ４１乃至５３ エリア

Claims (4)

1. 被写体を撮影するとともに、撮影した画像を再生する携帯型装置の画像処理方法において、
   撮影された前記被写体の画像の記録を制御する記録制御ステップと、
   指定された前記画像から生成されたサムネイル画像を１つのコマとし、前記画像としての静止画像から生成されたサムネイル画像、および前記画像としての動画像から生成されたサムネイル画像から生成されたアニメーション画像から、前記アニメーション画像に対応するインデックス画像を生成する生成ステップと、
   前記画像から生成されたインデックス画像、および前記アニメーション画像に対応するインデックス画像を並べて表示する表示ステップと、
   前記表示ステップの処理において表示されている前記アニメーション画像に対応する前記インデックス画像が選択された場合、ユーザの操作に応じて、選択された前記インデックス画像に対応する前記アニメーション画像の再生、削除、再編集、または印刷の制御の何れかの処理を実行する実行ステップと
   を含み、
   前記生成ステップにおいて、前記アニメーション画像を記憶手段に展開し、前記記憶手段に一時的に記憶されている前記アニメーション画像から、前記インデックス画像を生成し、
   前記ユーザの操作により前記アニメーション画像の再編集が指示された場合、前記実行ステップにおいて、前記画像から生成された前記インデックス画像をさらに表示し、表示されている前記インデックス画像から、前記アニメーション画像の再編集に用いる前記画像のインデックス画像として選択された所定のインデックス画像に対応する前記画像が動画像であるとき、前記動画像を構成する複数コマのうちの所定のコマからアニメーション画像の基になるサムネイル画像を生成し、そのサムネイル画像を再編集が指示された前記アニメーション画像に対して追加して、新たなアニメーション画像を編集する
   ことを特徴とする画像処理方法。
2. 被写体を撮影するとともに、撮影した画像を再生する携帯型装置の画像処理方法において、
   静止画像から生成されたサムネイル画像、および動画像から生成されたサムネイル画像からなるアニメーション画像の再編集が指示された場合、撮影され、記録されている複数の前記被写体の画像から生成されるインデックス画像を表示する第１の表示ステップと、
   前記第１の表示ステップの処理により表示されている前記インデックス画像から、所定のインデックス画像が選択され、選択された前記所定のインデックス画像に対応する前記画像が動画像である場合、前記動画像を構成する複数コマのうちの所定のコマから、アニメーション画像の基になるサムネイル画像を生成する第１の生成ステップと、
   再編集が指示された前記アニメーション画像に対して、前記第１の生成ステップの処理により生成された前記サムネイル画像を追加して新たなアニメーション画像を編集する編集ステップと、
   前記画像から生成されるインデックス画像、および前記新たなアニメーション画像から生成された前記新たなアニメーション画像に対応するインデックス画像を並べて表示する第２の表示ステップと
   を含むことを特徴とする画像処理方法。
3. 前記画像および前記新たなアニメーション画像を記憶手段に展開し、前記記憶手段に一時的に記憶されている前記画像および前記新たなアニメーション画像から、前記第２の表示ステップの処理により表示される前記インデックス画像を生成する第２の生成ステップをさらに含む
   ことを特徴とする請求項２に記載の画像処理方法。
4. 選択された前記所定のインデックス画像に対応する前記動画像を表示する第３の表示ステップをさらに含み、
   前記第１の生成ステップにおいて、表示された前記動画像の選択された前記所定のコマから前記サムネイル画像を生成する
   ことを特徴とする請求項３に記載の画像処理方法。

Images