Nothing Special   »   [go: up one dir, main page]

JP2008199356A - Imaging apparatus and imaging method - Google Patents

Imaging apparatus and imaging method Download PDF

Info

Publication number
JP2008199356A
JP2008199356A JP2007033345A JP2007033345A JP2008199356A JP 2008199356 A JP2008199356 A JP 2008199356A JP 2007033345 A JP2007033345 A JP 2007033345A JP 2007033345 A JP2007033345 A JP 2007033345A JP 2008199356 A JP2008199356 A JP 2008199356A
Authority
JP
Japan
Prior art keywords
gps
connection
gps information
wireless communication
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007033345A
Other languages
Japanese (ja)
Other versions
JP4755614B2 (en
Inventor
Naoki Tsunoda
直規 角田
Hiroaki Uchiyama
裕章 内山
Tetsuya Hashimoto
徹也 橋本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2007033345A priority Critical patent/JP4755614B2/en
Publication of JP2008199356A publication Critical patent/JP2008199356A/en
Application granted granted Critical
Publication of JP4755614B2 publication Critical patent/JP4755614B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To improve the extensibility of post-process in a PDA and a PC using position information by acquiring the position information from a plurality of GPS receiving devices and further to improve convenience by efficiently performing transmission processing. <P>SOLUTION: A Bluetooth communication card mounted via a memory card throttle 121 or Bluetooth communication circuit 130 obtains GPS information from each of GPS receiving devices installed in a plurality of photographing objects by radio communication connected to the GPS receiving devices by radio. After establishing radio connection by an SPP (Serial Port Profile) protocol of Bluetooth communication, the GPS receiving devices transmit the GPS information (sentence data) to an imaging apparatus. The GPS information received by the imaging apparatus is displayed in a displaying means and attached to photographed image data. By using an image file with the GPS information attached to the image data, the extensibility of post-process in an external device such as a PDA and a PC and its convenience are improved. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、GPS情報や画像ファイルの各情報を、無線通信を用いて授受する撮像装置および撮像方法に関するものである。   The present invention relates to an imaging apparatus and an imaging method for exchanging GPS information and information of image files using wireless communication.

近年、デジタルカメラ等の撮像装置における撮影方式として、様々な情報を撮影した画像と一緒に記録する方式が提案されている。画像と一緒に添付された情報は、PDAやPCなどに転送して、様々な後処理を行うための情報として利用される。その中で、GPS情報などは、撮像装置に有するカードI/FにGPSカードを挿入してGPS情報を取得したり、撮像装置に有するシリアルI/Fを介しGPS受信機器と接続してGPS情報を取得したりして、撮像装置内に取り込んだりする。または、撮像装置に有するカードI/FにBluetooth(登録商標)の無線通信規格(以下、Bluetooth通信という)のBluetooth通信カードを挿入し、このBluetooth通信に対応して無線接続可能なGPS受信器との無線通信によりGPS情報を取得し撮像装置内に取り込んだりする。   In recent years, a method of recording various information together with captured images has been proposed as a shooting method in an imaging apparatus such as a digital camera. The information attached together with the image is transferred to a PDA or PC and used as information for performing various post-processing. Among them, GPS information and the like are obtained by inserting a GPS card into a card I / F included in the imaging apparatus, or by connecting to a GPS receiving device via a serial I / F included in the imaging apparatus. Or is taken into the imaging apparatus. Alternatively, a Bluetooth communication card of a Bluetooth (registered trademark) wireless communication standard (hereinafter referred to as “Bluetooth communication”) is inserted into the card I / F of the image pickup apparatus, and a GPS receiver capable of wireless connection corresponding to this Bluetooth communication and GPS information is acquired by wireless communication and taken into the imaging apparatus.

このようなGPS受信機器からのGPS情報を無線通信により取得し、撮影画像データとともに記録するデジタルカメラが特許文献1,2に記載されている。   Patent Documents 1 and 2 describe a digital camera that acquires GPS information from such a GPS receiving device by wireless communication and records it together with captured image data.

また、特許文献3には、デジタルカメラで撮影した画像の操作性を向上するため、デジタルカメラとファイルサーバをネットワークで接続し、電源をオン時に、起動処理の中でファイルサーバとのネットワーク接続を確立し、画像をファイルサーバへ自動で送信、またデジタルカメラの画像再生指示で、その画像がネットワークを介してダウンロードして表示すること、特許文献4には、選択された相手機器の機器種類に応じた機能モード項目を、例えば相手機器がプリンターであれば印刷モード項目に変え、また、選択相手機器の多機能に対応した機能モード項目を加えることで、同じ操作方法でも、多機能時だけ操作手順を増やすことで、周辺機器と通信操作がわかりやすく、操作を容易としたデジタルカメラが記載されている。   Further, in Patent Document 3, in order to improve the operability of images taken with a digital camera, the digital camera and the file server are connected via a network, and when the power is turned on, the network connection with the file server is established during the startup process. Establishing and automatically transmitting the image to the file server, or downloading and displaying the image via the network in response to an image playback instruction of the digital camera. Patent Document 4 describes the device type of the selected counterpart device. For example, if the other device is a printer, change the corresponding function mode item to a print mode item, and add the function mode item corresponding to the multi-function of the selected partner device. A digital camera is described that increases the number of procedures, making it easier to understand peripheral devices and communication operations, and making the operations easier.

また、特許文献5には、LANに対してブロードキャストによる問合せデータを送信して、LANに接続されている機器からの問合せデータに対する応答データを受信時に、この応答データを送信した機器のIPアドレスを抽出し、このIPアドレスの機器に宛てて画像データを送信することで、ユーザによる送信先の特定作業を省力化するデジタルカメラが記載されている。
特開2006−086927号公報 特開2006−033186号公報 特開2004−193691号公報 特開2006−203625号公報 特開2004−159281号公報
Further, in Patent Document 5, when inquiry data by broadcast is transmitted to the LAN and response data to the inquiry data from the device connected to the LAN is received, the IP address of the device that transmitted this response data is received. There is described a digital camera that saves the work of specifying a transmission destination by a user by extracting and transmitting image data to a device having this IP address.
JP 2006-086927 A JP 2006-033186 A JP 2004-193691 A JP 2006-203625 A JP 2004-159281 A

本発明では、Bluetooth通信のような無線通信を利用した情報転送において、複数のGPS受信機器からのGPS情報を取得し、かつ外部機器への撮影情報の送信を効率的に行う撮像装置を提供して、複数のGPS受信機器からの複数の地点での場所情報を取得し、この情報を利用することによって、PDA(Personal Digital Assistance)やPC(Personal Computer)での後処理の拡張性を向上、さらに効率的な送信処理により、その利便性を向上させることを目的とする。   The present invention provides an imaging apparatus that acquires GPS information from a plurality of GPS receiving devices and efficiently transmits shooting information to an external device in information transfer using wireless communication such as Bluetooth communication. By acquiring location information at multiple points from multiple GPS receivers and using this information, the scalability of post-processing on PDA (Personal Digital Assistance) and PC (Personal Computer) is improved. Furthermore, it aims at improving the convenience by an efficient transmission process.

前記の目的を達成するために、本発明に係る請求項1記載の撮像装置は、複数の接続先と通信可能な無線通信機能および被写体像を撮影して画像データを得る撮影機能を有し、無線通信機能を有するGPS受信機器との間でポイント・ツー・ポイント・プロトコルにより無線接続した無線通信によって情報交換を行う撮像装置において、複数のGPS受信機器とポイント・ツー・ポイント・プロトコルの無線接続を確立する接続手段と、無線接続の確立後の無線通信によってGPS受信機器からのGPS情報を取得する取得手段と、GPS受信機器から取得したGPS情報をリアルタイムに表示する表示手段と、GPS受信機器から取得したGPS情報を撮影時に得た画像データに添付する添付手段とを備えたことによって、複数地点のGPS情報を撮影した画像データに添付することが可能となり、PCやPDA等の画像データの後処理における拡張性、その利便性を向上できる。   In order to achieve the above object, the imaging apparatus according to claim 1 according to the present invention has a wireless communication function capable of communicating with a plurality of connection destinations and a photographing function for photographing subject images to obtain image data, Wireless connection of multiple GPS receivers and point-to-point protocol in an imaging device that exchanges information by wireless communication wirelessly connected with GPS receivers having a wireless communication function using point-to-point protocol A connection means for establishing GPS, an acquisition means for acquiring GPS information from a GPS receiver by wireless communication after establishment of a wireless connection, a display means for displaying GPS information acquired from the GPS receiver in real time, and a GPS receiver GPs at a plurality of points are provided with attachment means for attaching the GPS information acquired from the image data obtained at the time of shooting. It is possible to attach the image data obtained by photographing the information, thereby improving the scalability, its convenience in after-treatment of the image data such as a PC or PDA.

また、請求項2に記載した撮像装置は、請求項1の撮像装置であって、複数のGPS受信機器から取得したGPS情報をユーザの操作に基づいて選択切替えする切替手段を備え、表示手段に表示する共に画像データに添付するGPS情報を選択切替えすることによって、複数地点のGPS情報を撮影した画像データに添付できると共に、添付する複数のGPS情報が選択可能となり、画像データの後処理での拡張性、その利便性をさらに向上できる。   An imaging apparatus according to claim 2 is the imaging apparatus according to claim 1, further comprising switching means for selecting and switching GPS information acquired from a plurality of GPS receiving devices based on a user operation, and the display means By selecting and switching the GPS information to be displayed and attached to the image data, GPS information at a plurality of points can be attached to the captured image data, and a plurality of GPS information to be attached can be selected. The expandability and its convenience can be further improved.

また、請求項3〜5に記載した撮像装置は、請求項1の撮像装置であって、複数のGPS受信機器から取得したGPS情報を保持する保持手段を備え、GPS受信機器からのGPS情報が測位から未測位の情報となった場合、またはGPS受信機器との無線接続が切断された場合、保持手段の保持するGPS情報を用いて表示手段により表示し、また添付手段により画像データに添付すること、さらに、保持手段の保持する複数のGPS情報をユーザの操作に基づいて選択切替えする切替手段を備え、表示手段に表示すると共に画像データに添付するGPS情報の選択切替えすること、または、保持手段の保持するGPS情報を用いる場合に、保持手段の保持したGPS情報であることを示す識別情報を付与する付与手段を備え、付与手段によってGPS情報を区別可能として、表示手段に表示すると共に画像データに添付することによって、GPS受信機器との無線接続が切断されたり、測位データが得られなった場合でも複数地点のGPS情報を撮影した画像データに添付でき、また、添付するGPS情報が選択可能となり、画像データの後処理での拡張性、その利便性を向上でき、GPS情報が保持手段に保持されたものか区別が容易にできる。   The imaging device according to any one of claims 3 to 5 is the imaging device according to claim 1, and includes a holding unit that holds GPS information acquired from a plurality of GPS receiving devices, and the GPS information from the GPS receiving devices is received. When positioning becomes unpositioned information or when the wireless connection with the GPS receiving device is disconnected, the GPS information held by the holding means is displayed on the display means, and attached to the image data by the attaching means. And switching means for selecting and switching a plurality of GPS information held by the holding means based on a user's operation, and selecting or switching the GPS information displayed on the display means and attached to the image data. When the GPS information held by the means is used, the granting means is provided for providing identification information indicating that the GPS information is held by the holding means. The GPS information can be distinguished and displayed on the display means and attached to the image data, so that the GPS information of a plurality of points can be obtained even when the wireless connection with the GPS receiving device is disconnected or the positioning data cannot be obtained. Can be attached to captured image data, and the GPS information to be attached can be selected to improve the extensibility and convenience of post-processing of the image data, and it is easy to distinguish whether the GPS information is held in the holding means Can be.

また、請求項6に記載した撮像装置は、請求項1〜5の撮像装置であって、撮影機能により得た画像データにGPS情報を添付し画像ファイルとして記録する記録手段と、無線通信機能により外部機器と無線通信を行う通信手段で用いる予め登録されている接続設定を選択する選択手段を備え、外部機器と無線通信を行う処理が選択されると同時に、選択された処理のバックグラウンドで前回接続の接続設定により通信手段の無線接続を確立する処理を実行することによって、無線ネットワークの接続先が前回接続した接続先と同じ場合に、無線接続の処理と選択された処理とが同時に行われているため短時間で通信処理に移ることができる。   According to a sixth aspect of the present invention, there is provided an imaging apparatus according to any one of the first to fifth aspects, wherein the image data obtained by the photographing function is attached with GPS information and recorded as an image file, and the wireless communication function. A selection means for selecting a connection setting registered in advance in a communication means for performing wireless communication with an external device is provided, and at the same time as a process for performing wireless communication with the external device is selected, the process is performed in the background of the selected process. By executing the process of establishing the wireless connection of the communication means by the connection setting of the connection, the wireless connection process and the selected process are performed simultaneously when the connection destination of the wireless network is the same as the previous connection destination. Therefore, it can move to communication processing in a short time.

また、請求項7に記載した撮像装置は、請求項6の撮像装置であって、外部機器と無線通信を行う処理が、通信手段の無線接続を確立する処理の途中で解除された場合、無線接続を確立する処理を中止することによって、電力消費を抑えることができる。   The image pickup apparatus according to claim 7 is the image pickup apparatus according to claim 6, wherein the wireless communication with the external device is canceled in the middle of the process of establishing the wireless connection of the communication means. By stopping the process of establishing a connection, power consumption can be suppressed.

また、請求項8に記載した撮像装置は、請求項1〜5の撮像装置であって、撮影機能により得た画像データにGPS情報を添付し画像ファイルとして記録する記録手段と、無線通信機能により外部機器と無線通信を行う通信手段で用いる予め登録されている接続設定を選択する選択手段を備え、外部機器と無線通信を行う処理が選択決定され、この処理において接続先が選択されると同時に、選択決定された処理のバックグラウンドで接続先の接続設定により通信手段の無線接続を確立する処理を実行することによって、無線接続の処理と選択決定された処理とが同時に行われているため短時間で通信処理に移ることができる。   According to an eighth aspect of the present invention, there is provided an imaging apparatus according to any one of the first to fifth aspects, wherein recording means for attaching GPS information to image data obtained by the photographing function and recording it as an image file, and a wireless communication function. A selection means for selecting a connection setting registered in advance for use in a communication means for performing wireless communication with an external device is provided, and a process for performing wireless communication with the external device is selected and determined. In this process, a connection destination is selected. Since the process of establishing the wireless connection of the communication means by the connection setting of the connection destination is executed in the background of the process determined and determined, the process of the wireless connection and the process determined and determined are simultaneously performed. You can move on to communication processing in time.

また、請求項9,10に記載した撮像装置は、請求項8の撮像装置において、外部機器と無線通信を行う処理において、外部機器へ送信する画像ファイルの選択が完了し、通信手段の無線接続を確立する処理が完了していないとき、外部機器と無線通信を行う処理を停止して通信手段の処理が完了するまで表示手段に接続中を表示すること、また、外部機器と無線通信を行う処理において、外部機器へ送信する画像ファイルの選択中に、通信手段の無線接続を確立する処理でエラーが発生したとき、画像ファイルの選択完了後にエラーの警告を行うことによって、無線接続を確立する処理の完了まで選択した画像を送信する処理を停止するため、無線接続のエラー発生を確認でき、また、画像ファイルの選択完了後にエラー発生警告を行うことで、再度接続する処理を行う場合に、画像ファイルの選択処理をすることなく送信することができる。   Further, in the imaging device according to claims 9 and 10, in the imaging device according to claim 8, in the process of performing wireless communication with the external device, selection of an image file to be transmitted to the external device is completed, and wireless communication of the communication unit is performed. When the process of establishing the connection is not completed, the process of performing wireless communication with the external device is stopped, and the connection means is displayed on the display unit until the process of the communication unit is completed, and the wireless communication with the external device is performed. In the process, when an error occurs in the process of establishing the wireless connection of the communication means during the selection of the image file to be transmitted to the external device, the wireless connection is established by warning the error after the selection of the image file is completed. Since the process of sending the selected image is stopped until the process is completed, the occurrence of an error in the wireless connection can be confirmed, and an error occurrence warning can be issued after the selection of the image file is completed. In, can be transmitted without the case of the process of connecting again, the selection processing of the image file.

また、請求項11〜20に記載した撮像方法は、請求項1〜10の撮像装置を、工程に分けて記述し撮像方法としたものであって、その特徴は、前記請求項1〜10の撮像装置と同様である。   The imaging method according to claims 11 to 20 is the imaging method according to the imaging apparatus according to claims 1 to 10 described by dividing the imaging apparatus into steps. This is the same as the imaging device.

本発明によれば、複数のGPS受信機器からの複数の地点での場所情報を取得し、この情報を利用することによって、PDAやPCでの後処理の拡張性、さらに効率的な送信処理をすることにより、その利便性を向上させることができるという効果を奏する。   According to the present invention, location information at a plurality of points from a plurality of GPS receiving devices is acquired, and by using this information, post-processing expandability in PDA or PC, and more efficient transmission processing can be performed. By doing so, there is an effect that the convenience can be improved.

以下、図面を参照して本発明における実施の形態を詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は本発明の実施形態1における撮像装置の一例であるデジタルカメラの外観を示す(a)は上面図、(b)は正面図、(c)は背面図である。また、図2はデジタルカメラ内部のシステム構成の概要を示すブロック回路図である。   FIG. 1A is a top view, FIG. 1B is a front view, and FIG. 1C is a rear view showing the appearance of a digital camera that is an example of an imaging apparatus according to Embodiment 1 of the present invention. FIG. 2 is a block circuit diagram showing an outline of the system configuration inside the digital camera.

図1,図2を参照しながら、本実施形態1におけるデジタルカメラの動作を説明する。   The operation of the digital camera in the first embodiment will be described with reference to FIGS.

まず、図1(a),(b),(c)に示すように、デジタルカメラ本体の上面には、レリーズスイッチ(レリーズシャッタ)SW1、モードダイヤルスイッチSW2、およびサブLCD(液晶ディスプレイ)1が配設されている。   First, as shown in FIGS. 1A, 1B, and 1C, a release switch (release shutter) SW1, a mode dial switch SW2, and a sub LCD (liquid crystal display) 1 are provided on the upper surface of the digital camera body. It is arranged.

また、デジタルカメラ本体の正面には、撮影レンズを含む鏡胴ユニット7、光学ファインダ4、ストロボ発光部3、測距ユニット5、リモートコントロール(リモコン)受光部6が設けられている。   In addition, a lens barrel unit 7 including an imaging lens, an optical viewfinder 4, a strobe light emitting unit 3, a distance measuring unit 5, and a remote control (remote control) light receiving unit 6 are provided on the front surface of the digital camera body.

デジタルカメラの背面には、電源スイッチSW13、LCDモニタ10、AFLED8、ストロボLED9、広角方向ズームスイッチSW3、望遠方向ズームスイッチSW4、セルフタイマの設定・削除するセルフタイマスイッチSW5、メニュースイッチSW6、上移動・ストロボセットスイッチSW7、右移動スイッチSW8、ディスプレイスイッチSW9、下移動・マクロスイッチSW10、左移動・画像確認スイッチSW11、OKスイッチSW12が設けられている。カメラ本体の側面にはメモリカード/電池装填室の蓋2が設けられている。   On the back of the digital camera, the power switch SW13, LCD monitor 10, AFLED8, strobe LED9, wide-angle zoom switch SW3, telephoto zoom switch SW4, self-timer switch SW5 for setting / deleting the self-timer, menu switch SW6, upward movement A strobe set switch SW7, a right movement switch SW8, a display switch SW9, a downward movement / macro switch SW10, a left movement / image confirmation switch SW11, and an OK switch SW12 are provided. A memory card / battery loading chamber lid 2 is provided on the side of the camera body.

デジタルカメラの各部材の機能および作用は公知であるので、その説明は省略することにし、次にカメラの内部のシステム構成を図2に基づき図1を参照しながら説明する。   Since the function and operation of each member of the digital camera are known, the description thereof will be omitted, and the internal system configuration of the camera will be described with reference to FIG. 1 based on FIG.

鏡胴ユニット7は、被写体の光学画像を取り込むズームレンズ71a,ズーム駆動モータ71bからなるズーム光学系71、フォーカスレンズ72a,フォーカス駆動モータ72bからなるフォーカス光学系72、絞り73a,絞りモータ73bからなる絞りユニット73、メカシャッタ74a,メカシャッタモータ74bからなるメカシャッタユニット74、各モータを駆動するモータドライバ75を有する。そして、モータドライバ75は、リモコン受光部6入力や操作キーユニット(操作スイッチSW1〜SW13からなる)の操作入力に基づく、後述するデジタルスチルカメラプロセッサ104内にあるCPUブロック1043からの駆動指令により駆動制御される。   The lens barrel unit 7 includes a zoom optical system 71 including a zoom lens 71a for capturing an optical image of a subject and a zoom drive motor 71b, a focus optical system 72 including a focus lens 72a and a focus drive motor 72b, an aperture 73a, and an aperture motor 73b. A diaphragm unit 73, a mechanical shutter 74a, a mechanical shutter unit 74 including a mechanical shutter motor 74b, and a motor driver 75 for driving each motor are provided. The motor driver 75 is driven by a drive command from a CPU block 1043 in the digital still camera processor 104 (to be described later) based on an input from the remote control light receiving unit 6 or an operation input from an operation key unit (including operation switches SW1 to SW13). Be controlled.

ROM108には、CPUブロック1043にて解読可能なコードで記述された、制御プログラムや制御するためのパラメータが格納されている。このデジタルカメラの電源がオン状態になると、プログラムは不図示のメインメモリにロードされ、CPUブロック1043はそのプログラムに従って装置各部の動作を制御するとともに、制御に必要なデータ等を、一時的に、RAM107、および後述するデジタルスチルカメラプロセッサ104内にあるローカルSRAM1044に保存する。ROM108に書き換え可能なフラッシュROMを使用することで、制御プログラムや制御するためのパラメータを変更することが可能となり、機能のバージョンアップが容易に行える。   The ROM 108 stores a control program and parameters for control described in a code readable by the CPU block 1043. When the power of the digital camera is turned on, the program is loaded into a main memory (not shown), and the CPU block 1043 controls the operation of each part of the apparatus according to the program and temporarily stores data necessary for the control. The data is stored in the RAM 107 and a local SRAM 1044 in the digital still camera processor 104 described later. By using a rewritable flash ROM for the ROM 108, the control program and parameters for control can be changed, and the function can be easily upgraded.

CCD101は、光学画像を光電変換するための固体撮像素子であり、F/E(フロントエンド)−IC102は、画像ノイズ除去用の相関二重サンプリングを行うCDS1021、利得調整を行うAGC1022、デジタル信号変換を行うA/D1023、第1CCD信号処理ブロック1041より、垂直同期信号(以下、VDという)、水平同期信号(以下、HDという)を供給され、CPUブロック1043によって制御されるCCD101、およびF/E−IC102の駆動タイミング信号を発生するTG1024を有する。   The CCD 101 is a solid-state imaging device for photoelectrically converting an optical image. The F / E (front end) -IC 102 is a CDS 1021 that performs correlated double sampling for image noise removal, an AGC 1022 that performs gain adjustment, and a digital signal conversion. The A / D 1023 and the first CCD signal processing block 1041 perform vertical synchronization signal (hereinafter referred to as VD) and horizontal synchronization signal (hereinafter referred to as HD), and are controlled by the CPU block 1043, and the F / E. -It has TG1024 which generates the drive timing signal of IC102.

デジタルスチルカメラプロセッサ104は、CCD101よりF/E―IC102の出力データにホワイトバランス設定やガンマ設定を行い、また前述したように、VD信号,HD信号を供給する第1CCD信号処理ブロック1041、フィルタリング処理により、輝度データ・色差データへの変換を行う第2CCD制御ブロック1042、前述した装置各部の動作を制御するCPUブロック1043、前述した制御に必要なデータ等を、一時的に、保存するローカルSRAM1044、パーソナルコンピュータ(以下、パソコンという)などの外部機器とUSB通信を行うUSBブロック1045、パソコンなどの外部機器とシリアル通信を行うシリアルブロック1046、JPEG圧縮・伸張を行うJPEGCODECブロック1047、画像データのサイズを補間処理により拡大/縮小するRESIZEブロック1048、画像データを液晶モニタやTVなどの外部表示機器に表示するためのビデオ信号に変換するTV信号表示ブロック1049、撮影された画像データを記録するメモリカードの制御を行うメモリカードコントローラブロック10410を有する。   The digital still camera processor 104 performs white balance setting and gamma setting on the output data of the F / E-IC 102 from the CCD 101, and as described above, the first CCD signal processing block 1041 for supplying the VD signal and the HD signal, the filtering process Thus, the second CCD control block 1042 for converting to luminance data / color difference data, the CPU block 1043 for controlling the operation of each part of the device, the local SRAM 1044 for temporarily storing the data necessary for the control, USB block 1045 for USB communication with an external device such as a personal computer (hereinafter referred to as a personal computer), serial block 1046 for serial communication with an external device such as a personal computer, and JPEG CODEC block 1047 for JPEG compression / decompression A RESIZE block 1048 for enlarging / reducing the size of the image data by interpolation processing, a TV signal display block 1049 for converting the image data into a video signal for display on an external display device such as a liquid crystal monitor or TV, and the captured image data A memory card controller block 10410 for controlling a memory card to be recorded is included.

SDRAM103は、前述したデジタルスチルカメラプロセッサ104で画像データに各種処理を施す際に、画像データを一時的に保存する。ここに保存される画像データは、例えば、CCD101から、F/E−IC102を経由して取り込んで、第1CCD信号処理ブロック1041でホワイトバランス設定、ガンマ設定が行われた状態の「RAW−RGB画像データ」や第2CCD制御ブロック1042で輝度データ・色差データ変換が行われた状態の「YUV画像データ」、JPEGCODECブロック1047で、JPEG圧縮された「JPEG画像データ」などである。   The SDRAM 103 temporarily stores image data when the digital still camera processor 104 performs various processes on the image data. The image data stored here is, for example, “RAW-RGB image in a state in which white balance setting and gamma setting are performed in the first CCD signal processing block 1041 after fetching from the CCD 101 via the F / E-IC 102. Data ”,“ YUV image data ”in which luminance data / color difference data conversion has been performed in the second CCD control block 1042, JPEG compressed“ JPEG image data ”in the JPEGCODEC block 1047, and the like.

メモリカードスロットル121は、着脱可能なメモリカードを装着するためのスロットルである。メモリカードスロットル121は、メモリカード以外に、着脱可能なLANカードや、無線LANカードや、Bluetooth通信カードなどのIOカードも装着可能とする。撮影された画像は、IOカード経由で外部機器に転送することも可能とする。   The memory card throttle 121 is a throttle for mounting a removable memory card. In addition to the memory card, the memory card throttle 121 can also attach an IO card such as a removable LAN card, a wireless LAN card, or a Bluetooth communication card. The captured image can be transferred to an external device via the IO card.

また、装置本体に設けたBluetooth通信回路130は、前述のBluetooth通信カードと同様に、外部機器と無線通信を行うための無線通信回路で、撮影された画像は、Bluetooth通信回路130経由で外部機器に転送することが可能とする。   In addition, the Bluetooth communication circuit 130 provided in the apparatus main body is a wireless communication circuit for performing wireless communication with an external device in the same manner as the above-described Bluetooth communication card, and a photographed image is transmitted via the Bluetooth communication circuit 130 to the external device. Can be transferred to.

内蔵メモリ120は、前述したメモリカードスロットル121にメモリカードが装着されていない場合でも、撮影した画像データを記憶できるようにするためのメモリである。   The built-in memory 120 is a memory for storing captured image data even when no memory card is attached to the memory card throttle 121 described above.

LCDドライバ117は、後述するLCDモニタ10を駆動するドライブ回路であり、TV信号表示ブロック1049から出力されたビデオ信号を、LCDモニタ10に表示するための信号に変換する機能も有している。   The LCD driver 117 is a drive circuit that drives the LCD monitor 10 described later, and also has a function of converting the video signal output from the TV signal display block 1049 into a signal to be displayed on the LCD monitor 10.

LCDモニタ10は、撮影前に被写体の状態を監視する、撮影した画像を確認する、メモリカードや前述した内蔵メモリ120に記録した画像データを表示する、などを行うためのモニタである。   The LCD monitor 10 is a monitor for monitoring the state of a subject before photographing, confirming a photographed image, displaying image data recorded in a memory card or the built-in memory 120 described above, and the like.

ビデオAMP118は、TV信号表示ブロック1049から出力されたビデオ信号を、75Ωインピーダンス変換するためのアンプであり、ビデオジャック119は、TVなどの外部表示機器と接続するためのジャックである。   The video AMP 118 is an amplifier for converting the impedance of the video signal output from the TV signal display block 1049 to 75Ω, and the video jack 119 is a jack for connecting to an external display device such as a TV.

USBコネクタ122は、パソコンなどの外部機器とUSB接続を行うためのコネクタである。   The USB connector 122 is a connector for performing USB connection with an external device such as a personal computer.

シリアルドライバ回路1231は、パソコンなどの外部機器とシリアル通信を行うために、前述したシリアルブロック1046の出力信号を電圧変換するための回路であり、RS−232Cコネクタ1232は、パソコンなどの外部機器とシリアル接続を行うためのコネクタである。   The serial driver circuit 1231 is a circuit for converting the voltage of the output signal of the serial block 1046 described above in order to perform serial communication with an external device such as a personal computer. The RS-232C connector 1232 is connected to an external device such as a personal computer. This is a connector for serial connection.

サブCPU109は、ROM・RAMをワンチップに内蔵したCPUであり、操作キーユニット(SW1〜13)やリモコン受光部6の出力信号をユーザの操作情報として、前述したCPUブロック1043に出力したり、前述したCPUブロック1043より出力されるカメラの状態を、後述するサブLCD1,AFLED8,ストロボLED9,ブザー113の制御信号に変換して出力する。   The sub CPU 109 is a CPU in which ROM / RAM is built in a single chip, and outputs the output signals of the operation key units (SW1 to SW13) and the remote control light receiving unit 6 to the CPU block 1043 described above as user operation information, The state of the camera output from the CPU block 1043 described above is converted into control signals for the sub LCD 1, AF LED 8, strobe LED 9, and buzzer 113, which will be described later, and output.

サブLCD1は、例えば、撮影可能枚数など表示するための表示部であり、LCDドライバ111は、前述したサブCPU109の出力信号より、前述したサブLCD1を駆動するためのドライブ回路である。   The sub LCD 1 is a display unit for displaying, for example, the number of shootable images, and the LCD driver 111 is a drive circuit for driving the sub LCD 1 described above based on the output signal of the sub CPU 109 described above.

AFLED8は、撮影時の合焦状態を表示するためのLEDであり、ストロボLED9は、ストロボ充電状態を表すためのLEDである。なお、このAFLED8とストロボLED9を、メモリカードアクセス中などの別の表示用途に使用しても良い。   The AFLED 8 is an LED for displaying a focus state at the time of photographing, and the strobe LED 9 is an LED for representing a strobe charging state. The AF LED 8 and the strobe LED 9 may be used for another display application such as when a memory card is being accessed.

操作キーユニット(SW1〜13)は、ユーザが操作するキー回路であり、リモコン受光部6は、ユーザが操作したリモコン送信機の信号の受信部である。   The operation key units (SW1 to SW13) are key circuits operated by the user, and the remote control light receiving unit 6 is a signal reception unit of the remote control transmitter operated by the user.

音声記録ユニット115は、ユーザが音声信号を入力するマイク1153、入力された音声信号を増幅するマイクAMP1152、増幅された音声信号を記録する音声記録回路1153からなる。   The audio recording unit 115 includes a microphone 1153 to which a user inputs an audio signal, a microphone AMP 1152 that amplifies the input audio signal, and an audio recording circuit 1153 that records the amplified audio signal.

音声再生ユニット116は、記録された音声信号をスピーカーから出力できる信号に変換する音声再生回路1161、変換された音声信号を増幅してスピーカーを駆動するためのオーディオAMP1162、音声信号を出力するスピーカー1163からなる。   The audio reproduction unit 116 includes an audio reproduction circuit 1161 that converts a recorded audio signal into a signal that can be output from a speaker, an audio AMP 1162 that amplifies the converted audio signal and drives the speaker, and a speaker 1163 that outputs the audio signal. Consists of.

Bluetooth通信をする機器への接続は、Bluetooth通信回路130により行う。もしくは、Bluetooth通信回路130がない場合は、メモリカードスロットル121にBluetooth通信カードを接続することにより、Bluetooth通信の機器と接続することができる。また、イーサネット(登録商標)への接続は、イーサネット(登録商標)接続回路もしくは無線イーサネット(登録商標)接続回路(図示せず)により行う。もしくは、イーサネット(登録商標)回路がない場合は、メモリカードスロットル121に、LANカードもしくは無線LANカードを接続することにより、ネットワークへ接続することができる。   Connection to a device that performs Bluetooth communication is performed by the Bluetooth communication circuit 130. Alternatively, when the Bluetooth communication circuit 130 is not provided, a Bluetooth communication card can be connected to the memory card throttle 121 to connect to a Bluetooth communication device. Connection to Ethernet (registered trademark) is performed by an Ethernet (registered trademark) connection circuit or a wireless Ethernet (registered trademark) connection circuit (not shown). Alternatively, when there is no Ethernet (registered trademark) circuit, the memory card throttle 121 can be connected to a network by connecting a LAN card or a wireless LAN card.

また、図3は本実施形態1における撮像装置の別の一例である撮影機能を有するPDA情報端末装置を示すブロック図である。図3を参照しながらPDA情報端末装置の動作を説明する。   FIG. 3 is a block diagram showing a PDA information terminal device having a photographing function, which is another example of the imaging device according to the first embodiment. The operation of the PDA information terminal apparatus will be described with reference to FIG.

図3に示すように、PDA情報端末装置は、システムバス31と、CPU32と、プログラムを格納するPROM33と、プログラムやデータのワーク領域のRAM34と、撮影された画像ファイルや、システムファイルや、データファイルなどを格納する内蔵メモリ35と、シャッタや、ズームキーなどのハードキー37を検出するキーI/F制御部36と、カメラ部39と、カメラ部39を制御するカメラ制御部38と、カメラ制御部38から取り込まれた画像をJPEGに圧縮したり、メモリに格納されているJPEGデータを解凍したりする画像圧縮伸張制御部42と、カメラ制御部38からの画像データや、画像圧縮伸張制御部42からの画像データをLCD部41に映像信号として出力したりする画像制御部40と、USBI/F制御部43と、プリンター装置51と接続するUSBケーブル44と、CF(Compact Flash)制御部45と、CF I/F46と、CF I/F46に挿入される通信カード47と、SDカード制御部18と、SDカードI/F49と、SDカードI/F49に挿入されるSDカード50と、USBケーブル44もしくは通信カード47経由でPDA情報端末装置と接続されるプリンター装置51と、マイク53と、マイク53からのアナログ音声信号をデジタル変換するA/D変換部52から構成されている。   As shown in FIG. 3, the PDA information terminal device includes a system bus 31, a CPU 32, a PROM 33 for storing a program, a RAM 34 for a work area for the program and data, a captured image file, a system file, and data. A built-in memory 35 for storing files and the like; a key I / F control unit 36 for detecting hard keys 37 such as a shutter and a zoom key; a camera unit 39; a camera control unit 38 for controlling the camera unit 39; An image compression / decompression control unit 42 that compresses an image captured from the unit 38 into JPEG or decompresses JPEG data stored in a memory, image data from the camera control unit 38, and an image compression / decompression control unit An image control unit 40 for outputting image data from 42 as a video signal to the LCD unit 41; A control unit 43, a USB cable 44 connected to the printer device 51, a CF (Compact Flash) control unit 45, a CF I / F 46, a communication card 47 inserted into the CF I / F 46, and an SD card control unit 18. An SD card I / F 49, an SD card 50 inserted into the SD card I / F 49, a printer device 51 connected to the PDA information terminal device via the USB cable 44 or the communication card 47, a microphone 53, and a microphone The A / D converter 52 converts the analog audio signal from the digital signal 53 into a digital signal.

PDA情報端末装置の通常の撮影は、ハードキー37で撮影開始を認識する。カメラ部39で画像を取り込む。カメラ部39から出力される画像信号を画像制御部40がRGBデータや、YCbCrデータなどのフレームデータに変換し必要な画像処理を行った後、画像データをRAM34に転送する。転送された画像データは画像圧縮伸長制御部42で、JPEGなどの画像データに圧縮され再びRAM34に転送される。RAM34に格納されたJPEGなどの画像データは、必要なヘッダ処理を行った後、内蔵メモリ35もしくはSDカード制御部48を介してSDカード50に記録される。   In normal shooting of the PDA information terminal device, the start of shooting is recognized by the hard key 37. An image is captured by the camera unit 39. The image control unit 40 converts the image signal output from the camera unit 39 into frame data such as RGB data or YCbCr data, performs necessary image processing, and then transfers the image data to the RAM 34. The transferred image data is compressed into image data such as JPEG by the image compression / decompression control unit 42 and transferred to the RAM 34 again. Image data such as JPEG stored in the RAM 34 is recorded on the SD card 50 via the built-in memory 35 or the SD card control unit 48 after performing necessary header processing.

図2に示した、デジタルカメラのブロック図と比較すると、鏡胴ユニット7がカメラ部39に、CCD101を含むF/E(フロントエンド)−IC102がカメラ制御部38に、第1CCD信号処理ブロック1041と第2CCD信号処理ブロック1042が画像制御部40に該当する。また、図3のPDA情報端末装置のカメラ機能の部分は、図2に示したデジタルカメラと性能面では劣る場合もあるが、基本的な機能は同じである。   Compared to the block diagram of the digital camera shown in FIG. 2, the lens barrel unit 7 is in the camera unit 39, the F / E (front end) -IC 102 including the CCD 101 is in the camera control unit 38, and the first CCD signal processing block 1041. The second CCD signal processing block 1042 corresponds to the image control unit 40. 3 may be inferior in performance to the digital camera shown in FIG. 2, but the basic functions are the same.

本発明では、デジタルカメラでも、PDA情報端末装置であっても、基本的な撮影機能が実装されていれば実現可能である。   In the present invention, even if it is a digital camera or a PDA information terminal device, it can be realized if a basic photographing function is mounted.

本実施形態1における、GPS受信機器のGPS情報を取得する通常のGPS機能としては、例えば図2に示すメモリカードスロットル121経由で装着されたGPSカードからGPS情報を装置内に取り込むことができる。また本実施形態1のGPS機能では、図2のメモリカードスロットル121経由で装着されたBluetooth通信カードによって、外部のGPS受信機器と無線接続した無線通信によりGPS情報を装置内に取り込む。もしくは、図2のBluetooth通信回路130によって、外部のGPS受信機器と無線接続した無線通信によりGPS情報を装置内に取り込む。そして、この装置本体のGPS情報と、例えば複数の撮影対象に設置したGPS受信機器からのGPS情報を合わせて取り込むことができる。   As a normal GPS function for acquiring GPS information of a GPS receiving device in the first embodiment, for example, GPS information can be taken into the apparatus from a GPS card mounted via the memory card throttle 121 shown in FIG. In the GPS function of the first embodiment, GPS information is taken into the apparatus by wireless communication wirelessly connected to an external GPS receiving device using the Bluetooth communication card mounted via the memory card throttle 121 of FIG. Alternatively, GPS information is taken into the apparatus by wireless communication wirelessly connected to an external GPS receiving device by the Bluetooth communication circuit 130 of FIG. Then, GPS information of the apparatus main body and GPS information from, for example, GPS receiving devices installed on a plurality of photographing objects can be fetched together.

図4は本実施形態1におけるGPS情報をOSD(On Screen Display)の標準ディスプレイモードによる表示例を示す図である。図4に示す標準ディスプレイモードでは、例えば、衛星の捕捉状況を示すアイコン情報(%)と、緯度、経度を示す情報(E:135、N:034)と、捕捉衛星数および可視衛星数を示す情報(x4(7))と、測位次元を示す情報(3d)と、測位品質を示す情報(diff)とが表示される。   FIG. 4 is a diagram showing a display example of GPS information according to the first embodiment in the standard display mode of OSD (On Screen Display). In the standard display mode shown in FIG. 4, for example, icon information (%) indicating the capture status of satellites, information indicating latitude and longitude (E: 135, N: 034), the number of captured satellites, and the number of visible satellites are displayed. Information (x4 (7)), information (3d) indicating the positioning dimension, and information (diff) indicating the positioning quality are displayed.

また、図5は本実施形態1におけるGPS情報をOSDのGPSディスプレイモードによる表示例を示す図である。図5に示すGPSディスプレイモードでは、例えば、衛星の捕捉状況を示すアイコン情報(%)と、緯度、経度を示す情報(E:135°12′34.1″、N:034°12′34.1″)と、捕捉衛星数および可視衛星数を示す情報(x4(7))と、測位次元を示す情報(3d)と、測位品質を示す情報(diff)と、どのGPS受信端末から受信したかを示す機器名称([GPS1])が表示される。   FIG. 5 is a view showing a display example of the GPS information in the first embodiment in the OSD GPS display mode. In the GPS display mode shown in FIG. 5, for example, icon information (%) indicating the capture status of satellites and information indicating latitude and longitude (E: 135 ° 12′34.1 ″, N: 034 ° 12′34. 1 ″), information indicating the number of captured satellites and the number of visible satellites (x4 (7)), information indicating the positioning dimension (3d), information indicating the positioning quality (diff), and from which GPS receiving terminal A device name ([GPS1]) is displayed.

図2に示したデジタルカメラは、メモリカードスロットル121経由で、装着されたBluetooth通信カードを使用するか、もしくはBluetooth通信回路130を使用して、Bluetooth通信を実現する。   The digital camera shown in FIG. 2 implements Bluetooth communication through the memory card throttle 121 using the attached Bluetooth communication card or using the Bluetooth communication circuit 130.

図6に本実施形態1における無線接続して通信を行うBluetoothプロトコルスタック構造を示す。図6に示すように、装置側のBluetoothプロトコルスタックは、ハードウェア(HW)を直接制御するHWデバイスドライバと、ホストとホストコントローラとの通信を制御するHCI(Host Controller Interface)と、論理チャンネルの設定およびレイヤパケットの分割,組み立てを行うL2CAP(Logical Link Control and Adaptation Protocol)と、Bluetooth通信のプロトコルをRS232C等のI/Fに変換するRFCOMMと、データ(オブジェクト)の送信/受信を行うOBEX(Object Exchange)と、Bluetooth通信機器のサービスを検索するSDP(Service Discovery Protocol)と、ダイヤルアップ通信を実現するDUN(Dial Up Network)と、画像の送信/受信を行うBIP(Basic Image Protocol)と、シリアル通信を実現するSPP(Serial Port Profile)とから構成されている。   FIG. 6 shows a Bluetooth protocol stack structure for performing communication by wireless connection in the first embodiment. As shown in FIG. 6, the Bluetooth protocol stack on the device side includes an HW device driver that directly controls hardware (HW), an HCI (Host Controller Interface) that controls communication between the host and the host controller, and a logical channel. L2CAP (Logical Link Control and Adaptation Protocol) for setting and dividing and assembling layer packets, RFCOMM for converting Bluetooth communication protocol to I / F such as RS232C, and OBEX (Transmission / Reception of data (object)) Object Exchange), SDP (Service Discovery Protocol) for searching for services of Bluetooth communication devices, DUN (Dial Up Network) for realizing dial-up communication, BIP (Basic Image Protocol) for transmitting / receiving images, It consists of SPP (Serial Port Profile) that realizes serial communication. That.

そして、ユーザ・アプリケーションとして、BIPを制御して画像の送信/受信を実現するBIPアプリケーションと、OBEXを制御してファイル送信/受信を実現するOPPアプリケーションと、DUNを制御してダイヤルアップ通信を実現するネットワーク・アプリケーションと、SPPを制御してシリアル通信を実現するSPPアプリケーションと、SDPを制御してBluetooth通信機器の検索を行うSDPアプリケーションから構成されている。   As user applications, BIP applications that control image transmission / reception by controlling BIP, OPP applications that control file transmission / reception by controlling OBEX, and dial-up communication by controlling DUN Network applications, SPP applications that control the SPP to realize serial communication, and SDP applications that control the SDP and search for Bluetooth communication devices.

また、メモリカードスロットル121を介したBluetooth通信カードには、ホストとホストコントローラとの通信を制御するHCIファームウェアと、Bluetooth通信機器間の接続の確立を制御するリンク・マネージャー(Link Manager)ファームウェアと、物理的な無線部分とBluetoothプロトコルを接続するベースバンド・コントローラ(Baseband Controller)から構成されている。   The Bluetooth communication card via the memory card throttle 121 includes an HCI firmware for controlling communication between the host and the host controller, a link manager firmware for controlling establishment of a connection between the Bluetooth communication devices, It consists of a baseband controller that connects the physical radio part and the Bluetooth protocol.

図7に本実施形態1である撮像装置(デジタルカメラ、撮影機能付きのPDA情報端末装置等)とGPS受信機器とのSPP(Serial Port Profile)プロトコルによるシーケンス図を示す。このSPPプロトコルは、Bluetooth通信のシリアル通信機能を提供する。いま、撮像装置が、GPS受信機器に対して、Bluetooth通信のSPPプロトコルにより接続を要求する。この接続要求はGPS受信機器側から実行してもかまわない。撮像装置とGPS受信機器の間で、Bluetooth通信のSPPプロトコルによる無線接続が確立した後は、GPS受信機器から撮像装置へ無線通信によりGPS情報(センテンスデータ)が送信される。   FIG. 7 shows a sequence diagram according to the SPP (Serial Port Profile) protocol between the imaging device (digital camera, PDA information terminal device with photographing function, etc.) according to the first embodiment and a GPS receiver. This SPP protocol provides a serial communication function of Bluetooth communication. Now, the imaging device requests a connection to the GPS receiving device using the Bluetooth communication SPP protocol. This connection request may be executed from the GPS receiving device side. After the wireless connection using the SPP protocol for Bluetooth communication is established between the imaging device and the GPS receiving device, GPS information (sentence data) is transmitted from the GPS receiving device to the imaging device by wireless communication.

撮像装置で受信されたGPS情報は、例えば、前述の図4に示したような、標準ディスプレイモードでは、衛星の捕捉状況を示すアイコン情報(%)と、緯度,経度を示す情報(E:135、N:034)と、捕捉衛星数および可視衛星数を示す情報(x4(7))と、測位次元を示す情報(3d)と、測位品質を示す情報(diff)が表示される。   For example, in the standard display mode as shown in FIG. 4 described above, the GPS information received by the imaging apparatus includes icon information (%) indicating the capture status of the satellite and information indicating the latitude and longitude (E: 135). , N: 034), information indicating the number of captured satellites and the number of visible satellites (x4 (7)), information indicating the positioning dimension (3d), and information indicating the positioning quality (diff).

ユーザが、Bluetooth通信のSPPプロトコルによる無線接続の切断を要求するか、装置の電源をOFFした場合には、撮像装置からGPS受信機器に対して、Bluetooth通信のSPPプロトコルによる切断を要求する。また、この切断要求はGPS受信機器側から実行してもかまわない。   When the user requests disconnection of the wireless connection by the SPP protocol of Bluetooth communication or when the apparatus is turned off, the imaging device requests the GPS receiving device to disconnect by the SPP protocol of Bluetooth communication. This disconnection request may be executed from the GPS receiving device side.

図8に本実施形態1におけるGPS情報のデータフォーマットの例を示す。図8に示すデータフォーマットは、図7のBluetooth通信のSPPプロトコルによるシーケンスにおいて使用される。このGPS情報のデータフォーマットは、例えば、NMEA(National Maritime Electronics Association:米国舶用電子機器連合会)形式などの規格があり、アスキーコードの文字列形式のフォーマットとなっている。GPS受信機器は、図8に示したデータフォーマットに従いデータを送信し、撮像装置では、図8に示したデータフォーマットに従い図4に示したようにGPS情報を表示する。   FIG. 8 shows an example of the data format of GPS information in the first embodiment. The data format shown in FIG. 8 is used in the sequence of the Bluetooth communication SPP protocol shown in FIG. The data format of the GPS information is, for example, a standard such as NMEA (National Maritime Electronics Association) format, and is a character string format of ASCII code. The GPS receiving device transmits data according to the data format shown in FIG. 8, and the imaging apparatus displays GPS information as shown in FIG. 4 according to the data format shown in FIG.

図9に本実施形態1であるBluetooth通信のSPPプロトコルによるマルチ接続のシーケンス図を示す。前述したようにSPPプロトコルは、Bluetooth通信のシリアル通信機能を提供し、撮像装置では、各GPS受信機器に対して、Bluetooth通信のSPPプロトコルにより接続を要求する。この接続は各GPS受信機器側から実行してもかまわない。そして、撮像装置と第1GPS受信機器の間で、Bluetooth通信のSPPプロトコルによる無線接続が確立した後は、第1GPS受信機器から撮像装置へ無線通信によりGPS情報(センスデータ)が送信される。   FIG. 9 is a sequence diagram of multi-connection according to the SPP protocol of the Bluetooth communication according to the first embodiment. As described above, the SPP protocol provides a Bluetooth communication serial communication function, and the imaging apparatus requests each GPS receiver to establish a connection using the Bluetooth communication SPP protocol. This connection may be executed from each GPS receiving device side. Then, after wireless connection is established between the imaging device and the first GPS receiving device using the SPP protocol for Bluetooth communication, GPS information (sense data) is transmitted from the first GPS receiving device to the imaging device by wireless communication.

撮像装置で受信されたGPS情報は、例えば、前述の図4に示したような、標準ディスプレイモードでは、衛星の捕捉状況を示すアイコン情報(%)と、緯度,経度を示す情報(E:135、N:034)と、捕捉衛星数および可視衛星数を示す情報(x4(7))と、測位次元を示す情報(3d)と、測位品質を示す情報(diff)とが表示される。   For example, in the standard display mode as shown in FIG. 4 described above, the GPS information received by the imaging apparatus includes icon information (%) indicating the capture status of the satellite and information indicating the latitude and longitude (E: 135). N: 034), information indicating the number of captured satellites and the number of visible satellites (x4 (7)), information indicating the positioning dimension (3d), and information indicating the positioning quality (diff).

その後、ユーザがBluetooth通信のSPPプロトコルによる無線接続の切断を要求するか、装置の電源をOFFした場合には、撮像装置から第1GPS受信機器に対して、Bluetooth通信のSPPプロトコルにより切断を要求する。   Thereafter, when the user requests disconnection of the wireless connection by the SPP protocol of the Bluetooth communication or when the apparatus is turned off, the imaging device requests the disconnection by the SPP protocol of the Bluetooth communication from the first GPS receiving device. .

以上が、撮像装置と第1GPS受信機器とのBluetooth通信のSPPプロトコルを利用したGPS情報の転送処理であるが、Bluetooth通信のSPPプロトコルの場合、撮像装置から複数のGPS受信機器に対して、GPS受信機器1で実施された同じ通信を同時に実行することが可能である。同時に接続された状態では、複数のGPS受信機器からのGPS情報を受信することになるが、Bluetooth通信のSPPプロトコルでは、どのGPS受信機器からのGPS情報を受信したかを区別することができる。   The above is the transfer processing of GPS information using the SPP protocol for Bluetooth communication between the imaging device and the first GPS receiver device. In the case of the SPP protocol for Bluetooth communication, the GPS device receives GPS signals from the imaging device to a plurality of GPS receiver devices. It is possible to simultaneously execute the same communication performed by the receiving device 1. In the state of being connected simultaneously, GPS information from a plurality of GPS receiving devices is received. However, in the SPP protocol of Bluetooth communication, it is possible to distinguish which GPS receiving device has received the GPS information.

また、本実施形態1の撮像装置は、無線通信機能を有するGPS受信機器の複数と、複数の接続先と接続可能な無線通信機能および撮影機能を有する撮像装置の間で、ポイント・ツー・ポイント・プロトコルの無線接続による無線通信を行って、情報交換が可能である。図9に示したように、撮像装置で複数のGPS受信機器とポイント・ツー・ポイント・プロトコルの無線接続により無線通信を実行する。この無線接続(SPPプロトコル)の確立後の無線通信を利用して第1〜第3GPS受信機器からのGPS情報(センテンスデータ)を撮像装置で受信する。撮影装置で、第1〜第3GPS受信機器から受信したGPS情報を、撮像装置本体のGPS情報を含むそれ以外の情報と分類してリアルタイムに表示する。   In addition, the imaging apparatus of the first embodiment is a point-to-point between a plurality of GPS receiving devices having a wireless communication function and an imaging apparatus having a wireless communication function and a photographing function that can be connected to a plurality of connection destinations. -Information can be exchanged by wireless communication using a protocol wireless connection. As shown in FIG. 9, wireless communication is performed by a point-to-point protocol wireless connection with a plurality of GPS receiving devices in the imaging apparatus. The imaging apparatus receives GPS information (sentence data) from the first to third GPS receivers using wireless communication after establishment of this wireless connection (SPP protocol). The GPS information received from the first to third GPS receiving devices is classified by the imaging device from other information including the GPS information of the imaging device main body and displayed in real time.

例えば、図5に示したようにGPS情報に加えてGPS受信機器の機器名称([GPS1])を表示する。このような表示画面を無線接続した複数のGPS受信機器分を自動的に用意して、ハードキーを使って、交互に切替えて表示してもかまわない。このとき、複数地点のGPS情報の中から、適当な1つを撮像装置において位置情報として表示する。認識されたGPS受信機器端末の機器名称については、その表示に際して、色等を変えてもかまわない。撮像装置で、撮影時に複数のGPS受信機器から受信したGPS情報を、このGPS情報と他の情報(例えば、EXIF規格のファイルフォーマットでのGPS情報に関する付属情報として撮像装置自体のGPS情報)とに分類して自動的に撮影した画像データに添付する。このとき、撮像装置により位置情報として指定されたGPS情報については、撮影した画像データのヘッダ規格であるEXIF規格に従って、メーカ毎で独自に定義可能な領域にその情報が添付される。   For example, the device name ([GPS1]) of the GPS receiving device is displayed in addition to the GPS information as shown in FIG. It is also possible to automatically prepare a plurality of GPS receiving devices that are wirelessly connected to such a display screen, and switch them alternately using hard keys. At this time, an appropriate one of GPS information at a plurality of points is displayed as position information in the imaging device. The device name of the recognized GPS receiving device terminal may be changed in color when displayed. The GPS information received from a plurality of GPS receiving devices at the time of shooting by the imaging device is converted into this GPS information and other information (for example, GPS information of the imaging device itself as auxiliary information related to GPS information in the file format of the EXIF standard). Attach to the image data automatically taken after classification. At this time, the GPS information designated as the position information by the imaging device is attached to an area that can be uniquely defined for each manufacturer in accordance with the EXIF standard, which is a header standard for captured image data.

なお、他の情報(撮像装置自体のGPS情報)については、EXIF規格に従ったフォーマットでなくとも良く、独自のフォーマットを使用して、複数のGPS受信機器端末分のGPS情報と共に分類して設定しても良い。この撮影された画像データに、添付された複数地点のGPS情報により、PCやPDAにおける後処理での撮影場所、撮影方向や撮影距離などの正確な情報を得ることが可能となる。   Other information (GPS information of the imaging device itself) does not have to be in a format that conforms to the EXIF standard, and uses a unique format to classify and set together with GPS information for a plurality of GPS receiving device terminals. You may do it. It is possible to obtain accurate information such as a shooting location, a shooting direction, and a shooting distance in post-processing by a PC or PDA by using GPS information of a plurality of points attached to the shot image data.

また、撮像装置で複数のGPS受信機器とポイント・ツー・ポイント・プロトコルの無線接続により無線通信を実行して、無線接続の確立後にユーザの操作で、撮像装置のGPS情報を選択切替えることができる。前述の説明において、例えば、図5に示したようにGPS情報に加えてGPS受信機器の機器名称を表示する。このような表示画面を接続した複数のGPS受信機器分を自動的に用意して、ハードキーを使ってトグルに切替える。さらに、複数地点のGPS情報の中から、適当な1つを撮像装置において位置情報として認識するとなっているが、ユーザがハードキーの操作を行って、現在、撮像装置の認識している複数のGPS情報もしくは、GPS受信機器の中から選択することも可能である。   In addition, it is possible to perform wireless communication by a point-to-point protocol wireless connection with a plurality of GPS receiving devices in the imaging device, and select and switch GPS information of the imaging device by a user operation after the wireless connection is established. . In the above description, for example, the device name of the GPS receiving device is displayed in addition to the GPS information as shown in FIG. A plurality of GPS receiving devices connected to such a display screen are automatically prepared and switched to a toggle using a hard key. Furthermore, an appropriate one of the GPS information at a plurality of points is recognized as position information in the imaging device. However, when the user operates a hard key, a plurality of information currently recognized by the imaging device is recognized. It is also possible to select from GPS information or a GPS receiving device.

また、複数のGPS受信機器においてのGPS情報が測位から未測位になった場合、もしくは複数GPS受信機器と撮像装置との無線接続が切断された場合、測位中のGPS情報をメモリに保持する。複数のGPS受信機器からのGPS情報が未測位であり、また正常に受信されない場合で、先に測位されたまたは正常に受信されたGPS情報がメモリに保存されている場合、撮像装置において、メモリに保存されているGPS情報を、GPS受信機器からのGPS情報として用いて、リアルタイムに表示し、また撮影データに添付する。以上の処理を実施することによって、複数地点のGPS情報を撮影データに添付する際、GPS受信機器からのGPS情報が得られないような場合でも複数地点のGPS情報を撮影データに添付することが可能となり、PCやPDAでの撮影画像の後処理での拡張性、その利便性を向上できる。さらに、メモリに格納されているGPS情報においても、ユーザの操作により選択切替え可能とする。   Further, when the GPS information in the plurality of GPS receiving devices is changed from the positioning to the non-positioning, or when the wireless connection between the plurality of GPS receiving devices and the imaging device is disconnected, the GPS information during positioning is held in the memory. When GPS information from a plurality of GPS receiving devices has not been measured and is not normally received, and GPS information that has been previously measured or has been received normally is stored in the memory, The GPS information stored in is used as the GPS information from the GPS receiving device, displayed in real time, and attached to the shooting data. By performing the above processing, when attaching GPS information of a plurality of points to shooting data, GPS information of a plurality of points can be attached to the shooting data even when GPS information from a GPS receiving device cannot be obtained. This makes it possible to improve the extensibility and convenience of post-processing of captured images on a PC or PDA. Furthermore, the GPS information stored in the memory can also be selected and switched by a user operation.

また、前述のメモリに保存されているGPS情報を用いる場合、GPS受信機器から得たGPS情報と区別できるように識別情報を付与する。例えば、識別情報として、未測位のときのGPSステータスやBluetooth通信による無線接続が確立できないときのステータス情報等を利用する。これにより、画像データに添付されたGPS情報がメモリに保持されたものであるか否かを区別することが容易となる。なお、撮像装置自身にGPS受信機器の機能を有していれば、GPS情報を取得可能であるが、前述したGPS受信機器との無線接続により取得するようにしても良く、自身のGPS情報を表示、画像データに添付することもできる。   In addition, when using GPS information stored in the above-described memory, identification information is given so that it can be distinguished from GPS information obtained from a GPS receiver. For example, as the identification information, GPS status at the time of non-positioning, status information when wireless connection by Bluetooth communication cannot be established, or the like is used. Thereby, it becomes easy to distinguish whether or not the GPS information attached to the image data is held in the memory. Note that GPS information can be acquired if the imaging apparatus itself has the function of a GPS receiving device, but it may be acquired by wireless connection with the GPS receiving device described above. It can also be attached to display and image data.

本発明の実施形態2として、実施形態1の撮像装置においてGPS情報を添付した画像データを画像ファイルとして記録手段に記録し、撮影画像の後処理を行う外部機器であるPCやPDAに画像ファイルを送信する処理について説明する。   As Embodiment 2 of the present invention, image data attached with GPS information in the imaging apparatus of Embodiment 1 is recorded as an image file in a recording unit, and the image file is stored in an external device such as a PC or PDA that performs post-processing of the captured image. The transmission process will be described.

本実施形態2の画像ファイルを送るため外部機器と通信する無線ネットワークへの接続は、撮像装置に予め登録されている接続設定を使用して行われる。この接続設定は、予めPC等で編集したものを撮像装置の内部の図2に示すRAM107へ保存したり、もしくは、撮像装置上で編集してRAM107へ保存したものである。接続設定の例を図10に示す。   Connection to a wireless network that communicates with an external device to send an image file according to the second embodiment is performed using connection settings registered in advance in the imaging apparatus. In this connection setting, what has been edited in advance by a PC or the like is saved in the RAM 107 shown in FIG. 2 inside the imaging apparatus, or edited on the imaging apparatus and saved in the RAM 107. An example of connection setting is shown in FIG.

図10に示す例では、「接続先1.」,「接続先2.」,「接続先3.」の3種類の接続先が登録されている。接続名は、接続先を選択するときに、どの接続かわかりやすいように付けられた名前である。無線接続形態は、無線LANにおけるInfrastructureモードか、AdHocモードを使用するかが設定される。ESS−ID(Extended Service Set Identifier)は、無線接続形態で使うESS−IDが設定されている。通信チャンネルは、無線LANでのチャンネル設定が設定されている。暗号化は、暗号化方式に何を使用するかが設定されている。WEP(Wired Equivalent Privacy)キーは、暗号化のキーである。   In the example illustrated in FIG. 10, three types of connection destinations “connection destination 1.”, “connection destination 2.”, and “connection destination 3.” are registered. The connection name is a name given so that it is easy to understand which connection is used when selecting a connection destination. The wireless connection mode is set to use the Infrastructure mode or AdHoc mode in the wireless LAN. In ESS-ID (Extended Service Set Identifier), an ESS-ID used in a wireless connection mode is set. As the communication channel, channel setting in the wireless LAN is set. In the encryption, what is used for the encryption method is set. A WEP (Wired Equivalent Privacy) key is an encryption key.

図11は本実施形態2における外部機器との通信処理の手順を示すフローチャートである。まず、撮像装置の電源が投入されると(S1)、撮像装置は画像再生状態になる。この状態で、図1(c)のメニュースイッチSW6により選択されてキーが押されると(S2)、無線ネットワークの接続先選択の画面(図12参照)が表示される(S3)。   FIG. 11 is a flowchart showing a procedure of communication processing with an external device according to the second embodiment. First, when the image pickup apparatus is powered on (S1), the image pickup apparatus enters an image reproduction state. In this state, when the menu switch SW6 in FIG. 1C is selected and a key is pressed (S2), a wireless network connection destination selection screen (see FIG. 12) is displayed (S3).

また、処理S3における接続先選択の画面の表示と同時に、図13に示す無線ネットワーク接続処理が開始される。撮像装置では、最後に接続された無線ネットワークの接続先を覚えており、この接続設定に基づき最後に接続された無線ネットワークへの接続処理を開始する。この図13の無線ネットワークへの接続処理は、処理S3の後に行われる無線ネットワークの接続先選択の処理(S4,S5)と並行して行われる。   Simultaneously with the display of the connection destination selection screen in the process S3, the wireless network connection process shown in FIG. 13 is started. The imaging apparatus remembers the connection destination of the last connected wireless network, and starts connection processing to the last connected wireless network based on this connection setting. The wireless network connection process of FIG. 13 is performed in parallel with the wireless network connection destination selection process (S4, S5) performed after process S3.

図13の無線ネットワークへの接続処理のフローチャートにおいて、まず、前回接続した接続設定の無線接続手順により行う(S15)。この無線接続手順は、「IEEE 802.11b,g」のような、その無線規格の手順で行われる。そして、DHCPサーバにネットワーク設定要求を出し、ネットワーク設定を取得する(S16)。そして、取得したネットワーク設定により、ネットワークと接続を行う(S17)。これで、無線ネットワークへの無線接続手順が完了する。   In the flowchart of the connection process to the wireless network of FIG. 13, first, it is performed by the wireless connection procedure of the connection setting connected last time (S15). This wireless connection procedure is performed according to the procedure of the wireless standard such as “IEEE 802.11b, g”. Then, a network setting request is issued to the DHCP server, and the network setting is acquired (S16). And it connects with a network by the acquired network setting (S17). This completes the procedure for wireless connection to the wireless network.

この無線ネットワークへの接続処理をバックグラウンドにて行いながら、選択処理続行の場合、図11に示す無線ネットワークの接続先選択処理(S4,S5)が行われる。   When the selection process is continued while performing the connection process to the wireless network in the background, the connection destination selection process (S4, S5) of the wireless network shown in FIG. 11 is performed.

無線ネットワークの接続先選択の画面(図12参照)が表示されてから、撮像装置のユーザは、例えば図1(c)の上,下移動スイッチSW7,10を使用して、無線ネットワークの接続先(接続設定)を選択する(S4)。そして、OKスイッチSW12が押されると無線ネットワークの接続先が決定される(S5)。   After the wireless network connection destination selection screen (see FIG. 12) is displayed, the user of the imaging apparatus uses, for example, the upper and lower movement switches SW7 and 10 in FIG. (Connection setting) is selected (S4). When the OK switch SW12 is pressed, the connection destination of the wireless network is determined (S5).

処理S5で無線ネットワークの接続先が決定されたとき、バックグラウンドで行われていた無線ネットワークの接続状態を確認する(S6)。処理S6において、バックグラウンドで処理した接続先と処理S5で選択された接続先が同じ場合で、バックグラウンドの無線ネットワークの接続処理が完了していない場合、接続処理が完了するまで、表示手段に図14に示す「接続中」の表示を行う(S7)。   When the connection destination of the wireless network is determined in step S5, the wireless network connection state performed in the background is confirmed (S6). In the process S6, when the connection destination processed in the background and the connection destination selected in the process S5 are the same, and the connection process of the background wireless network is not completed, the display unit displays the connection process until the connection process is completed. “Connecting” shown in FIG. 14 is displayed (S7).

また、処理S6において、バックグラウンドで処理した接続先と処理S5で選択された接続先が異なる場合は、バックグラウンドで行っていた無線ネットワークの接続処理を中断し、処理S5で選択された接続先の接続設定で無線ネットワークの接続処理を開始する(S8)。そして、接続処理が完了するまで図14の「接続中」の表示を行う(S9)
そして、処理S6において、バックグラウンドの無線ネットワークの接続処理が完了した場合、処理S7の「接続中」の表示中にバックグラウンドの接続処理が完了した場合、および処理S8,S9において、処理S5で選択された接続先との無線ネットワークの接続処理が完了した場合、次の処理(S10)例えば外部機器に送信する画像ファイルの選択処理等の処理を行う。
If the connection destination processed in the background is different from the connection destination selected in the process S5 in the process S6, the connection process of the wireless network performed in the background is interrupted, and the connection destination selected in the process S5. The wireless network connection processing is started with the connection setting (S8). Until the connection process is completed, the display of “Connecting” in FIG. 14 is performed (S9).
Then, in the process S6, the background wireless network connection process is completed, the background connection process is completed during the display of “connected” in the process S7, and the processes S8 and S9 in the process S5. When the connection processing of the wireless network with the selected connection destination is completed, the next processing (S10), for example, processing such as selection processing of an image file to be transmitted to an external device is performed.

また、処理S3接続先選択の画面の表示後に、無線ネットワークの接続先の選択する処理とは異なる処理を選択するキー操作がなされ、選択処理中止の場合、無線ネットワークの接続先の選択処理を中止し(S11)、またバックグラウンドの無線ネットワークへの接続処理も中止して(S12)、次の操作指示を待つため画像再生状態(処理S2)に戻る。   In addition, after the display of the process S3 connection destination selection screen, a key operation for selecting a process different from the process of selecting the connection destination of the wireless network is performed. When the selection process is canceled, the process of selecting the connection destination of the wireless network is canceled. In step S11, the process of connecting to the background wireless network is also canceled (S12), and the process returns to the image reproduction state (process S2) to wait for the next operation instruction.

また、図15は本実施形態2におけるもう一つの外部機器との通信処理の手順を示すフローチャートである。撮像装置の電源が投入されると(S21)、撮像装置は画像再生状態になる。この状態で、図1(c)のメニュースイッチSW6により選択されキーが押されると(S22)、画像ファイルを送信するため通信モード選択の画面(図16参照)が表示される。図16に示す通信モード選択の画面では、プリンターへ画像を送信して印刷するか、PC等に画像を送信するかを選択する。撮像装置のユーザは、例えば図1(c)の上,下移動スイッチSW7,10を使用して、通信モードを選択する。そして、OKスイッチSW12が押されると処理する通信モードが決定される(S23)。   FIG. 15 is a flowchart showing a procedure of communication processing with another external device according to the second embodiment. When the power of the imaging device is turned on (S21), the imaging device enters an image reproduction state. In this state, when the menu switch SW6 in FIG. 1C is selected and a key is pressed (S22), a communication mode selection screen (see FIG. 16) is displayed to transmit the image file. In the communication mode selection screen shown in FIG. 16, it is selected whether to send an image to a printer for printing or to send an image to a PC or the like. The user of the imaging apparatus selects the communication mode using, for example, the up / down movement switches SW7 and SW10 in FIG. When the OK switch SW12 is pressed, the communication mode to be processed is determined (S23).

通信モードが決定されると、さらに外部機器との無線ネットワークの接続先選択の画面(図12参照)が表示される。同様にユーザは下移動スイッチSW7,10を使用して、無線ネットワークの接続先(接続設定)を選択する。そして、OKスイッチSW12が押されると無線ネットワークの接続先が決定される(S24)。   When the communication mode is determined, a screen for selecting a connection destination of a wireless network with an external device (see FIG. 12) is further displayed. Similarly, the user uses the downward movement switches SW7 and 10 to select a connection destination (connection setting) of the wireless network. When the OK switch SW12 is pressed, the connection destination of the wireless network is determined (S24).

無線ネットワークの接続先が決定されると、撮影した記録手段に記録された画像ファイルが再生され、送信する画像ファイルを選択する処理を行う(S25)。これと同時にバックグラウンドにおいて、選択した接続設定で無線ネットワークへの接続処理が開始される。無線ネットワークへの接続処理は、処理S23の画像ファイルを選択する処理、例えば画像印刷する画像ファイルの選択処理(S26,S27)と並行して行われる。   When the connection destination of the wireless network is determined, the image file recorded in the recorded recording means is reproduced, and processing for selecting an image file to be transmitted is performed (S25). At the same time, connection processing to the wireless network is started in the background with the selected connection setting. The connection process to the wireless network is performed in parallel with the process of selecting an image file in process S23, for example, the process of selecting an image file to be printed (S26, S27).

処理26の送信するため画像ファイルを選択として、図1(c)の右,左移動スイッチSW8,11を押すことで、前の画像、次の画像がLCDモニタ10に表示され、画像印刷(送信)する画像ファイルを選択できる。そして、OKスイッチSW12が押されると画像ファイルが決定される(S27)。   By selecting the image file to be transmitted in the process 26 and pressing the right and left movement switches SW8 and 11 in FIG. 1C, the previous image and the next image are displayed on the LCD monitor 10, and image printing (transmission) is performed. ) To select an image file. When the OK switch SW12 is pressed, an image file is determined (S27).

前述の説明では、送信する画像ファイルの1枚を選択する処理について述べたが、複数の画像ファイルを表示したマルチ画面で画像ファイルを選択処理するような場合もある。マルチ画面での複数枚の画像選択は、マルチ画面上で、上下左右キー(上,下,左,右移動スイッチSW7,10,11,8)で送信する画像を選択し、ディスプレイスイッチSW9で送信する画像ファイルを決定する。この送信する画像ファイルの選択、決定の操作を繰り返して、複数の画像ファイルを選択することができる。そして、OKスイッチSW12が押されると画像印刷(送信)する画像ファイルが決定され。   In the above description, the process of selecting one of the image files to be transmitted has been described. However, there may be a case where the image file is selected on a multi-screen displaying a plurality of image files. To select multiple images on the multi-screen, select the image to be sent with the up / down / left / right keys (up / down / left / right movement switches SW7, 10, 11, 8) on the multi-screen and send it with the display switch SW9. Determine the image file to be used. A plurality of image files can be selected by repeatedly selecting and determining image files to be transmitted. When the OK switch SW12 is pressed, an image file to be printed (transmitted) is determined.

また、この送信する画像ファイルの選択処理中に、ユーザによりキャンセル処理が行われた(例えば、メニュースイッチSW6が押された)場合(S28)、バックグラウンドで行われていた、無線ネットワークの接続処理を中止する(S29)、そして、次の操作指示を待つ通常画像再生状態(S22)に戻る。   In addition, when the cancel process is performed by the user during the selection process of the image file to be transmitted (for example, the menu switch SW6 is pressed) (S28), the wireless network connection process performed in the background. (S29), and the process returns to the normal image reproduction state (S22) waiting for the next operation instruction.

処理S27において、画像印刷(送信)する画像ファイルが決定されたとき、バックグラウンドでの接続状態を確認し(S30)、無線ネットワークへの接続処理が完了していない場合は、接続が完了するまで、接続中(図14参照)の画面を表示する(S31)。   In step S27, when an image file to be printed (transmitted) is determined, the background connection state is confirmed (S30). If connection processing to the wireless network is not completed, the connection is completed. A screen during connection (see FIG. 14) is displayed (S31).

また、無線ネットワークの接続エラーを確認し(S32)、送信する画像ファイルの選択中に、無線ネットワークに接続エラーがあった場合、その時点でエラー表示は行わず、送信する画像ファイルが決定してから、エラー警告を行い(S33)、次の操作指示を待つ通常画像再生状態(S22)に戻る。   Also, the wireless network connection error is confirmed (S32), and if there is a connection error in the wireless network while the image file to be transmitted is selected, no error is displayed at that time, and the image file to be transmitted is determined. Then, an error warning is issued (S33), and the process returns to the normal image reproduction state (S22) waiting for the next operation instruction.

なお、エラー警告があった場合、選択された送信画像は、記憶手段に記憶しておき、再度送信する画像ファイルを選択する状態になったとき、前回選択した画像ファイルは選択された状態となる。また、エラー警告のない場合は送信開始の決定画面を表示する(S34)。   When there is an error warning, the selected transmission image is stored in the storage means, and when the image file to be transmitted again is selected, the previously selected image file is selected. . If there is no error warning, a transmission start decision screen is displayed (S34).

以上のように、GPS情報を添付した画像ファイルを外部機器へ送信する処理を効率的行うことができる。   As described above, it is possible to efficiently perform processing for transmitting an image file with GPS information attached to an external device.

本発明に係る撮像装置および撮像方法は、複数のGPS受信機器からの複数の地点での場所情報を取得し、この情報を利用することによって、PDAやPCでの後処理の拡張性、さらに効率的な送信処理をすることにより、その利便性を向上させることができ、GPS情報等を有する画像ファイルの各情報を無線通信で取得するのに有用である。   The imaging apparatus and the imaging method according to the present invention acquire location information at a plurality of points from a plurality of GPS receivers, and use this information to expand scalability and further efficiency of a PDA or PC. By performing a typical transmission process, the convenience can be improved, and it is useful for acquiring each information of an image file having GPS information or the like by wireless communication.

本発明の実施形態1における撮像装置の一例であるデジタルカメラの外観を示す(a)は上面図、(b)は正面図、(c)は背面図1A is a top view, FIG. 1B is a front view, and FIG. 1C is a rear view showing the appearance of a digital camera that is an example of an imaging apparatus according to Embodiment 1 of the present invention. デジタルカメラ内部のシステム構成の概要を示すブロック回路図Block circuit diagram showing the outline of the system configuration inside the digital camera 本実施形態1における撮像装置の別の一例である撮影機能を有するPDA情報端末装置を示すブロック図FIG. 2 is a block diagram showing a PDA information terminal device having a photographing function, which is another example of the imaging device according to the first embodiment. 本実施形態1におけるGPS情報をOSDの標準ディスプレイモードによる表示例を示す図The figure which shows the example of a display by the standard display mode of OSD in the GPS information in this Embodiment 1. 本実施形態1におけるGPS情報をOSDのGPSディスプレイモードによる表示例を示す図The figure which shows the example of a display by the GPS display mode of OSD in the GPS information in this Embodiment 1. 本実施形態1における無線接続して通信を行うBluetoothプロトコルスタック構造を示す図The figure which shows the Bluetooth protocol stack structure which carries out the wireless connection in this Embodiment 1, and communicates 本実施形態1である撮像装置とGPS受信機器とのSPPプロトコルによるシーケンスを示す図The figure which shows the sequence by the SPP protocol of the imaging device which is this Embodiment 1, and a GPS receiving device. 本実施形態1におけるGPS情報のデータフォーマットの例を示す図The figure which shows the example of the data format of the GPS information in this Embodiment 1. 本実施形態1であるBluetooth通信のSPPプロトコルによるマルチ接続のシーケンスを示す図The figure which shows the sequence of the multi connection by the SPP protocol of Bluetooth communication which is this Embodiment 1. 無線ネットワークの予め登録されている接続設定例を示す図The figure which shows the example of a connection setting registered beforehand of a wireless network 本発明の実施形態2における外部機器との通信処理の手順を示すフローチャートThe flowchart which shows the procedure of the communication process with the external apparatus in Embodiment 2 of this invention. 無線ネットワークの接続先選択の画面表示例を示す図The figure which shows the example of a screen display of the connection destination selection of a wireless network バックグラウンドで行われる無線ネットワークへの接続処理のフローチャートFlow chart of connection processing to the wireless network performed in the background 「接続中」の画面表示例を示す図Figure showing a screen display example of "Connecting" 本実施形態2におけるもう一つの外部機器との通信処理の手順を示すフローチャートThe flowchart which shows the procedure of the communication process with the other external apparatus in this Embodiment 2. 通信モード選択の画面表示例を示す図Figure showing a screen display example of communication mode selection

符号の説明Explanation of symbols

10 LCDモニタ
103 SDRAM
107 RAM
121 メモリカードスロットル
130 Bluetooth通信回路
1043 CPUブロック
SW1〜14 操作キー
10 LCD monitor 103 SDRAM
107 RAM
121 Memory card throttle 130 Bluetooth communication circuit 1043 CPU block SW1-14 Operation key

Claims (20)

複数の接続先と通信可能な無線通信機能および被写体像を撮影して画像データを得る撮影機能を有し、無線通信機能を有するGPS受信機器との間でポイント・ツー・ポイント・プロトコルにより無線接続した無線通信によって情報交換を行う撮像装置において、
前記複数のGPS受信機器とポイント・ツー・ポイント・プロトコルの無線接続を確立する接続手段と、前記無線接続の確立後の無線通信によって前記GPS受信機器からのGPS情報を取得する取得手段と、前記GPS受信機器から取得したGPS情報をリアルタイムに表示する表示手段と、前記GPS受信機器から取得したGPS情報を撮影時に得た前記画像データに添付する添付手段とを備えたことを特徴とする撮像装置。
It has a wireless communication function that can communicate with multiple connection destinations and a shooting function that captures subject images and obtains image data, and wirelessly connects to GPS receivers that have wireless communication functions using a point-to-point protocol. In an imaging device that exchanges information by wireless communication,
Connection means for establishing a point-to-point protocol wireless connection with the plurality of GPS receiving devices; acquisition means for acquiring GPS information from the GPS receiving device by wireless communication after the establishment of the wireless connection; An image pickup apparatus comprising: display means for displaying GPS information acquired from a GPS receiving device in real time; and attachment means for attaching GPS information acquired from the GPS receiving device to the image data obtained at the time of photographing. .
前記複数のGPS受信機器から取得したGPS情報をユーザの操作に基づいて選択切替えする切替手段を備え、表示手段に表示する共に画像データに添付する前記GPS情報を選択切替えすることを特徴とする請求項1記載の撮像装置。   A switching means for selecting and switching GPS information acquired from the plurality of GPS receiving devices based on a user operation is provided, and the GPS information displayed on the display means and attached to the image data is selected and switched. Item 2. The imaging device according to Item 1. 前記複数のGPS受信機器から取得したGPS情報を保持する保持手段を備え、前記GPS受信機器からのGPS情報が測位から未測位の情報となった場合、または前記GPS受信機器との無線接続が切断された場合、前記保持手段の保持するGPS情報を用いて表示手段により表示し、また添付手段により画像データに添付することを特徴とする請求項1記載の撮像装置。   Holding means for holding GPS information acquired from the plurality of GPS receiving devices, and when the GPS information from the GPS receiving device is changed from positioning to non-positioning information, or the wireless connection with the GPS receiving device is disconnected 2. The image pickup apparatus according to claim 1, wherein when the image data is received, the GPS information held by the holding means is displayed by the display means, and the image data is attached by the attaching means. 前記保持手段の保持する複数のGPS情報をユーザの操作に基づいて選択切替えする切替手段を備え、表示手段に表示すると共に画像データに添付するGPS情報の選択切替えすることを特徴とする請求項3記載の撮像装置。   4. A switch means for selecting and switching a plurality of GPS information held by the holding means based on a user's operation, wherein the GPS information displayed on the display means and selected and attached to the image data is switched. The imaging device described. 前記保持手段の保持するGPS情報を用いる場合に、前記保持手段の保持したGPS情報であることを示す識別情報を付与する付与手段を備え、前記付与手段によって前記GPS情報を区別可能として、表示手段に表示すると共に画像データに添付することを特徴とする請求項3記載の撮像装置。   When using the GPS information held by the holding unit, the display unit includes an adding unit that adds identification information indicating that the GPS information is held by the holding unit, and the GPS unit can be distinguished by the adding unit. 4. The image pickup apparatus according to claim 3, wherein the image pickup apparatus is displayed on the screen and attached to the image data. 前記撮影機能により得た画像データにGPS情報を添付し画像ファイルとして記録する記録手段と、前記無線通信機能により外部機器と無線通信を行う通信手段で用いる予め登録された接続設定を選択する選択手段を備え、
前記外部機器と無線通信を行う処理が選択されると同時に、前記選択された処理のバックグラウンドで前回接続の接続設定により前記通信手段の無線接続を確立する処理を実行することを特徴とする請求項1〜5のいずれか1項に記載の撮像装置。
Recording means for attaching GPS information to the image data obtained by the photographing function and recording it as an image file; and selecting means for selecting a pre-registered connection setting used by the communication means for performing wireless communication with an external device by the wireless communication function With
The process for establishing a wireless connection of the communication means is executed by a connection setting of a previous connection in the background of the selected process at the same time as a process for performing a wireless communication with the external device is selected. Item 6. The imaging device according to any one of Items 1 to 5.
前記外部機器と無線通信を行う処理が、前記通信手段の無線接続を確立する処理の途中で解除された場合、前記無線接続を確立する処理を中止することを特徴とする請求項6記載の撮像装置。   7. The imaging according to claim 6, wherein when the process of performing wireless communication with the external device is canceled during the process of establishing the wireless connection of the communication unit, the process of establishing the wireless connection is stopped. apparatus. 前記撮影機能により得た画像データにGPS情報を添付し画像ファイルとして記録する記録手段と、前記無線通信機能により外部機器と無線通信を行う通信手段で用いる予め登録されている接続設定を選択する選択手段を備え、
前記外部機器と無線通信を行う処理が選択決定されて、前記処理において接続先が選択されると同時に、前記選択決定された処理のバックグラウンドで前記接続先の接続設定により前記通信手段の無線接続を確立する処理を実行することを特徴とする請求項1〜5のいずれか1項に記載の撮像装置。
Selection for selecting pre-registered connection settings used by recording means for attaching GPS information to image data obtained by the photographing function and recording it as an image file, and communication means for performing wireless communication with an external device by the wireless communication function With means,
A process of performing wireless communication with the external device is selected and determined, and a connection destination is selected in the process, and at the same time, the wireless connection of the communication means is performed according to the connection setting of the connection destination in the background of the selected and determined process. The imaging apparatus according to claim 1, wherein a process for establishing the image is executed.
前記外部機器と無線通信を行う処理において、前記外部機器へ送信する画像ファイルの選択が完了し、前記通信手段の無線接続を確立する処理が完了していないとき、前記外部機器と無線通信を行う処理を停止して前記通信手段の処理が完了するまで表示手段に接続中を表示することを特徴とする請求項8記載の撮像装置。   In the process of performing wireless communication with the external device, when the selection of the image file to be transmitted to the external device is completed and the process of establishing the wireless connection of the communication unit is not completed, wireless communication with the external device is performed. 9. The imaging apparatus according to claim 8, wherein the processing is stopped and the connection means is displayed on the display means until the processing of the communication means is completed. 前記外部機器と無線通信を行う処理において、前記外部機器へ送信する画像ファイルの選択中に、前記通信手段の無線接続を確立する処理でエラーが発生したとき、前記画像ファイルの選択完了後に前記エラーの警告を行うことを特徴とする請求項8記載の撮像装置。   In the process of performing wireless communication with the external device, when an error occurs in the process of establishing a wireless connection of the communication means during the selection of the image file to be transmitted to the external device, the error occurs after the selection of the image file is completed. The imaging apparatus according to claim 8, wherein the warning is performed. 複数の接続先と通信可能な無線通信機能および被写体像を撮影して画像データを得る撮影機能を有し、無線通信機能を有するGPS受信機器との間でポイント・ツー・ポイント・プロトコルにより無線接続した無線通信によって情報交換を行う装置の撮像方法において、
接続手段により前記複数のGPS受信機器とポイント・ツー・ポイント・プロトコルの無線接続を確立する工程と、取得手段により前記無線接続の確立後の無線通信によって前記GPS受信機器からのGPS情報を取得する工程と、表示手段に前記GPS受信機器から取得したGPS情報をリアルタイムに表示する工程と、添付手段により前記GPS受信機器から取得したGPS情報を撮影時に得た前記画像データに添付する工程とからなることを特徴とする撮像方法。
It has a wireless communication function that can communicate with multiple connection destinations and a shooting function that captures subject images and obtains image data, and wirelessly connects to GPS receivers that have wireless communication functions using a point-to-point protocol. In an imaging method of an apparatus for exchanging information by wireless communication,
Establishing point-to-point protocol wireless connection with the plurality of GPS receiving devices by connecting means, and acquiring GPS information from the GPS receiving device by wireless communication after the wireless connection is established by acquiring means And displaying the GPS information acquired from the GPS receiving device on the display means in real time, and attaching the GPS information acquired from the GPS receiving device by the attaching means to the image data obtained at the time of photographing. An imaging method characterized by the above.
前記複数のGPS受信機器から取得したGPS情報をユーザの操作に基づいて選択切替えする工程を有し、表示手段に表示する共に画像データに添付する前記GPS情報を選択切替えすることを特徴とする請求項11記載の撮像方法。   5. The method according to claim 1, further comprising a step of selecting and switching the GPS information acquired from the plurality of GPS receiving devices based on a user operation, wherein the GPS information displayed on the display unit and attached to the image data is selected and switched. Item 12. The imaging method according to Item 11. 前記複数のGPS受信機器から取得したGPS情報を保持手段に保持する工程を有し、前記GPS受信機器からのGPS情報が測位から未測位の情報となった場合、または前記GPS受信機器との無線接続が切断された場合、前記保持手段の保持するGPS情報を用いて表示手段により表示し、また添付手段により画像データに添付することを特徴とする請求項11記載の撮像方法。   A step of holding GPS information acquired from the plurality of GPS receiving devices in a holding unit, and when the GPS information from the GPS receiving device is changed from positioning to non-positioning information, or wirelessly with the GPS receiving device 12. The imaging method according to claim 11, wherein when the connection is disconnected, the GPS information held by the holding means is used for display by display means and the attachment means is attached to the image data. 前記保持手段の保持する複数のGPS情報をユーザの操作に基づいて選択切替えする工程を有し、表示手段に表示すると共に画像データに添付するGPS情報の選択切替えすることを特徴とする請求項13記載の撮像方法。   14. The method according to claim 13, further comprising a step of selecting and switching a plurality of GPS information held by the holding means based on a user operation, wherein the GPS information displayed on the display means and selected and attached to the image data is switched. The imaging method described. 前記保持手段の保持するGPS情報を用いる場合に、付与手段により前記保持手段の保持したGPS情報であることを示す識別情報を付与する工程を備え、前記GPS情報を区別可能として、表示手段に表示すると共に画像データに添付することを特徴とする請求項13記載の撮像方法。   When using the GPS information held by the holding means, a step of giving identification information indicating that the GPS information is held by the holding means is provided by the assigning means, and the GPS information can be distinguished and displayed on the display means 14. The imaging method according to claim 13, wherein the imaging method is attached to the image data. 前記撮影機能により得た画像データにGPS情報を添付し画像ファイルとして記録する工程と、前記無線通信機能により外部機器と無線通信を行う通信手段で用いる予め登録されている接続設定を選択する工程とを有し、
前記外部機器と無線通信を行う処理が選択されると同時に、前記選択された処理のバックグラウンドで前回接続の接続設定により前記通信手段の無線接続を確立する処理を実行することを特徴とする請求項11〜15のいずれか1項に記載の撮像方法。
Attaching GPS information to the image data obtained by the photographing function and recording the image data as an image file; and selecting a pre-registered connection setting used by a communication unit that performs wireless communication with an external device by the wireless communication function; Have
The process for establishing a wireless connection of the communication means is executed by a connection setting of a previous connection in the background of the selected process at the same time as a process for performing a wireless communication with the external device is selected. Item 16. The imaging method according to any one of Items 11 to 15.
前記外部機器と無線通信を行う処理が、前記通信手段の無線接続を確立する処理の途中で解除された場合、前記無線接続を確立する処理を中止することを特徴とする請求項16記載の撮像方法。   17. The imaging according to claim 16, wherein when the process of performing wireless communication with the external device is canceled during the process of establishing a wireless connection of the communication unit, the process of establishing the wireless connection is stopped. Method. 前記撮影機能により得た画像データにGPS情報を添付し画像ファイルとして記録する工程と、前記無線通信機能により外部機器と無線通信を行う通信手段で用いる予め登録されている接続設定を選択する工程とを有し、
前記外部機器と無線通信を行う処理が選択決定されて、前記処理において接続先が選択されると同時に、前記選択決定された処理のバックグラウンドで前記接続先の接続設定により前記通信手段の無線接続を確立する処理を実行することを特徴とする請求項11〜15のいずれか1項に記載の撮像方法。
Attaching GPS information to the image data obtained by the photographing function and recording the image data as an image file; and selecting a pre-registered connection setting used by a communication unit that performs wireless communication with an external device by the wireless communication function; Have
A process of performing wireless communication with the external device is selected and determined, and a connection destination is selected in the process, and at the same time, the wireless connection of the communication means is performed according to the connection setting of the connection destination in the background of the selected and determined process. The imaging method according to any one of claims 11 to 15, wherein a process of establishing the above is executed.
前記外部機器と無線通信を行う処理において、前記外部機器へ送信する画像ファイルの選択が完了し、前記通信手段の無線接続を確立する処理が完了していないとき、前記外部機器と無線通信を行う処理を停止して前記通信手段の処理が完了するまで表示手段に接続中を表示することを特徴とする請求項18記載の撮像方法。   In the process of performing wireless communication with the external device, when the selection of the image file to be transmitted to the external device is completed and the process of establishing the wireless connection of the communication unit is not completed, wireless communication with the external device is performed. 19. The imaging method according to claim 18, wherein the processing is stopped and the connection means is displayed on the display means until the processing of the communication means is completed. 前記外部機器と無線通信を行う処理において、前記外部機器へ送信する画像ファイルの選択中に、前記通信手段の無線接続を確立する処理でエラーが発生したとき、前記画像ファイルの選択完了後に前記エラーの警告を行うことを特徴とする請求項18記載の撮像方法。   In the process of performing wireless communication with the external device, when an error occurs in the process of establishing a wireless connection of the communication means during the selection of the image file to be transmitted to the external device, the error occurs after the selection of the image file is completed. The imaging method according to claim 18, wherein the warning is performed.
JP2007033345A 2007-02-14 2007-02-14 Imaging apparatus and imaging method Active JP4755614B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007033345A JP4755614B2 (en) 2007-02-14 2007-02-14 Imaging apparatus and imaging method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007033345A JP4755614B2 (en) 2007-02-14 2007-02-14 Imaging apparatus and imaging method

Publications (2)

Publication Number Publication Date
JP2008199356A true JP2008199356A (en) 2008-08-28
JP4755614B2 JP4755614B2 (en) 2011-08-24

Family

ID=39757906

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007033345A Active JP4755614B2 (en) 2007-02-14 2007-02-14 Imaging apparatus and imaging method

Country Status (1)

Country Link
JP (1) JP4755614B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010157922A (en) * 2008-12-26 2010-07-15 Canon Inc Communication device and method for controlling the same
JP2014092927A (en) * 2012-11-02 2014-05-19 Ricoh Co Ltd Information processor, and control program of information processor
JP6156601B1 (en) * 2017-02-01 2017-07-05 株式会社リコー Client terminal, computer program, and information processing method
JP2017224295A (en) * 2017-06-08 2017-12-21 株式会社リコー Client terminal, computer program, and information processing method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07294622A (en) * 1994-04-21 1995-11-10 Japan Radio Co Ltd Method for measuring position of train
JP2000329839A (en) * 1999-05-19 2000-11-30 Railway Technical Res Inst Gps device with monitoring means
JP2002310670A (en) * 2001-04-10 2002-10-23 Navitime Japan Co Ltd Map display device
JP2006279110A (en) * 2005-03-25 2006-10-12 Ricoh Co Ltd Communication information transfer system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07294622A (en) * 1994-04-21 1995-11-10 Japan Radio Co Ltd Method for measuring position of train
JP2000329839A (en) * 1999-05-19 2000-11-30 Railway Technical Res Inst Gps device with monitoring means
JP2002310670A (en) * 2001-04-10 2002-10-23 Navitime Japan Co Ltd Map display device
JP2006279110A (en) * 2005-03-25 2006-10-12 Ricoh Co Ltd Communication information transfer system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010157922A (en) * 2008-12-26 2010-07-15 Canon Inc Communication device and method for controlling the same
JP2014092927A (en) * 2012-11-02 2014-05-19 Ricoh Co Ltd Information processor, and control program of information processor
JP6156601B1 (en) * 2017-02-01 2017-07-05 株式会社リコー Client terminal, computer program, and information processing method
JP2017135713A (en) * 2017-02-01 2017-08-03 株式会社リコー Client terminal, computer program, and information processing method
JP2017224295A (en) * 2017-06-08 2017-12-21 株式会社リコー Client terminal, computer program, and information processing method

Also Published As

Publication number Publication date
JP4755614B2 (en) 2011-08-24

Similar Documents

Publication Publication Date Title
JP2007048150A (en) Wireless communication device, wireless communication method, wireless communication program, and recording medium with this program recorded
JP7101525B2 (en) Electronic devices and their control methods, as well as programs
JP2007020037A (en) Electronic camera
JP2011259065A (en) Imaging apparatus
US20100149345A1 (en) Digital camera
JP4755614B2 (en) Imaging apparatus and imaging method
JP3968507B2 (en) Imaging apparatus, imaging system, and imaging operation control method
JP4790532B2 (en) Imaging apparatus and wireless communication partner searching method
JP4295948B2 (en) Imaging system, imaging apparatus, and imaging method
JP4821195B2 (en) Electronic camera
JP5005925B2 (en) Digital camera
JP4497476B2 (en) Communication information transfer method
JP2006203625A (en) Digital camera
JP7146434B2 (en) COMMUNICATION DEVICE, CONTROL METHOD THEREOF, AND PROGRAM
JP4705424B2 (en) Communication information transfer method and communication information transfer system
JP2019004422A (en) Communication device, control method, and program
JP3988075B2 (en) Image transmission equipment
JP4416691B2 (en) Communication information transfer method
JP2019003495A (en) Information processing apparatus, and method and program of controlling the same
JP2018142865A (en) Communication device, control method of communication device, and program
JP2005318259A (en) Image photographing apparatus and system, and image photographing apparatus control method
JP2003250073A (en) Electronic camera and mobile terminal
JP2002101327A (en) Image pickup device and method, storage medium, communication unit and method, and storage medium
JP2011097180A (en) Camera, and information processing system
JP2007150683A (en) Mobile apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090710

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20100614

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100624

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110524

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110527

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140603

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4755614

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150