JP4891856B2

JP4891856B2 - Mobile communication terminal

Info

Publication number: JP4891856B2
Application number: JP2007198397A
Authority: JP
Inventors: 理大鷹; 秀行池田
Original assignee: SoftBank Mobile Corp
Current assignee: SoftBank Corp
Priority date: 2007-07-31
Filing date: 2007-07-31
Publication date: 2012-03-07
Anticipated expiration: 2024-04-16
Also published as: JP2008029014A

Description

本発明は、実行中のアプリケーションプログラムによって指定された画像を表示することができる携帯電話機等の移動体通信端末に関するものである。 The present invention relates to a mobile communication terminal such as a mobile phone capable of displaying an image designated by an application program being executed.

従来、この種の移動体通信端末として、プラットフォームに依存しないＪＡＶＡ（登録商標）等のオブジェクト指向のプログラミング言語で記述されたアプリケーションプログラムを実行可能な携帯電話機が知られている（例えば特許文献１参照）。このような携帯電話機では、移動体通信ネットワーク上のサーバから利用者が所望のアプリケーションプログラムをダウンロードして携帯電話機内に登録しておく。この登録されているアプリケーションプログラムを利用者が起動して実行することにより、携帯電話機上で各種機能を実現することができる。このアプリケーションプログラムの実行による携帯電話機の機能として、実行中のアプリケーションプログラムで指定された画像変換指定内容に応じてディスプレイに表示する画像を左右又は上下に反転させたり９０度単位で回転させたりする画像変換機能がある。
特開２０００−３４７８６７号公報 Conventionally, as this type of mobile communication terminal, a mobile phone capable of executing an application program described in an object-oriented programming language such as JAVA (registered trademark) independent of a platform is known (see, for example, Patent Document 1). ). In such a mobile phone, a user downloads a desired application program from a server on the mobile communication network and registers it in the mobile phone. Various functions can be realized on the mobile phone by the user starting and executing the registered application program. As a function of the mobile phone by executing this application program, an image displayed on the display is reversed left and right or up and down or rotated in units of 90 degrees in accordance with the image conversion specification content specified by the application program being executed. There is a conversion function.
JP 2000-347867 A

しかしながら、上記従来の移動体通信端末においてアプリケーションプログラムで指定して実行できる画像変換は、画像の左右反転、画像の上下反転及び画像の回転の３種類であり、他の画像変換を行うことができなかった。 However, there are three types of image conversion that can be specified and executed by the application program in the above-described conventional mobile communication terminal, that is, horizontal flip of the image, vertical flip of the image, and rotation of the image, and other image conversion can be performed. There wasn't.

本発明は以上の問題点に鑑みなされたものであり、その目的は、従来の移動体通信端末では実行することができなかった新規な画像変換をアプリケーションプログラムで指定して実行できる移動体通信端末を提供することである。 SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and an object of the present invention is to provide a mobile communication terminal that can specify and execute a new image conversion that cannot be executed by a conventional mobile communication terminal using an application program. Is to provide.

上記目的を達成するために、請求項１の発明は、画像を表示するための表示手段と、該表示手段を制御する画像表示制御手段と、アプリケーションプログラムの実行を管理するアプリケーションプログラム実行管理手段とを備え、該アプリケーションプログラム実行管理手段は、画像変換処理対象の画像データを記憶する画像データ記憶部と該表示手段の画面に画像を表示するための描画データを記憶する描画データ記憶部とを有し、該画像表示制御手段は、該アプリケーションプログラム実行管理手段から受けた画像表示指令に基づいて、該描画データ記憶部に保存されている描画データからなる画像を該表示手段の画面に表示するように制御する移動体通信端末であって、上記アプリケーションプログラム実行管理手段から受けた変換内容指定情報に基づいて、上記画像データ記憶手段に保存されている上記画像変換処理対象の画像データに対して描画系の画像変換処理及びエフェクト系の画像変換処理を実行可能な画像変換処理手段を備え、上記アプリケーションプログラム実行管理手段は、実行中のアプリケーションプログラムで指定された変換内容指定情報に基づいて、上記描画系の画像変換処理を伴う第一の処理を実行可能であり、上記第一の処理は、上記変換内容指定情報を上記画像変換処理手段に送り、該画像変換処理手段から戻ってきた変換後の画像データを上記画像データ記憶部に保存せずに該変換後の画像データから上記描画データを生成して上記描画データ記憶部に保存する処理であることを特徴とするものである。
この移動体通信端末において、アプリケーションプログラム実行管理手段は、実行中のアプリケーションプログラムで指定された変換内容指定情報を画像変換処理手段に送る。
画像変換処理手段は、アプリケーションプログラム実行管理手段から受けた変換内容指定情報に基づいて、画像データ記憶手段に保存されている画像変換処理対象の画像データに対して描画系の画像変換処理及びエフェクト系の画像変換処理を実行する。
アプリケーションプログラム実行管理手段は、実行中のアプリケーションプログラムで指定された上記変換内容指定情報を上記画像変換処理手段に送り、画像変換処理手段から戻ってきた変換後の画像データを画像データ記憶部に保存せずに変換後の画像データから描画データを生成して描画データ記憶部に保存する描画系の画像変換処理を伴う第一の処理を実行することができる。
画像表示制御手段は、アプリケーションプログラム実行管理手段から受けた画像表示指令に基づいて表示手段を制御する。この制御により、上記描画データ記憶部に保存されている描画データからなる変換後の画像が表示手段の画面に表示される。
以上のように、実行中のアプリケーションプログラムで画像変換の内容を指定する変換内容指定情報に基づいて、従来の移動体通信端末ではできなかった描画系の画像変換処とエフェクト系の画像変換処理とを選択的に実行し、その変換後の画像を表示手段に表示することができる。しかも、上記描画系の画像変換処理を伴う第一の処理では、変換後の画像データを画像データ記憶部に保存せずに変換後の画像データから描画データを生成する。従って、アプリケーションプログラムの実行中にリアルタイムに画像を変化させるときに画像変換から画像表示までの処理を高速に行うことができる。 In order to achieve the above object, the invention of claim 1 includes a display means for displaying an image, an image display control means for controlling the display means, and an application program execution management means for managing the execution of the application program. The application program execution management means includes an image data storage unit for storing image data to be subjected to image conversion processing, and a drawing data storage unit for storing drawing data for displaying an image on the screen of the display unit. Then, the image display control means displays an image composed of drawing data stored in the drawing data storage unit on the screen of the display means based on the image display command received from the application program execution management means. A mobile communication terminal that controls the content of the conversion received from the application program execution management means. Image conversion processing means capable of executing drawing-type image conversion processing and effect-type image conversion processing on the image data to be subjected to image conversion processing stored in the image data storage means based on designation information the application program execution management means, based on the conversion contents specifying information specified by the application program in execution is capable of executing a first process with an image conversion process of the rendering system, the first processing Sends the conversion content designation information to the image conversion processing means, and stores the converted image data returned from the image conversion processing means from the converted image data without saving it in the image data storage unit. data generated by the is characterized in that a processing of storing the above drawing data storage unit.
In this mobile communication terminal, the application program execution management means sends the conversion content designation information designated by the application program being executed to the image conversion processing means.
The image conversion processing means is based on the conversion content designation information received from the application program execution management means, and the drawing-type image conversion processing and effect system for the image conversion processing target image data stored in the image data storage means. The image conversion process is executed.
The application program execution management unit sends the conversion content specification information specified by the application program being executed to the image conversion processing unit, and stores the converted image data returned from the image conversion processing unit in the image data storage unit it is possible to perform a first process involving drawing system image conversion process to be stored in the drawing data storage unit to generate the drawing data from the converted image data without.
The image display control means controls the display means based on the image display command received from the application program execution management means. By this control, the converted image composed of the drawing data stored in the drawing data storage unit is displayed on the screen of the display means.
As described above, based on the conversion content designation information for designating the content of the image conversion by the application program being executed, the drawing-type image conversion processing and the effect-type image conversion processing that could not be performed by the conventional mobile communication terminal, Can be selectively executed, and the converted image can be displayed on the display means. In addition, in the first process involving the image conversion process of the drawing system, drawing data is generated from the converted image data without saving the converted image data in the image data storage unit. Therefore, when changing an image in real time during execution of an application program, processing from image conversion to image display can be performed at high speed.

また、請求項２の発明は、請求項１の移動体通信端末において、上記アプリケーションプログラム実行管理手段は、実行中のアプリケーションプログラムで指定された変換内容指定情報に基づいて、上記第一の処理と、上記エフェクト系の画像変換処理を伴う第二の処理とを互いに独立に実行可能であり、上記第二の処理は、上記変換内容指定情報を上記画像変換処理手段に送り、該画像変換処理手段から戻ってきた変換後の画像データを上記画像データ記憶部に一旦保存し、該画像データ記憶部から読み出した該変換後の画像データから上記描画データを生成して上記描画データ記憶部に保存する処理であることを特徴とするものである。 Further, the invention of claim 2 is the mobile communication terminal of claim 1, wherein the application program execution management means performs the first process based on the conversion content designation information designated by the application program being executed. And the second process involving the image conversion process of the effect system can be executed independently of each other, and the second process sends the conversion content designation information to the image conversion processing means, and the image conversion processing means The converted image data returned from is temporarily stored in the image data storage unit, and the drawing data is generated from the converted image data read from the image data storage unit and stored in the drawing data storage unit. It is a process.
この移動体通信端末において、アプリケーションプログラム実行管理手段は、実行中のアプリケーションプログラムで指定された上記変換内容指定情報を上記画像変換処理手段に送り、上記第一の処理と、画像変換処理手段から戻ってきた変換後の画像データを画像データ記憶部に一旦保存し、該画像データ記憶部から読み出した変換後の画像データから描画データを生成して描画データ記憶部に保存するエフェクト系の画像変換処理を伴う第二の処理とを、互いに独立に実行することができる。また、上記エフェクト系の画像変換処理を伴う第二の処理では、変換後の画像データを画像データ記憶部に一旦保存した後、その画像データ記憶部から読み出した変換後の画像データから描画データを生成する。従って、画像データ記憶部に保存されている変換後の画像データを、再変換処理対象の画像のデータとして用いることができる。 In this mobile communication terminal, the application program execution management means sends the conversion content designation information designated by the application program being executed to the image conversion processing means, and returns from the first process and the image conversion processing means. Effect-based image conversion processing that temporarily stores the converted image data in the image data storage unit, generates drawing data from the converted image data read from the image data storage unit, and stores the drawing data in the drawing data storage unit The second process involving the can be performed independently of each other. In the second process involving the effect system image conversion process, after the converted image data is temporarily stored in the image data storage unit, drawing data is converted from the converted image data read from the image data storage unit. Generate. Therefore, the converted image data stored in the image data storage unit can be used as image data to be reconverted.

なお、上記画像変換対象の「画像データ」としては、移動体通信端末内のデータ記憶手段に保存されている画像データ、移動体通信端末に装着されたメモリーカードなどの外部記憶装置に保存されている画像データ、アプリケーションプログラムに組み込まれている画像データ等が挙げられる。また、上記画像変換対象の「画像データ」は、移動体通信端末に設けたカメラ部で撮影した画像のデータや、移動体通信端末から通信ネットワークを介してアクセス可能なサーバに保存されている画像データであってもよい。
上記「移動体通信端末」としては、ＰＤＣ（Personal Digital Cellular）方式、ＧＳＭ（Global System for Mobile Communication）方式、ＴＩＡ（Telecommunications Industry Association）方式等の携帯電話機、ＩＭＴ（International Mobile Telecommunications）−２０００で標準化された携帯電話機、ＴＤ−ＳＣＤＭＡ（Time Division Synchronous Code Division Multiple Access）方式の一つであるＴＤ−ＳＣＤＭＡ（ＭＣ：Multi Carrier）方式の携帯電話機、ＰＨＳ（Personal Handyphone System）、自動車電話機等の電話機のうち、アプリケーションプログラム実行可能なものが挙げられる。また、この「移動体通信端末」としては、上記電話機のほか、電話機能を有しないＰＤＡ（Personal Digital Assistance）等の移動型の移動体通信端末も挙げられる。
また、上記移動体通信端末における制御及び画像変換処理は、その移動体通信端末に設けられたコンピュータで所定のプログラムを実行することによって実現することもできる。このコンピュータで用いるプログラムの受け渡しは、デジタル情報としてプログラムを記録したＦＤ，ＣＤ−ＲＯＭ等の記録媒体を用いて行なってもいいし、コンピュータネットワーク等の通信ネットワークを用いて行なってもよい。 The “image data” to be image-converted is stored in an external storage device such as image data stored in the data storage means in the mobile communication terminal or a memory card attached to the mobile communication terminal. Image data, image data incorporated in an application program, and the like. In addition, the “image data” to be converted is an image data captured by a camera unit provided in the mobile communication terminal, or an image stored in a server accessible from the mobile communication terminal via the communication network. It may be data.
As the above-mentioned “mobile communication terminal”, PDC (Personal Digital Cellular) system, GSM (Global System for Mobile Communication) system, TIA (Telecommunications Industry Association) system mobile phone, etc., standardized by IMT (International Mobile Telecommunications) -2000 Mobile telephones, TD-SCDMA (MC: Multi Carrier) mobile telephones, one of TD-SCDMA (Time Division Synchronous Code Division Multiple Access) systems, telephones such as PHS (Personal Handyphone System ), automobile telephones, etc. Among them, those that can execute application programs are listed. Examples of the “mobile communication terminal” include a mobile mobile communication terminal such as a PDA (Personal Digital Assistance) that does not have a telephone function in addition to the above-described telephone.
In addition, the control and image conversion processing in the mobile communication terminal can be realized by executing a predetermined program on a computer provided in the mobile communication terminal. Delivery of the program used in the computer may be performed using a recording medium such as an FD or CD-ROM in which the program is recorded as digital information, or may be performed using a communication network such as a computer network.

請求項１及び２の発明によれば、従来の移動体通信端末ではできなかった描画系の画像変換処理を、実行中のアプリケーションプログラムで指定して実行できる。しかも、アプリケーションプログラムの実行中にリアルタイムに画像を変化させるときに描画系の画像変換から画像表示までの処理を高速に行うことができるという効果がある。
特に、請求項２の発明によれば、エフェクト系の画像変換処理を実行中のアプリケーションプログラムで指定して実行できる。しかも、そのエフェクト系の画像変換後の画像データは、再変換処理対象の画像のデータとして用いることができるという効果がある。
According to the first and second aspects of the present invention, drawing-type image conversion processing that cannot be performed by a conventional mobile communication terminal can be specified and executed by an executing application program. In addition, when changing an image in real time during execution of the application program, there is an effect that processing from image conversion of the drawing system to image display can be performed at high speed.
In particular, according to the second aspect of the present invention, the effect type image conversion process can be designated and executed by the application program being executed. In addition, the image data after the image conversion of the effect system can be used as image data to be reconverted.

以下、本発明を移動体通信端末としての携帯電話機に適用した実施形態について説明する。
図１は、本実施形態に係る携帯電話機２０を用いた移動体通信システムの主要部を示す説明図である。この移動体通信システムにおいて、ユーザー１が使用する携帯電話機２０は、プラットフォームに依存しないオブジェクト指向プログラミングによって開発されたアプリケーションプログラムを実行可能な構成を有している。このアプリケーションプログラムとしては、ＪＡＶＡ（登録商標）、Ｃ、Ｃ＋＋等のプログラム言語で記述されたアプリケーションプログラムなどが挙げられる。また、これらのアプリケーションプログラムの実行環境は、ＪＡＶＡ（登録商標）の仮想マシン（ＶＭ：Virtual Machine）やＢＲＥＷ（登録商標）等のミドルウェアによって構築される。このアプリケーションプログラムは、携帯電話機２０にプレインストールされているものであってもいいし、通信ネットワークとしての携帯電話通信網を介してダウンロードサーバからダウンロードし携帯電話機２０に保存して登録したものでもよい。 Hereinafter, an embodiment in which the present invention is applied to a mobile phone as a mobile communication terminal will be described.
FIG. 1 is an explanatory diagram showing a main part of a mobile communication system using a mobile phone 20 according to the present embodiment. In this mobile communication system, the mobile phone 20 used by the user 1 has a configuration capable of executing application programs developed by platform-independent object-oriented programming. Examples of the application program include application programs written in a program language such as JAVA (registered trademark), C, C ++, and the like. The execution environment of these application programs is constructed by middleware such as a JAVA (registered trademark) virtual machine (VM) or BREW (registered trademark). This application program may be preinstalled in the mobile phone 20, or may be downloaded from a download server via a mobile phone communication network as a communication network, stored in the mobile phone 20, and registered. .

また、携帯電話機２０は、通信ネットワークとしての携帯電話通信網１０に接続可能である。この携帯電話通信網１０には、プログラム提供用サーバとしてのアプリケーションプログラムダウンロードサーバ（以下、「ダウンロードサーバ」という。）１１が接続されている。また、携帯電話通信網１０には、ダウンロードサーバ１１のほか、Ｗｅｂサーバ１２や、図示しない情報提供サーバ、位置登録サーバ、メールサーバ等も接続されている。なお、これらサーバは単一のサーバで構成してもよい。また、これらのサーバは、互いに異なる構成を有する専用の制御装置として構成してもいいし、汎用のコンピュータシステムを用いて構成してもよい。また、各サーバは、１台のコンピュータで構成してもいいし、複数の機能をそれぞれ受け持つ複数台のコンピュータをネットワークで結んで構成してもよい。 The mobile phone 20 can be connected to a mobile phone communication network 10 as a communication network. An application program download server (hereinafter referred to as “download server”) 11 as a program providing server is connected to the cellular phone communication network 10. In addition to the download server 11, a Web server 12, an information providing server (not shown), a location registration server, a mail server, and the like are connected to the mobile phone communication network 10. These servers may be constituted by a single server. Further, these servers may be configured as dedicated control devices having different configurations, or may be configured using a general-purpose computer system. Each server may be configured by a single computer, or may be configured by connecting a plurality of computers each having a plurality of functions via a network.

ダウンロードサーバ１１は、携帯電話機２０からのダウンロード要求を受け付けると、その要求に係るアプリケーションプログラムを携帯電話機２０に対して送信する。また、Ｗｅｂサーバ１２は、携帯電話機２０からの閲覧要求を受け付けると、その要求に係る閲覧画面であるＷｅｂページ画面を携帯電話機２０に対して送信する。
ダウンロードサーバ１１から提供されるアプリケーションプログラムは、アプリケーションプログラムの開発元２から提供される。具体的には、例えば、アプリケーションプログラム開発元２側のパーソナルコンピュータ等から、専用回線や公衆回線を介してダウンロードサーバ１１にアップロードして提供する。なお、開発したアプリケーションプログラムを記録した光ディスクや磁気ディスク等の記録媒体を、アプリケーションプログラム開発元２からダウンロードサーバ１１を管理・運営する通信事業者に送り、その記録媒体内のアプリケーションプログラムをダウンロードサーバ１１で読み取るようにして、提供してもよい。このようにして提供されたアプリケーションプログラムは、携帯電話機２０から携帯電話通信網１０を介してダウンロード可能な状態でダウンロードサーバ１１に登録される。 When receiving a download request from the mobile phone 20, the download server 11 transmits an application program related to the request to the mobile phone 20. In addition, when receiving a browsing request from the mobile phone 20, the Web server 12 transmits a Web page screen that is a browsing screen according to the request to the mobile phone 20.
The application program provided from the download server 11 is provided from the application program developer 2. Specifically, for example, it is uploaded from the personal computer on the application program developer 2 side to the download server 11 via a dedicated line or a public line. Note that a recording medium such as an optical disk or a magnetic disk on which the developed application program is recorded is sent from the application program developer 2 to a communication carrier that manages and operates the download server 11, and the application program in the recording medium is downloaded to the download server 11. You may read and provide. The application program thus provided is registered in the download server 11 in a state where it can be downloaded from the mobile phone 20 via the mobile phone communication network 10.

上記位置登録サーバは、各携帯電話機２０の位置している現在位置の情報すなわち各携帯電話機２０が位置している位置登録管理エリアの位置情報を登録して管理するサーバである。この位置登録管理エリアは、各携帯電話機２０と無線通信する基地局が管轄する一つのセルからなるエリアであっていいし、隣接する複数のセルを一つのグループとして管理されるエリアであってもよい。一つの位置登録管理エリアの典型的なサイズは数ｋｍ〜数百ｍである。上記位置登録サーバに対する各携帯電話機２０の位置登録は、電源ＯＮ時に、定期的に、及び携帯電話機２０が位置するセルが変わるたびに行われる。
上記情報提供サーバは、各位置登録管理エリアの基地局を介して、所定の通信チャンネルによって地域情報、該当する位置登録管理エリアの位置情報（緯度、経度、住所）、コンテンツ情報等の各種情報を配信する。このように各種情報が送信されている通信チャンネルについて、携帯電話機２０が所定のタイミングで受信動作を実行することにより、その通信チャンネルで送信されている情報を取得し情報記憶手段としての内部メモリーに保存することができる。各通信チャンネルに対する受信動作は、予め初期設定で設定されているタイミングや、利用者が設定したタイミングで実行することができる。この受信動作は定期的に実行してもいいし、不定期に実行してもよい。
上記メールサーバは、各携帯電話機２０から送信されたメールのデータを次のメールサーバに転送したり、各携帯電話機２０宛に送られてきたメールを受信して保存・管理し、各携帯電話機２０からのメール取得要求に応じて受信メールのデータを各携帯電話機に送信したりする。 The location registration server is a server that registers and manages information on the current location where each mobile phone 20 is located, that is, location information of a location registration management area where each mobile phone 20 is located. This location registration management area may be an area composed of one cell managed by a base station that communicates wirelessly with each mobile phone 20, or may be an area where a plurality of adjacent cells are managed as one group. Good. A typical size of one location registration management area is several kilometers to several hundred meters. The location registration of each mobile phone 20 with respect to the location registration server is performed periodically when the power is turned on and whenever the cell where the mobile phone 20 is located changes.
The information providing server sends various information such as area information, position information (latitude, longitude, address) of the corresponding position registration management area, content information, and the like through a base station of each position registration management area through a predetermined communication channel. To deliver. As described above, with respect to the communication channel in which various types of information are transmitted, the mobile phone 20 performs a receiving operation at a predetermined timing, thereby acquiring information transmitted through the communication channel and storing it in an internal memory as an information storage unit. Can be saved. The reception operation for each communication channel can be executed at the timing set in advance by the initial setting or at the timing set by the user. This reception operation may be performed regularly or irregularly.
The mail server transfers the mail data transmitted from each mobile phone 20 to the next mail server, receives the mail sent to each mobile phone 20, stores and manages it, and each mobile phone 20 The received mail data is transmitted to each mobile phone in response to a mail acquisition request from the mobile phone.

図２は携帯電話機２０の外観図であり、図３は、その携帯電話機２０のハードウェア構成を示す概略構成図である。
この携帯電話機２０は、クラムシェル（折り畳み）タイプの携帯電話機であり、システムバス２００、ＣＰＵ２０１、ＲＡＭ２０２やＲＯＭ２０３等からなるデータ記憶手段、入力装置２０４、出力装置２０５、携帯電話用通信装置２０６、メモリーカードドライブ装置２０７、撮像手段としての撮像デバイス２０８を備えている。ＣＰＵ２０１やＲＡＭ２０２等の構成要素は、システムバス２００を介して、互いに各種データや後述のプログラムの命令等のやり取りを行っている。上記入力装置２０４は、データ入力キー（テンキー、＊キー、＃キー）２１、通話開始キー２２、終話キー２３、スクロールキー２４、多機能キー２５、マイク２６等から構成されている。上記出力装置２０５は、表示手段である液晶ディスプレイ（ＬＣＤ）２７、スピーカ２８等から構成されている。 FIG. 2 is an external view of the mobile phone 20, and FIG. 3 is a schematic configuration diagram showing a hardware configuration of the mobile phone 20.
This mobile phone 20 is a clamshell (folding) type mobile phone, and includes a system bus 200, CPU 201, RAM 202, ROM 203, etc., data storage means, input device 204, output device 205, mobile phone communication device 206, memory A card drive device 207 and an imaging device 208 as imaging means are provided. Components such as the CPU 201 and the RAM 202 exchange various data and instructions of a program to be described later via the system bus 200. The input device 204 includes a data input key (ten key, * key, # key) 21, a call start key 22, an end key 23, a scroll key 24, a multi-function key 25, a microphone 26, and the like. The output device 205 includes a liquid crystal display (LCD) 27 as a display means, a speaker 28, and the like.

上記携帯電話用通信装置２０６は、携帯電話通信網１０を介して他の携帯電話機や上述したサーバ１１等と通信するためのものである。この携帯電話用通信装置２０６は、携帯電話機通信網１０を介して他の携帯電話機とメールのやり取りを行ったり、携帯電話機通信網１０からゲートウェイサーバを介して、インターネット等の外部の通信ネットワークに接続し、インターネット上での電子メールのやり取り等を行ったりするためのものである。更に、この携帯電話用通信装置２０６は、携帯電話通信網１０を介して、ダウンロードサーバ１１が提供するアプリケーションプログラムをダウンロードしたり、現在位置の位置情報を含む配信情報を受信したりする情報受信手段としても用いられる。 The mobile phone communication device 206 is for communicating with another mobile phone, the above-described server 11 and the like via the mobile phone communication network 10. The mobile phone communication device 206 exchanges mail with other mobile phones via the mobile phone communication network 10 or connects to an external communication network such as the Internet from the mobile phone communication network 10 via a gateway server. And for exchanging e-mails on the Internet. Further, the mobile phone communication device 206 downloads an application program provided by the download server 11 via the mobile phone communication network 10 or receives distribution information including location information of the current location. Also used as

また、上記ユーザー１が操作可能な上述のテンキー２１、通話開始キー２２、終話キー２３等で構成されている操作部を操作することにより、ユーザーは、携帯電話機２０に対してＵＲＬ等のデータを入力したり、電話着信の際に通話の開始及び終了を行ったり、アプリケーションプログラムの選択、起動及び停止を行ったりすることができる。また、ユーザーは操作部を操作することにより、上記ダウンロードサーバ１１からアプリケーションプログラムをダウンロードして登録したり、登録したアプリケーションプログラムを選択して実行したりすることができる。また、ユーザーは操作部を操作することにより、携帯電話通信網１０の情報提供サーバから受信した情報を表示することもできる。 In addition, by operating the operation unit including the above-described numeric keypad 21, call start key 22, call end key 23 and the like that can be operated by the user 1, the user can input data such as a URL to the mobile phone 20. Can be entered, a call can be started and ended when a call is received, and an application program can be selected, started and stopped. Further, the user can download and register an application program from the download server 11 by operating the operation unit, and can select and execute the registered application program. The user can also display information received from the information providing server of the mobile phone communication network 10 by operating the operation unit.

上記液晶ディスプレイ（ＬＣＤ）２７やスピーカ２８等からなる出力装置等で構成されている出力部は、携帯電話通信網１０を介して受信したＷｅｂページ画面を液晶ディスプレイ（ＬＣＤ）２７に表示したり、携帯電話通信網１０から情報を着信した旨をユーザーに報知したりするときに用いられる。具体的には、その情報を着信すると、出力部の液晶ディスプレイ（ＬＣＤ）２７に着信報知画像を表示したり、スピーカ２８から着信音を出力させたりする。また、出力部は、上記ゲーム等のアプリケーションプログラムの実行中に、そのプログラム実行に関連した画像の表示や音の出力に用いたり、情報提供サーバから受信した情報を表示したりするときにも用いられる。 The output unit composed of an output device or the like including the liquid crystal display (LCD) 27 and the speaker 28 displays a Web page screen received via the mobile phone communication network 10 on the liquid crystal display (LCD) 27, It is used when notifying the user that information has been received from the mobile phone communication network 10. Specifically, when the information is received, an incoming call notification image is displayed on the liquid crystal display (LCD) 27 of the output unit, or a ringing tone is output from the speaker 28. The output unit is also used when displaying an image or sound related to the execution of the application program such as the game, or when displaying information received from the information providing server. It is done.

上記メモリーカードドライブ装置２０７は、メモリーカード２９を着脱可能にするための機構を有するとともに、メモリーカード２９の電極端子に接触する端子を介してデータ送受信するインターフェース部を有している。 The memory card drive device 207 has a mechanism for making the memory card 29 detachable, and has an interface unit for transmitting and receiving data via a terminal that contacts the electrode terminal of the memory card 29.

上記撮像デバイス２０８としては、例えばＣＣＤ（Charge Coupled Device）カメラやＣＭＯＳカメラを用いることができる。また、使用環境に応じて、信号処理機能を備えた高速撮像が可能な人工網膜カメラや、赤外線やガンマ線等の可視光線以外の波長領域に感度を有するカメラを用いてもよい。この撮像デバイス２０８のカメラレンズ部３０は、液晶ディスプレイ（ＬＣＤ）２７がある前面とは反対側の背面に設けられている。この撮像デバイス２０８は、人物や風景等の画像を撮影したり、接写機能によりコード画像を撮影したりするときに用いられる。 As the imaging device 208, for example, a CCD (Charge Coupled Device) camera or a CMOS camera can be used. Further, an artificial retinal camera having a signal processing function and capable of high-speed imaging, or a camera having sensitivity in a wavelength region other than visible light rays such as infrared rays and gamma rays may be used depending on the use environment. The camera lens unit 30 of the imaging device 208 is provided on the back surface opposite to the front surface where the liquid crystal display (LCD) 27 is located. The imaging device 208 is used when shooting an image of a person or landscape, or shooting a code image using a close-up function.

図４は、本実施形態に係る携帯電話機２０の主要部を抽出して示した機能ブロック図であり、図５は、その携帯電話機２０におけるソフトウェア構造の説明図である。
この携帯電話機２０は、アプリケーションプログラム実行管理手段（アプリケーションプログラム実行管理部）２１１と、画像を表示するための表示手段２１２と、表示手段２１２を制御する画像表示制御手段２１３と、画像変換処理手段２１４とを有している。これらの複数の手段のうち、表示手段２１２、画像表示制御手段２１３及び画像変換処理手段２１４は、携帯電話機のネイティブ側の電話機プラットフォーム２１０内に設けられている。また、携帯電話機２０は、ＣＰＵ等からなるハードウェア上で所定のプログラムを実行することにより、アプリケーションプログラム実行管理手段２１１、画像表示制御手段２１３及び画像変換処理手段２１４の各機能を実現している。 FIG. 4 is a functional block diagram showing an extracted main part of the mobile phone 20 according to the present embodiment, and FIG. 5 is an explanatory diagram of a software structure in the mobile phone 20.
The cellular phone 20 includes an application program execution management unit (application program execution management unit) 211, a display unit 212 for displaying an image, an image display control unit 213 for controlling the display unit 212, and an image conversion processing unit 214. And have. Among these means, the display means 212, the image display control means 213, and the image conversion processing means 214 are provided in the telephone platform 210 on the native side of the mobile phone. The mobile phone 20 implements the functions of the application program execution management unit 211, the image display control unit 213, and the image conversion processing unit 214 by executing predetermined programs on hardware such as a CPU. .

上記アプリケーションプログラム実行管理手段２１１は、上述のシステムバス２００、ＣＰＵ２０１やＲＡＭ２０２等で構成されている。このアプリケーションプログラム実行管理手段２１１は仮想マシンとも呼ばれ、図５のソフトウェア構造上において中央の「プログラム実行環境」に対応している。アプリケーションプログラム実行管理手段２１１は、オブジェクト指向プログラミングで開発されたアプリケーションプログラムに利用されるクラスライブラリ、実行環境管理ライブラリ、アプリケーション管理等のソフトウェアを提供し、アプリケーションプログラムの実行環境を管理する。
ここで、アプリケーションプログラムは、クラスライブラリＡＰＩ（アプリケーションインターフェース）を介して上記プログラム実行環境内にある関数等のクラスライブラリを呼び出して使用できるようになっている。この関数等のクラスライブラリの呼び出しの履歴は、アプリケーションプログラムの仮想的な実行環境（仮想マシンＶＭ）が終了するまで保持される。
また、プログラム実行環境内の実行環境管理ライブラリは、電話機プラットフォームＡＰＩを介して後述の電話機プラットフォーム内の電話機プラットフォームライブラリを呼び出して使用できるようになっている。 The application program execution management unit 211 includes the system bus 200, the CPU 201, the RAM 202, and the like. This application program execution management means 211 is also called a virtual machine and corresponds to the central “program execution environment” in the software structure of FIG. The application program execution management unit 211 provides software such as a class library, an execution environment management library, and application management used for an application program developed by object-oriented programming, and manages the execution environment of the application program.
Here, the application program can be used by calling a class library such as a function in the program execution environment via a class library API (application interface). The call history of the class library such as this function is held until the virtual execution environment (virtual machine VM) of the application program is terminated.
The execution environment management library in the program execution environment can be used by calling a telephone platform library in the telephone platform described later via the telephone platform API.

また、上記アプリケーションプログラム実行管理手段２１１は、表示手段２１２の画面に画像を表示するための描画データを一時的に記憶するための描画データ記憶部２１１ａと、画像変換処理可能な画像データを記憶するための画像データ記憶部２１１ｂとを有している。これらの描画データ記憶部２１１ａ及び画像データ記憶部２１１ｂは、アプリケーションプログラム実行管理手段２１１で使用されるヒープメモリと呼ばれるメモリ領域内に設定される。描画データ記憶部２１１ａに保存される描画データは、表示手段２１２の画面における画像の表示に直接用いられるデータであり、画面の各画素に対応する複数のデータから構成される。 The application program execution management unit 211 stores a drawing data storage unit 211a for temporarily storing drawing data for displaying an image on the screen of the display unit 212, and image data that can be subjected to image conversion processing. An image data storage unit 211b. The drawing data storage unit 211a and the image data storage unit 211b are set in a memory area called a heap memory used by the application program execution management unit 211. The drawing data stored in the drawing data storage unit 211a is data directly used for displaying an image on the screen of the display unit 212, and is composed of a plurality of data corresponding to each pixel of the screen.

上記表示手段２１２は、液晶ディスプレイ（ＬＣＤ）２７で構成され、各種画像を表示することができる。例えば、移動体通信端末内の内部メモリ（ＲＡＭ２０２）に保存されている画像データや、メモリーカード２９などの外部記憶装置に保存されている画像データに対応する画像を表示することができる。また、撮像デバイス２０８で撮影した画像や、携帯電話通信網１０を介してアクセス可能なＷｅｂサーバ１２等に保存されている画像データに対応する画像を表示することもできる。さらに、アプリケーションプログラム実行管理手段２１１で実行しているアプリケーションプログラムに組み込まれている画像データに対応する画像や、後述の変換処理を行った後の画像を表示することもできる。 The display unit 212 includes a liquid crystal display (LCD) 27 and can display various images. For example, an image corresponding to image data stored in an internal memory (RAM 202) in the mobile communication terminal or image data stored in an external storage device such as the memory card 29 can be displayed. It is also possible to display an image taken by the imaging device 208 or an image corresponding to image data stored in the Web server 12 accessible via the mobile phone communication network 10. Furthermore, an image corresponding to image data incorporated in an application program executed by the application program execution management unit 211 and an image after a conversion process described later can be displayed.

上記画像表示制御手段２１３は、上述のシステムバス２００、ＣＰＵ２０１やＲＡＭ２０２等で構成されている。この画像表示制御手段２１３は、アプリケーションプログラム実行管理手段２１１から受けた画像表示指令に基づいて、上記アプリケーションプログラム実行管理手段２１１の描画データ記憶部２１１ａに保存されている描画データに基づいて表示手段２１２を制御し、その描画データからなる画像を表示手段２１２に表示する。 The image display control unit 213 includes the system bus 200, the CPU 201, the RAM 202, and the like. The image display control unit 213 displays the display unit 212 based on the drawing data stored in the drawing data storage unit 211a of the application program execution management unit 211 based on the image display command received from the application program execution management unit 211. And an image made up of the drawing data is displayed on the display means 212.

上記画像変換処理手段２１４は、上述のシステムバス２００、ＣＰＵ２０１やＲＡＭ２０２等で構成されている。この画像変換処理手段２１４は、上記アプリケーションプログラム実行管理手段２１１の画像データ記憶部２１１ｂから読み出された画像データに対して各種の画像変換処理を実行するものである。画像変換処理手段２１４で画像変換処理を行った後の画像データは、再びアプリケーションプログラム実行管理手段２１１に戻される。アプリケーションプログラム実行管理手段２１１に戻された画像データは、画像変換処理の種類に応じて、画像データ記憶部２１１ｂに再び保存した後に描画データの生成に用いられたり、画像データ記憶部２１１ｂに保存せずに描画データの生成に直接用いられたりする。 The image conversion processing unit 214 includes the system bus 200, the CPU 201, the RAM 202, and the like. The image conversion processing unit 214 executes various image conversion processes on the image data read from the image data storage unit 211b of the application program execution management unit 211. The image data after the image conversion processing by the image conversion processing unit 214 is returned to the application program execution management unit 211 again. Depending on the type of image conversion processing, the image data returned to the application program execution management unit 211 can be used to generate drawing data after being stored again in the image data storage unit 211b or stored in the image data storage unit 211b. Without being directly used to generate drawing data.

上記画像変換処理手段２１４で実行可能な画像変換処理としては、描画系の画像変換処理とエフェクト系の画像変換処理とがある。
図６（ａ）〜（ｈ）は描画系の画像変換処理を示す説明図である。描画系の画像変換処理としては、図６に示すように、上下の反転処理、左右の反転処理、回転処理、拡大処理、縮小処理、及び擬似半透明処理がある。これらの画像変換処理のうち擬似半透明処理は、予め設定した透過マスクパターンを用いて画像を部分的に非表示化する処理である。図６（ｇ）に示す擬似半透明処理の例は、一つの画像を４×４の升目状の区画に分割し、これらの複数の区画の一つおきに、元の画像分を表示する表示部分と、元の画像分を表示しない非表示部分とを繰り返すように処理するものである。図６（ｈ）に示す擬似半透明処理の例は、図６（ｇ）に示す擬似半透明処理における表示部分と非表示部分とを入れ替えた例である。 Image conversion processing that can be executed by the image conversion processing unit 214 includes drawing-type image conversion processing and effect-type image conversion processing.
FIGS. 6A to 6H are explanatory diagrams showing a drawing-type image conversion process. As the drawing-type image conversion process, as shown in FIG. 6, there are a vertical inversion process, a horizontal inversion process, a rotation process, an enlargement process, a reduction process, and a pseudo-translucent process. Among these image conversion processes, the pseudo-translucent process is a process of partially hiding an image using a preset transmission mask pattern. In the example of the pseudo-translucent process shown in FIG. 6G, a single image is divided into 4 × 4 grid-like sections, and the original image is displayed in every other one of the plurality of sections. Processing is performed so that the portion and the non-display portion that does not display the original image are repeated. The example of the pseudo-translucent process illustrated in FIG. 6H is an example in which the display part and the non-display part in the pseudo-translucent process illustrated in FIG.

表１は、上記プログラム実行環境内のクラスライブラリに登録されている描画系の画像変換処理用のクラス（GraphicsUtil）で定義されたメソッドの一部を例示したものである。メソッド１は、上記拡大処理及び縮小処理に対応するものであり、Imageオブジェクト内の短形領域をコピーし、伸縮する変換処理を行う。また、メソッド２は、上記擬似半透明処理に対応するものであり、Imageオブジェクトに透過マスクパターンをタイル化して描画する変換処理を行う。

Table 1 exemplifies a part of methods defined in a drawing image conversion processing class (GraphicsUtil) registered in the class library in the program execution environment. Method 1 corresponds to the enlargement process and the reduction process, and performs a conversion process of copying and expanding / contracting the short area in the Image object. Method 2 corresponds to the above-described pseudo-translucent process, and performs a conversion process in which a transparent mask pattern is tiled and drawn on an Image object.

また、上記エフェクト系の画像変換処理としては、明度調整処理、色調反転処理、モノクロ処理、グレースケール処理、単色カラー処理及び透過画像処理がある。
明度調整処理は、元の画像の明度すなわち明るさを変化させる処理である。色調反転処理は、元の画像の階調すなわち色の明るさ（暗さ）と色相とを同時に反転させる処理である。例えば、元の画像が肌色の場合は青色の画像に変換し、元の画像がモノクロ画像の場合はネガポジ反転された画像に変換します。モノクロ処理は、元の画像をモノクロ２階調に２値化した画像に変換する処理である。グレースケール処理は、元の画像を３階調以上の多階調（例えば２５６階調）のモノクロ画像に変換する処理である。単色カラー処理は、元の画像を赤色や青色等の単色の画像に変換する処理である。透過画像処理は、元の画像と透過マスク画像とを合成した合成画像に変換する処理である。 The effect-based image conversion processing includes brightness adjustment processing, color tone inversion processing, monochrome processing, gray scale processing, single color processing, and transmission image processing.
The brightness adjustment process is a process of changing the brightness, that is, the brightness of the original image. The tone reversal process is a process of reversing the gradation of the original image, that is, the brightness (darkness) of the color and the hue at the same time. For example, if the original image is flesh-colored, it will be converted to a blue image. If the original image is a monochrome image, it will be converted to a negative / positive inverted image. The monochrome process is a process of converting an original image into an image binarized into monochrome two gradations. The gray scale process is a process of converting the original image into a monochrome image having multiple gradations (for example, 256 gradations) of three gradations or more. The single color process is a process for converting an original image into a single color image such as red or blue. The transmission image process is a process of converting the original image and the transmission mask image into a combined image.

表２は、上記プログラム実行環境内のクラスライブラリに登録されているエフェクト系の画像変換処理用のクラス（ImageUtil）で定義されたメソッドを例示したものである。

Table 2 exemplifies methods defined in an effect image conversion processing class (ImageUtil) registered in the class library in the program execution environment.

画像変換処理手段２１４は、アプリケーションプログラム実行管理手段２１１から受けた変換内容指定情報に基づいて、上記描画系の画像変換処理とエフェクト系の画像変換処理とからなる複数の画像変換処理の少なくとも一つを選択的に実行することができる。 The image conversion processing unit 214 is based on the conversion content designation information received from the application program execution management unit 211, and is at least one of a plurality of image conversion processes including the drawing-type image conversion process and the effect-type image conversion process. Can be selectively executed.

また、本実施形態の携帯電話機は図示しない主制御部を備えている。この主制御部は、アプリケーションプログラム実行管理手段２１１や他の各部との間で制御命令や各種データのやりとりを行い、これらと協働して制御を行う。また、主制御部は、図５のソフトウェア構造上において最下部の「電話機プラットフォーム」にあり、上記電話通信等を制御するための制御用プログラムやユーザインターフェースを実行したり、電話機プラットフォームライブラリを提供したりする。この電話機プラットフォームは、上記プログラム実行環境内の実行環境管理ライブラリに対してイベントを送ることによりアプリケーションプログラムにおける各種処理を実行したり、アプリケーション管理ＡＰＩを介して上記プログラム実行環境内のアプリケーション管理のソフトウェアを呼び出して使用したりできるようになっている。 In addition, the mobile phone of this embodiment includes a main control unit (not shown). The main control unit exchanges control commands and various data with the application program execution management unit 211 and other units, and performs control in cooperation with them. The main control unit is located in the lowermost “telephone platform” in the software structure of FIG. 5 and executes a control program and a user interface for controlling the above telephone communication and provides a telephone platform library. Or The telephone platform executes various processes in the application program by sending an event to the execution environment management library in the program execution environment, and the application management software in the program execution environment via the application management API. It can be called and used.

携帯電話機２０を所定の手順に従って動作させる電話機プラットフォームを構築するための制御用プログラムは、ＲＡＭ２０２やＲＯＭ２０３に記憶されている。また、基本ＯＳ（オペレーティングシステム）のプログラムや、上記プログラム実行環境を構築するためのプログラム及びアプリケーションプログラムも、ＲＡＭ２０２やＲＯＭ２０３に記憶されている。そして、これらのプログラムは、必要に応じてＣＰＵ２０１やＲＡＭ２０２中の作業エリアに呼び出されて実行される。 A control program for constructing a telephone platform for operating the mobile telephone 20 according to a predetermined procedure is stored in the RAM 202 and the ROM 203. Further, a basic OS (operating system) program, a program for constructing the program execution environment, and an application program are also stored in the RAM 202 and the ROM 203. These programs are called up and executed in the work area in the CPU 201 or RAM 202 as necessary.

上記構成の携帯電話機２０において、ダウンロードサーバ１１からアプリケーションプログラムをダウンロードするときは、ユーザー１は、操作部のキーを操作して、ダウンロードサーバ１１にアクセスする。これにより、ダウンロード可能なアプリケーションプログラムを選択するためのダウンロード選択画面がディスプレイ２７上に表示される。そして、そのダウンロード選択画面において、ユーザーが希望するアプリケーションプログラムをスクロールキー２４を用いて選択し、多機能キー２５を押下すると、主制御部が携帯電話通信網用通信装置２０６を制御して、そのアプリケーションプログラムをダウンロードサーバ１１からダウンロードする。
具体的に説明すると、本実施形態において、アプリケーションプログラムは、プロパティ情報であるＪＡＤファイル（テキストデータ）とプログラム本体であるＪＡＲファイル（バイナリデータ）とからなる。ＪＡＤファイルには、アプリケーション名、アプリケーションのバージョン、アプリケーションのベンダー名、ＪＡＲファイルが保存されているＵＲＬデータなどの基本データのほか、当該アプリケーションプログラムが認証済みのものか、当該アプリケーションプログラムがネットワークに接続した状態で使用されるものか、当該アプリケーションプログラムが常駐型のものであるかなどの設定データが含まれている。また、このＪＡＤファイルには、当該アプリケーションプログラムに関する関連情報を公開している公式ＷｅｂページのＵＲＬ（配信元アドレスデータ）も含まれている。そして、上記ダウンロード選択画面においてユーザーが希望するアプリケーションプログラムが選択されると、アプリケーションプログラムのうちＪＡＤファイルだけをダウンロードする。その後、主制御部２１０は、そのＪＡＤファイルの中から、ＪＡＲファイルが保存されているＵＲＬデータを読み出し、そのＵＲＬにアクセスし、ＪＡＲファイルをダウンロードする。このようにしてダウンロードされたＪＡＤファイル及びＪＡＲファイルからなるアプリケーションプログラムは、主制御部２１０により、ＲＡＭ１０２に記憶される。 When downloading an application program from the download server 11 in the mobile phone 20 having the above configuration, the user 1 accesses the download server 11 by operating a key of the operation unit. As a result, a download selection screen for selecting a downloadable application program is displayed on the display 27. In the download selection screen, when the user selects an application program desired by the scroll key 24 and presses the multi-function key 25, the main control unit controls the mobile phone communication network communication device 206, An application program is downloaded from the download server 11.
Specifically, in the present embodiment, the application program is composed of a JAD file (text data) that is property information and a JAR file (binary data) that is a program body. The JAD file includes application data, application version, application vendor name, basic data such as URL data where the JAR file is stored, and whether the application program has already been authenticated, or the application program is connected to the network. This includes setting data such as whether the application program is used in a state in which the application program is used or whether the application program is resident. The JAD file also includes the URL (distribution source address data) of an official Web page that publishes related information related to the application program. When the application program desired by the user is selected on the download selection screen, only the JAD file is downloaded from the application program. Thereafter, the main control unit 210 reads URL data in which the JAR file is stored from the JAD file, accesses the URL, and downloads the JAR file. The application program composed of the JAD file and the JAR file downloaded in this manner is stored in the RAM 102 by the main control unit 210.

このようにしてダウンロードしたアプリケーションプログラムを実行する場合、ユーザー１は、操作部のキーを操作して、実行するアプリケーションプログラムを選択するためのアプリケーション選択画面をディスプレイ２７上に表示させる。そして、そのアプリケーション選択画面において、ユーザーが希望するアプリケーションプログラムをスクロールキー２４を用いて選択し、多機能キー２５を押下すると、上記アプリケーションプログラム実行管理手段（アプリケーションプログラム管理部）２１１は、ＪＡＲファイルを読み出してアプリケーションプログラムを起動する。このとき、必要に応じて、ＪＡＤファイルの設定データを参照し、その設定データに従った処理動作を行う環境を設定する。また、アプリケーションプログラム実行中に特定の処理動作を行う際、その処理動作に関するＪＡＤファイルの設定データを参照し、そのアプリケーションプログラムに適した処理動作を行うようにする。アプリケーションプログラムとしては、操作部の各種キーを操作してゲーム等を楽しむアプリケーションプログラムのほか、ディスプレイ２７上に３次元動画からなる待ち受け画面を表示させたりする常駐型のアプリケーションプログラムなど、あらゆるアプリケーションプログラムが含まれる。 When executing the application program downloaded in this way, the user 1 operates the keys of the operation unit to display an application selection screen for selecting an application program to be executed on the display 27. When the user selects an application program desired by the scroll key 24 on the application selection screen and presses the multi-function key 25, the application program execution management means (application program management unit) 211 reads the JAR file. Read and start application program. At this time, if necessary, the setting data of the JAD file is referred to and an environment for performing the processing operation according to the setting data is set. Further, when a specific processing operation is performed during execution of the application program, the setting operation of the JAD file related to the processing operation is referred to perform a processing operation suitable for the application program. As application programs, various application programs such as an application program for operating a variety of keys on the operation unit to enjoy a game or the like, and a resident application program for displaying a standby screen made up of a three-dimensional video on the display 27 are available. included.

次に、本発明の特徴部分である画像変換機能について説明する。
図７は、アプリケーションプログラムの実行中に描画系の画像変換処理を行って画像を表示するときの処理の一例を示すシーケンス図である。
ユーザーは、携帯電話機２０の表示手段２１２（液晶ディスプレイ２７）に表示したアプリケーションプログラムのリストから希望のアプリケーションプログラムを選択して実行することができる。このアプリケーションプログラムは、その実行中に画像表示及び画像変換を伴うような画像編集やゲームなどのプログラムである。
まず、上記アプリケーションプログラムの実行中において表示手段２１２に表示する画像の変換処理を行うときは、表示手段２１２に画像変換対象の画像が表示される。具体的には、実行中のアプリケーションプログラム中の画像表示指令に基づいて、画像表示用クラスで定義されている画像表示用メソッドが呼び出される。この画像表示用メソッドは、画像オブジェクト生成メソッドと描画メソッドとにより構成されている。画像オブジェクト生成メソッドは、表示対象の画像ファイルについて画像オブジェクトを生成する。この画像オブジェクトは、変換処理可能な画像データを含み、前述のアプリケーションプログラム実行管理手段２１１内のヒープメモリの一部である画像データ記憶部２１１ａ内に設定される。描画メソッドは、上記画像オブジェクトについて描画データを生成し、電話機プラットフォームＡＰＩを介して電話機プラットフォーム（ネイテブ）側の描画機能を実行する。電話機プラットフォーム側の画像表示制御手段２１３は、アプリケーションプログラム実行管理手段２１１の描画データ記憶部２１１ａにある描画データに基づいて表示手段２１２を制御する。この制御により、変換処理対象の画像が表示手段２１２に表示される。
次に、表示手段２１２に表示されている画像に対して、拡大・縮小等の描画系の画像変換処理を行うときは、実行中のアプリケーションプログラム中の画像変換指令に基づいて、描画系の画像変換処理用のクラス（GraphicsUtil）で定義されている特定の描画系画像変換用のメソッドが呼び出される。この描画系画像変換用のメソッドは、電話機プラットフォームＡＰＩを介して電話機プラットフォーム（ネイティブ）側の画像変換処理手段２１４に変換内容指定情報を送り、画像変換処理手段２１４による変換処理機能を実行する。画像変換処理手段２１４は、変換内容指定情報に基づいて、アプリケーションプログラム実行管理手段２１１の画像データ記憶部２１１ｂにある画像データに対して所定の画像変換処理を行う。変換処理後の画像データは、アプリケーションプログラム実行管理手段２１１に戻される。
アプリケーションプログラム実行管理手段２１１は、変換処理後の画像データを画像データ記憶部２１１ｂに保存せずに、変換処理後の画像データから描画データを生成し、描画データ記憶部２１１ａに保存する。そして、アプリケーションプログラム実行管理手段２１１は、電話機プラットフォームＡＰＩを介して電話機プラットフォーム（ネイティブ）側の描画機能を実行する。電話機プラットフォーム側の画像表示制御手段２１３は、アプリケーションプログラム実行管理手段２１１の描画データ記憶部２１１ａにある描画データに基づいて表示手段２１２を制御する。この制御により、変換処理後の画像が表示手段２１２に表示される。 Next, the image conversion function which is a characteristic part of the present invention will be described.
FIG. 7 is a sequence diagram showing an example of processing when displaying an image by performing drawing-type image conversion processing during execution of the application program.
The user can select and execute a desired application program from the list of application programs displayed on the display unit 212 (liquid crystal display 27) of the mobile phone 20. This application program is a program such as image editing or a game that involves image display and image conversion during execution.
First, when performing conversion processing of an image to be displayed on the display unit 212 during execution of the application program, an image to be converted is displayed on the display unit 212. Specifically, an image display method defined in the image display class is called based on an image display command in the application program being executed. This image display method includes an image object generation method and a drawing method. The image object generation method generates an image object for an image file to be displayed. This image object includes image data that can be converted, and is set in the image data storage unit 211a that is a part of the heap memory in the application program execution management unit 211 described above. The drawing method generates drawing data for the image object, and executes a drawing function on the telephone platform (native) side via the telephone platform API. The image display control unit 213 on the telephone platform side controls the display unit 212 based on the drawing data in the drawing data storage unit 211a of the application program execution management unit 211. By this control, an image to be converted is displayed on the display unit 212.
Next, when drawing-type image conversion processing such as enlargement / reduction is performed on the image displayed on the display unit 212, a drawing-type image is based on an image conversion command in the application program being executed. A specific drawing system image conversion method defined in the conversion processing class (GraphicsUtil) is called. This drawing image conversion method sends the conversion content designation information to the image conversion processing unit 214 on the telephone platform (native) side via the telephone platform API, and executes the conversion processing function by the image conversion processing unit 214. The image conversion processing unit 214 performs a predetermined image conversion process on the image data in the image data storage unit 211b of the application program execution management unit 211 based on the conversion content designation information. The converted image data is returned to the application program execution management unit 211.
The application program execution management unit 211 generates drawing data from the image data after conversion processing without saving the converted image data in the image data storage unit 211b, and stores the drawing data in the drawing data storage unit 211a. The application program execution management unit 211 executes a drawing function on the telephone platform (native) side via the telephone platform API. The image display control unit 213 on the telephone platform side controls the display unit 212 based on the drawing data in the drawing data storage unit 211a of the application program execution management unit 211. By this control, the converted image is displayed on the display unit 212.

図８は、アプリケーションプログラムの実行中にエフェクト系の画像変換処理を行って画像を表示するときの処理を示すシーケンス図である。
まず、アプリケーションプログラムの実行中において表示手段２１２に表示する画像の変換処理を行うときは、上記図７の場合と同様に表示手段２１２に画像変換対象の画像が表示される。
次に、表示手段２１２に表示されている画像に対して、明度調整等のエフェクト系の画像変換処理を行うときは、実行中のアプリケーションプログラム中の画像変換指令に基づいて、エフェクト系の画像変換処理用のクラス（ImageUtil）で定義されている特定のエフェクト系画像変換用のメソッドが呼び出される。このエフェクト系画像変換用のメソッドは、電話機プラットフォームＡＰＩを介して電話機プラットフォーム（ネイティブ）側の画像変換処理手段２１４に変換内容指定情報を送り、画像変換処理手段２１４による変換処理機能を実行する。画像変換処理手段２１４は、変換内容指定情報に基づいて、アプリケーションプログラム実行管理手段２１１の画像データ記憶部２１１ｂにある画像データに対して所定の画像変換処理を行う。変換処理後の画像データは、アプリケーションプログラム実行管理手段２１１に戻され、変換処理後の画像データとして画像データ記憶部２１１ｂに保存される。
アプリケーションプログラム実行管理手段２１１は、画像データ記憶部２１１ｂに変換処理後の画像データを保存した後、画像変換処理指令による変換結果をアプリケーションプログラムに通知する。変換通知を受けたアプリケーションプログラムは、変換処理後の画像データが、以後画像表示を行なう対象の画像データであることを認識するとともに、再度アプリケーションプログラム実行管理手段２１１に対して画像表示を指令する。
画像表示指令を受けたアプリケーションプログラム実行管理手段２１１は、画像データ記憶部２１１ｂに保存されている変換処理後の画像データから描画データを生成し、描画データ記憶部２１１ａに保存する。そして、アプリケーションプログラム実行管理手段２１１は、電話機プラットフォームＡＰＩを介して電話機プラットフォーム（ネイティブ）側の描画機能を実行する。電話機プラットフォーム側の画像表示制御手段２１３は、アプリケーションプログラム実行管理手段２１１の描画データ記憶部２１１ａにある描画データに基づいて表示手段２１２を制御する。この制御により、変換処理後の画像が表示手段２１２に表示される。 FIG. 8 is a sequence diagram showing processing when an effect type image conversion process is performed and an image is displayed during execution of the application program.
First, when performing conversion processing of an image to be displayed on the display unit 212 during execution of the application program, an image to be converted is displayed on the display unit 212 as in the case of FIG.
Next, when effect-type image conversion processing such as brightness adjustment is performed on the image displayed on the display unit 212, the effect-type image conversion is performed based on the image conversion command in the application program being executed. A specific effect system image conversion method defined in the processing class (ImageUtil) is called. This effect system image conversion method sends conversion content designation information to the image conversion processing unit 214 on the telephone platform (native) side via the telephone platform API, and executes the conversion processing function by the image conversion processing unit 214. The image conversion processing unit 214 performs a predetermined image conversion process on the image data in the image data storage unit 211b of the application program execution management unit 211 based on the conversion content designation information. The image data after the conversion process is returned to the application program execution management unit 211, and is stored in the image data storage unit 211b as the image data after the conversion process.
The application program execution management unit 211 stores the image data after the conversion process in the image data storage unit 211b, and then notifies the application program of the conversion result based on the image conversion process command. Upon receiving the conversion notification, the application program recognizes that the image data after the conversion processing is the image data to be displayed thereafter, and instructs the application program execution management unit 211 to display the image again.
Receiving the image display command, the application program execution management unit 211 generates drawing data from the converted image data stored in the image data storage unit 211b and stores the drawing data in the drawing data storage unit 211a. The application program execution management unit 211 executes a drawing function on the telephone platform (native) side via the telephone platform API. The image display control unit 213 on the telephone platform side controls the display unit 212 based on the drawing data in the drawing data storage unit 211a of the application program execution management unit 211. By this control, the converted image is displayed on the display unit 212.

以上、本実施形態によれば、実行中のアプリケーションプログラムで指定された変換内容指定情報に基づいて、従来の反転処理及び回転処理のほかに拡大処理、縮小処理及び擬似半透明処理を含む複数の描画系の画像変換処理の中から少なくとも一つを選択して実行し、その変換後の画像を表示手段２１２に表示することができる。
更に、実行中のアプリケーションプログラムで指定された変換内容指定情報に基づいて、上記複数の描画系の画像変換処理のほかに明度調整処理、色調反転処理、モノクロ処理、グレースケール処理、単色カラー処理及び透過画像処理の複数のエフェクト系の画像変換処理を含む複数の画像変換処理の中から少なくとも一つを選択して実行し、その変換後の画像を表示手段２１２に表示することもできる。
特に、本実施形態によれば、上記拡大・縮小等の描画系の画像変換処理を伴う第一の処理では、変換後の画像データを画像データ記憶部２１１ｂに保存せずに変換後の画像データから描画データを生成する。従って、アプリケーションプログラムの実行中にリアルタイムに画像を変化させるときに画像変換から画像表示までの処理を高速に行うことができる。また、上記明度調整等のエフェクト系の画像変換処理を伴う第二の処理では、変換後の画像データを画像データ記憶部２１１ｂに一旦保存した後、その画像データ記憶部２１１ｂから読み出した変換後の画像データから描画データを生成する。従って、画像データ記憶部２１１ｂに保存されている変換後の画像データを、再変換処理対象の画像のデータとして用いることができる。 As described above, according to the present embodiment, based on the conversion content designation information designated by the application program being executed, a plurality of processes including the enlargement process, the reduction process, and the pseudo-translucent process in addition to the conventional inversion process and rotation process. At least one of the drawing-type image conversion processes can be selected and executed, and the converted image can be displayed on the display unit 212.
Furthermore, based on the conversion content designation information designated by the application program being executed, in addition to the above-described image conversion processing of the plurality of drawing systems, brightness adjustment processing, color tone inversion processing, monochrome processing, gray scale processing, single color processing, and It is also possible to select and execute at least one of a plurality of image conversion processes including a plurality of effect image conversion processes of the transparent image process, and display the converted image on the display means 212.
In particular, according to the present embodiment, in the first process involving the drawing-type image conversion process such as enlargement / reduction, the converted image data is not stored in the image data storage unit 211b. Generate drawing data from Therefore, when changing an image in real time during execution of an application program, processing from image conversion to image display can be performed at high speed. Further, in the second process involving the effect-type image conversion process such as brightness adjustment, the converted image data is temporarily stored in the image data storage unit 211b and then converted and read from the image data storage unit 211b. Drawing data is generated from image data. Therefore, the converted image data stored in the image data storage unit 211b can be used as data of an image to be reconverted.

なお、上記実施形態では、ＪＡＶＡ（登録商標）等のプログラム言語を用いたプラットフォームに依存しないオブジェクト指向のプログラミングで開発されたアプリケーションプログラムを実行できる携帯電話機について説明したが、本発明は、携帯電話機で実行するアプリケーションプログラムの種類に限定されることなく適用でき、同様な効果が得られるものである。
また、本発明は、アプリケーションプログラムを実行可能なものであれば、ＰＨＳ、自動車電話機等の電話機のほか、携帯型のＰＤＡの場合についても適用でき、同様な効果が得られるものである。 In the above embodiment, a mobile phone that can execute an application program developed by platform-independent object-oriented programming using a program language such as JAVA (registered trademark) has been described. However, the present invention is not limited to a mobile phone. The present invention can be applied without being limited to the type of application program to be executed, and the same effect can be obtained.
Further, the present invention can be applied to a portable PDA in addition to a telephone such as a PHS or a car phone as long as it can execute an application program, and the same effect can be obtained.

本発明の実施形態に係る携帯電話機を用いた移動体通信システムの主要部を示す説明図。BRIEF DESCRIPTION OF THE DRAWINGS Explanatory drawing which shows the principal part of the mobile communication system using the mobile telephone which concerns on embodiment of this invention. 同携帯電話機の外観図。External view of the mobile phone. 同携帯電話機のハードウェア構成を示す概略構成図。The schematic block diagram which shows the hardware constitutions of the mobile phone. 同携帯電話機の主要部を抽出して示した機能ブロック図。The functional block diagram which extracted and showed the principal part of the mobile phone. 同携帯電話機におけるソフトウェア構造の説明図。Explanatory drawing of the software structure in the mobile phone. （ａ）は画像変換処理前の画像の表示形態の説明図。（ｂ）〜（ｈ）はそれぞれ、（ａ）の画像について描画系の画像変換処理を行った後の画像の表示形態を例示する説明図。(A) is explanatory drawing of the display form of the image before an image conversion process. (B)-(h) is explanatory drawing which illustrates the display form of the image after performing the drawing type image conversion process about the image of (a), respectively. アプリケーションプログラムの実行中に描画系の画像変換処理を行って画像を表示するときの処理を示すシーケンス図。The sequence diagram which shows a process when performing an image conversion process of a drawing system and displaying an image during execution of an application program. アプリケーションプログラムの実行中にエフェクト系の画像変換処理を行って画像を表示するときの処理を示すシーケンス図。The sequence diagram which shows a process when performing an effect type image conversion process and displaying an image during execution of an application program.

Explanation of symbols

１０携帯電話通信網
２０携帯電話機
２１１アプリケーションプログラム実行管理手段
２１１ａ画像データ記憶部
２１１ｂ描画データ記憶部
２１２表示手段
２１３画像表示制御手段
２１４画像変換手段 DESCRIPTION OF SYMBOLS 10 Mobile phone communication network 20 Mobile phone 211 Application program execution management means 211a Image data storage part 211b Drawing data storage part 212 Display means 213 Image display control means 214 Image conversion means

Claims

A display means for displaying an image; an image display control means for controlling the display means; and an application program execution management means for managing the execution of the application program. An image data storage unit for storing the image data and a drawing data storage unit for storing drawing data for displaying an image on the screen of the display unit, and the image display control unit includes the application program execution management unit A mobile communication terminal that controls to display an image made of drawing data stored in the drawing data storage unit on the screen of the display means based on the image display command received from
Based on the conversion content designation information received from the application program execution management means, the drawing-type image conversion processing and the effect-type image conversion are performed on the image data to be subjected to image conversion processing stored in the image data storage means. Image conversion processing means capable of executing processing,
The application program execution management means, based on the conversion contents specifying information specified by the application program in execution is capable of executing a first process with an image conversion process of the rendering system,
In the first process, the converted content designation information is sent to the image conversion processing unit, and the converted image data returned from the image conversion processing unit is not stored in the image data storage unit, mobile communication terminal, wherein the image data and generates the drawing data is processed to be stored in the drawing data storage unit.

  The mobile communication terminal according to claim 1, wherein
  The application program execution management means performs the first process and the second process with the effect image conversion process independently of each other based on the conversion content designation information designated by the application program being executed. Is feasible,
  In the second process, the conversion content designation information is sent to the image conversion processing unit, and the converted image data returned from the image conversion processing unit is temporarily stored in the image data storage unit, and the image data storage unit A mobile communication terminal, comprising: processing for generating the drawing data from the converted image data read from a unit and storing the drawing data in the drawing data storage unit.