Nothing Special   »   [go: up one dir, main page]

JP2022065419A - 表示方法、及び表示装置 - Google Patents

表示方法、及び表示装置 Download PDF

Info

Publication number
JP2022065419A
JP2022065419A JP2020174003A JP2020174003A JP2022065419A JP 2022065419 A JP2022065419 A JP 2022065419A JP 2020174003 A JP2020174003 A JP 2020174003A JP 2020174003 A JP2020174003 A JP 2020174003A JP 2022065419 A JP2022065419 A JP 2022065419A
Authority
JP
Japan
Prior art keywords
image
area
region
handwriting input
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020174003A
Other languages
English (en)
Other versions
JP7521372B2 (ja
JP2022065419A5 (ja
Inventor
壱星 横山
Kazuhoshi Yokoyama
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2020174003A priority Critical patent/JP7521372B2/ja
Priority to CN202111191759.9A priority patent/CN114374827B/zh
Priority to US17/501,296 priority patent/US11550431B2/en
Publication of JP2022065419A publication Critical patent/JP2022065419A/ja
Publication of JP2022065419A5 publication Critical patent/JP2022065419A5/ja
Application granted granted Critical
Publication of JP7521372B2 publication Critical patent/JP7521372B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1645—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being suitable to be used in combination with an external overhead projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0428—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by sensing at the edges of the touch surface the interruption of optical paths, e.g. an illumination plane, parallel to the touch surface which may be virtual
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3188—Scale or resolution adjustment

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

【課題】手書入力の操作性を向上する。【解決手段】表示方法は、スクリーンＳＣに対する第１手書入力を受け付けることと、第１手書入力がされたスクリーンＳＣの位置を含む第１領域ＡＲ１を決定することと、第１手書入力に対応する第１画像ＰＴ１を第１領域ＡＲ１に表示することと、第１画像ＰＴ１を所定の拡大倍率で拡大した第２画像ＰＴ２を、スクリーンＳＣの第２領域ＡＲ２に表示することと、第２領域ＡＲ２において第２手書入力を受け付けることと、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率の逆数の縮小倍率で縮小した大きさで、第１画像ＰＴ１の一部として表示することと、を含む。【選択図】図９

Description

本発明は、表示方法、及び表示装置に関する。
情報処理装置等において、手書き入力を受け付ける種々の技術が開示されている。
例えば、特許文献１に記載の情報処理装置は、描画入力モードを実行している状態で、方向の異なる複数のスライド操作を検出した場合に、描画処理を実行せずに複数のスライド操作のうち一のスライド操作により指定された描画の複製を生成する。また、表示された複製を第２のスライド操作の移動量に応じて拡大する。
特開２０２０－６１１７９号公報
しかしながら、特許文献１に記載の情報処理装置では、描画された画像を複製、及び拡大するためのスライド操作が必要であるため、操作性を向上する余地がある。
本適用例の一態様に係る表示方法は、表示面に対する第１手書入力を受け付けることと、前記第１手書入力がされた前記表示面の位置を含む第１領域を決定することと、前記第１手書入力に対応する第１画像を前記第１領域に表示することと、前記第１画像を所定の拡大倍率で拡大した第２画像を、前記表示面の第２領域に表示することと、前記第２領域において第２手書入力を受け付けることと、前記第２手書入力に応じた画像を、前記第２手書入力がされた前記第２領域の位置に対応する前記第１領域の位置に、前記所定の拡大率の逆数の縮小倍率で縮小した大きさで、前記第１画像の一部として表示することと、を含む。
本適用例の別の一態様に係る表示装置は、表示面に画像を表示する表示部と、前記表示面に対する手書入力の位置を検出する検出部と、前記検出部の検出結果に基づき、前記表示面に表示する画像を制御する制御部と、を備え、前記制御部は、前記検出部の検出結果に基づいて、前記表示面に対する第１手書入力を受け付けることと、前記第１手書入力がされた前記表示面の位置を含む第１領域を決定することと、前記第１手書入力に対応する第１画像を前記第１領域に表示することと、前記第１画像を所定の拡大率で拡大した第２画像を、前記表示面の第２領域に表示することと、前記検出部の検出結果に応じて、前記第２領域において第２手書入力を受け付けることと、前記第２手書入力に応じた画像を、前記第２手書入力がされた前記第２領域の位置に対応する前記第１領域の位置に、前記所定の拡大率の逆数の縮小率で縮小した大きさで、前記第１画像の一部として表示することと、を実行する。
本実施形態に係る表示システムの一例を示す斜視図。 表示システムの構成の一例を示す正面図。 表示システムの構成の一例を示す側面図。 本実施形態に係るプロジェクターの構成の一例を示す図。 制御部の処理の第１具体例を示す図。 制御部の処理の第２具体例を示す図。 制御部の処理の第３具体例を示す図。 制御部の処理の第４具体例を示す図。 制御部の処理の一例を示すフローチャート。
以下、図面を参照して実施形態について説明する。
まず、図１から図３を参照して、本実施形態に係る表示システム９００の構成について説明する。図１は、本実施形態に係る表示システム９００の一例を示す斜視図である。図２は、表示システム９００の構成の一例を示す正面図であり、図３は、表示システム９００の構成の一例を示す側面図である。
図１には、互いに直交するＸ軸、Ｙ軸及びＺ軸を示す。Ｙ軸は、鉛直方向と平行であり、Ｘ軸及びＺ軸の各々は、水平方向と平行である。図１～図３において、スクリーンＳＣはＹ軸と平行である。スクリーンＳＣに向かって立ったときに、Ｘ軸は、左右方向を示し、Ｚ軸は、前後方向を示す。Ｘ軸の正方向が右方向を示し、Ｙ軸の正方向が上方向を示し、Ｚ軸の正方向が前方向を示す。
図１に示すように、表示システム９００は、プロジェクター１００を備え、プロジェクター１００に対応する位置に、スクリーン板９２０が配置される。スクリーン板９２０の前面は、スクリーンＳＣとして使用される。本実施形態のスクリーンＳＣは、Ｘ軸と平行な長辺と、Ｙ軸に平行な短辺を有する矩形である。プロジェクター１００は、支持部材９１０によってスクリーン板９２０に対して、前方向、且つ上方向に固定されている。
なお、図１ではスクリーンＳＣを鉛直方向に沿って配置しているが、スクリーンＳＣを水平方向に沿って配置してもよい。また、本実施形態では、プロジェクター１００が平面のスクリーンＳＣに投射する場合を例示するが、投射対象はスクリーンＳＣに限らず、建物の壁面等の平面であってもよく、曲面や凹凸面であってもよい。
プロジェクター１００は、スクリーンＳＣに画像光を投射することによって、スクリーンＳＣに投射画像ＰＳを形成する。投射画像ＰＳは、プロジェクター１００によってスクリーンＳＣに投射された画像を示す。プロジェクター１００の通常の使用状態において、投射画像ＰＳはスクリーンＳＣの内側に収まるように投射される。
スクリーンＳＣは、「表示面」の一例である。
投射画像ＰＳは、例えば、プロジェクター１００が生成する画像データに基づき投射される画像である。本実施形態では、画像データは、指示体８０による手書き入力に基づいて、プロジェクター１００が生成する。
本実施形態では、投射画像ＰＳは、例えば、手書きのテキスト画像ＴＸと、枠画像ＰＬとを含む。テキスト画像ＴＸ、及び枠画像ＰＬについては、図５及び図６を参照して説明する。
また、表示システム９００では、スクリーンＳＣにおいて、指示体８０によって位置指示操作を行うことができ、指示体８０によって指示された指示位置をプロジェクター１００が検出する。指示体８０は、ペンや、ユーザーの手指等である。
本実施形態では、指示体８０がユーザーの手指である場合について説明する。
プロジェクター１００は、投射光学系２３０と、カメラ３１０を含む撮像部３００と、検出光射出部４１０とを有する。投射光学系２３０は、投射画像ＰＳをスクリーンＳＣに投射する。カメラ３１０は、投射画像ＰＳを撮像し、撮像画像ＰＭを出力する。カメラ３１０の画角、すなわち撮像範囲は、スクリーンＳＣにおいて、少なくとも投射画像ＰＳを含む範囲である。投射光学系２３０の投射レンズ、カメラ３１０の撮像レンズは、プロジェクター１００の下面に配置される。
図３に示すように、検出光射出部４１０は、指示体８０の指示位置を検出するために検出光ＩＤＬを射出する。検出光射出部４１０は、支持部材９１０又はスクリーン板９２０に固定され、スクリーンＳＣの上部に配置される。
検出光射出部４１０は、指示体８０の先端部を検出する検出光ＩＤＬを、スクリーンＳＣをカバーする方向に射出する。具体的には、検出光射出部４１０は、スクリーンＳＣに沿って面状に、検出光ＩＤＬを射出する。検出光射出部４１０が射出する検出光ＩＤＬとしては、例えば近赤外光が使用される。
検出光射出部４１０は、第１射出部４１１と、第２射出部４１２と、第１射出部４１１と第２射出部４１２の射出方向をそれぞれ調整する調整機構４２０と、を備える。
図２に示すように、第１射出部４１１は、スクリーンＳＣの右半面に沿って検出光ＩＤＬを射出し、第２射出部４１２は、スクリーンＳＣの左半面に沿って検出光ＩＤＬを射出する。第１射出部４１１及び第２射出部４１２の各々は、例えば、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等の光源と、光源が発する検出光をスクリーンＳＣに沿って拡散させて検出光ＩＤＬとして射出する光学素子とを有する。
第１射出部４１１は、角θ１の範囲に光軸を光軸ＬＣ１として面状の検出光ＩＤＬを射出し、第２射出部４１２は、角θ２の範囲に光軸を光軸ＬＣ２として面状の検出光ＩＤＬを射出する。角θ１及び角θ２の各々は、９０度より大きい。また、図２では、便宜上、第１射出部４１１と、第２射出部４１２とを離れて記載しているが、第１射出部４１１と第２射出部４１２とは近接して配置される。
その結果、検出光射出部４１０は、スクリーンＳＣの上部から下向きにほぼ１８０度の範囲に光を出射し、この光はスクリーンＳＣに沿う光の層を形成する。
図３に示すように、検出光ＩＤＬは、スクリーンＳＣの表面と光の層とは接触せず、且つ近接するように、光軸ＬＣ１が調整される。プロジェクター１００が指示体８０によって指示された指示位置を精度よく検出するためには、操作面であるスクリーンＳＣの表面と検出光ＩＤＬの光の層との距離は、短い程好ましい。一方、スクリーンＳＣの表面と検出光ＩＤＬの光の層との距離が短くなると、スクリーンＳＣの表面の凸凹や障害物による誤検出が発生するようになる。スクリーンＳＣの表面と光の層との距離は、例えば１ｍｍ～１０ｍｍの範囲内に調整される。
検出光射出部４１０が検出光ＩＤＬを射出する領域は、スクリーンＳＣにおいて、投射画像ＰＳに対応する領域であり、好ましくは投射画像ＰＳを含む領域である。
検出光ＩＤＬが調整されたプロジェクター１００は、指示体８０による操作を検出する通常モードでは、検出光射出部４１０が射出する検出光ＩＤＬが指示体８０によって反射された反射光である反射検出光ＲＤＬを、カメラ３１０の撮像画像ＰＭから輝点として検出する。この場合には、検出光ＩＤＬが射出される領域であって、カメラ３１０の画角に含まれる領域において、指示体８０の操作を検出できる。換言すれば、検出光射出部４１０が検出光ＩＤＬを射出する領域のうち、カメラ３１０の画角に含まれる領域が、指示体８０の操作を検出可能な領域である。図２に示す検出領域ＤＡは、指示体８０の操作を検出可能な領域である。
検出領域ＤＡは、スクリーンＳＣにおいて、投射画像ＰＳを含む。
カメラ３１０は、検出光射出部４１０が発する検出光ＩＤＬの波長を含む波長領域の光を受光して撮像する第１の撮像機能を少なくとも有する。カメラ３１０は、更に、可視光を含む光を受光して撮像する第２の撮像機能を有し、これらの２つの撮像機能を切り換え可能に構成されていることが好ましい。
例えば、カメラ３１０は、可視光を遮断して近赤外光のみを通過させる近赤外フィルターをレンズの前に配置したり、レンズの前から後退させたりすることが可能な、不図示の近赤外フィルター切換機構を備えることが好ましい。
プロジェクター１００は、指示体８０の指示操作を検出し、指示位置を特定し、指示位置に対応する動作を行う。例えば、プロジェクター１００は、指示体８０の操作に対応して、文字や図形や線画等を描画し、投射画像ＰＳとして投射するホワイトボードモードで動作する。
本実施形態では、プロジェクター１００がホワイトボードモードで動作する場合について説明する。
なお、プロジェクター１００は、ホワイトボードモード以外の他のモードでも動作可能であり、例えば、パーソナルコンピューター等の図示しない画像ソースから入力される画像データに基づき、投射画像ＰＳを投射する動作モードを実行できる。
図４は、本実施形態に係るプロジェクター１００の構成の一例を示す図である。
図４に示すように、プロジェクター１００は、図１～図３を参照して説明した投射光学系２３０を含む投射部２００と、図１～図３を参照して説明したカメラ３１０を含む撮像部３００と、図１～図３を参照して説明した検出光射出部４１０と、位置検出部６００と、投射画像生成部５００と、制御部７００と、を備える。
プロジェクター１００は、「表示装置」の一例に対応する。
投射部２００は、投射画像生成部５００で処理された画像をスクリーンＳＣに投射する。投射部２００は、光源部２１０、光変調部２２０、及び、投射光学系２３０、を有する。
投射部２００は、「表示部」の一例に対応する。
光源部２１０は、画像を表示することに使用され、ＬＥＤやレーザー光源等の固体光源、及び、蛍光体素子等の蛍光体光源の少なくともいずれかを備える。
また、光源部２１０は、光源が発した光を光変調部２２０に導くリフレクター、及び補助リフレクターを備えてもよい。更に、光源部２１０は、投射光の光学特性を高めるためのレンズ群、偏光板、及び、光源が発した光の光量を光変調部２２０に至る経路上で低減させる調光素子等を備えてもよい。
光変調部２２０は、例えば、Ｒ、Ｇ及びＢの三原色に対応した３枚の図略の液晶パネルを備える。Ｒは赤色を示し、Ｇは緑色を示し、Ｂは青色を示す。すなわち、光変調部２２０は、Ｒ色光に対応した液晶パネルと、Ｇ色光に対応した液晶パネルと、Ｂ色光に対応した液晶パネルと、を備える。
光源部２１０が発する光はＲＧＢの３色の色光に分離され、それぞれ対応する液晶パネルに入射される。３枚の液晶パネルの各々は、透過型の液晶パネルであり、透過する光を変調して画像光を生成する。各液晶パネルを通過して変調された画像光は、クロスダイクロイックプリズム等の合成光学系によって合成され、投射光学系２３０に射出される。
本実施形態では、光変調部２２０が光変調素子として透過型の液晶パネルを備える場合について説明するが、これに限定されない。光変調素子は反射型の液晶パネルであってもよいし、デジタルマイクロミラーデバイス（Ｄｉｇｉｔａｌ Ｍｉｃｒｏｍｉｒｒｏｒ Ｄｅｖｉｃｅ）であってもよい。
投射光学系２３０は、光変調部２２０から入射された画像光をスクリーンＳＣ上に結像させるレンズやミラー等を備える。
また、投射光学系２３０は、スクリーンＳＣに投射される画像を拡大又は縮小させるズーム機構や、フォーカスの調整を行うフォーカス調整機構等を備えてもよい。
撮像部３００は、カメラ３１０を有する。カメラ３１０は、図３を参照して説明した検出光ＩＤＬの波長を含む波長領域の光を受光して撮像する。カメラ３１０は、検出光射出部４１０が発した検出光ＩＤＬが指示体８０に反射した反射光である反射検出光ＲＤＬを受光し、撮像する。したがって、カメラ３１０の撮像画像ＰＭから、反射検出光ＲＤＬを検出できる。
なお、カメラ３１０は、近赤外光を含む光を用いて撮像する機能に加えて、可視光を含む光を用いて撮像する機能を有することが好ましい。この場合には、スクリーンＳＣ上に投射された投射画像ＰＳをカメラ３１０で撮像し、その画像を利用して投射画像生成部５００が台形歪み補正、色補正等を実行することが可能である。
位置検出部６００は、カメラ３１０の撮像画像ＰＭから反射検出光ＲＤＬを検出する。位置検出部６００は、検出した光の像について撮像画像ＰＭにおける位置を特定し、指示体８０の位置を検出する。
カメラ３１０、または、カメラ３１０および位置検出部６００は、「検出部」の一例に対応する。
投射画像生成部５００は、投射画像ＰＳに対応する画像データを記憶する投射画像メモリー５１０を有する。投射画像メモリー５１０は、投射部２００が投射する画像をフレーム単位で格納する、いわゆるフレームメモリーである。
投射画像メモリー５１０は、第１投射画像メモリー５１１と、第２投射画像メモリー５１２とを備える。
第１投射画像メモリー５１１は、位置検出部６００の検出結果に基づき、手書入力に対応する第１画像ＰＴ１を記憶する。
第２投射画像メモリー５１２は、投射部２００が投射する投射画像ＰＳに対応する画像データを記憶する。投射画像ＰＳは、第１画像ＰＴ１、第２画像ＰＴ２、第１枠画像ＰＬ１、及び第２枠画像ＰＬ２を含む。
第１画像ＰＴ１、第２画像ＰＴ２、第１枠画像ＰＬ１、及び第２枠画像ＰＬ２については、以下に示す制御部７００の説明と共に説明し、図５を参照して更に説明する。
投射画像生成部５００は、制御部７００からの指示に従って、位置検出部６００の検出結果に基づき、画像データを投射画像メモリー５１０に書き込む。
また、投射画像生成部５００は、制御部７００からの指示に従って、第２投射画像メモリー５１２の画像を示す画像信号を光変調部２２０に出力して、投射部２００により投射画像ＰＳを投射させる。
更に、投射画像生成部５００は、投射画像ＰＳに対する画像処理を実行する。例えば、投射画像生成部５００は、投射画像ＰＳの台形歪み等を補正する幾何補正処理、投射画像ＰＳを拡大又は縮小するデジタルズーム処理、投射画像ＰＳの色調等を補正する色補正処理等を実行する。
制御部７００は、プロセッサー７１０及びメモリー７２０を備える。
プロセッサー７１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＭＰＵ（Ｍｉｃｒｏ－Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等を備える。
プロセッサー７１０は、単一のプロセッサーで構成されてもよいし、複数のプロセッサーがプロセッサー７１０として機能する構成であってもよい。プロセッサー７１０は、制御プログラムを実行してプロジェクター１００の各部を制御する。本実施形態においては、位置検出部６００および投射画像生成部５００は、制御部７００の一部として実現される。
メモリー７２０は、プロセッサー７１０が実行するプログラムやデータを不揮発的に記憶する記憶装置である。メモリー７２０は、磁気的記憶装置、フラッシュＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等の半導体記憶素子、或いはその他の種類の不揮発性記憶装置により構成される。また、メモリー７２０は、プロセッサー７１０のワークエリアを構成するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）を含んでもよい。メモリー７２０は、制御部７００により処理されるデータや、プロセッサー７１０が実行する制御プログラムを記憶する。
制御プログラムは、プロセッサー７１０によって実行される。制御部７００は、プロセッサー７１０がメモリー７２０に記憶された制御プログラムを実行することによって、プロジェクター１００の各部の制御を行う。
制御部７００の処理については、以下に説明する。また、制御部７００の処理の具体例については、図５～図９を参照して説明する。
制御部７００は、位置検出部６００の検出結果に基づき、スクリーンＳＣに対する第１手書入力を受け付ける。第１手書入力は、ユーザーの手指等の指示体８０によって、入力される手書きの文字、図形、線画等である。
また、制御部７００は、第１手書入力に対応するスクリーンＳＣの位置を含む第１領域ＡＲ１を決定する。
また、制御部７００は、第１手書入力に対応する第１画像ＰＴ１を第１領域ＡＲ１に表示する。
本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、第１画像ＰＴ１を第１領域ＡＲ１に表示する。
まず、制御部７００は、第１手書入力を受け付ける。具体的には、位置検出部６００が検出した第１手書入力がされた位置に基づいて、第１画像ＰＴ１を生成する。そして、制御部７００は、投射画像生成部５００によって、第１画像ＰＴ１を、第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々に書き込ませる。次に、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第１画像ＰＴ１に対応する画像信号を光変調部２２０に出力させて、投射部２００により第１画像ＰＴ１を投射させる。このようにして、制御部７００は、第１画像ＰＴ１をスクリーンＳＣに表示する。
また、制御部７００は、第１画像ＰＴ１を所定の拡大倍率で拡大した第２画像ＰＴ２を、スクリーンＳＣの第２領域ＡＲ２に表示する。所定の拡大倍率は、例えば、２倍である。
本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、第２画像ＰＴ２を第２領域ＡＲ２に表示する。
まず、制御部７００は、第１画像ＰＴ１を所定の拡大倍率で拡大した第２画像ＰＴ２を生成する。そして、制御部７００は、投射画像生成部５００によって、第２画像ＰＴ２を、第２投射画像メモリー５１２に書き込ませる。次に、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第２画像ＰＴ２に対応する画像信号を光変調部２２０に出力させて、投射部２００により第２画像ＰＴ２を投射させる。このようにして、制御部７００は、第２画像ＰＴ２をスクリーンＳＣに表示する。
また、制御部７００は、位置検出部６００の検出結果に基づき、スクリーンＳＣに対する第２手書入力を受け付ける。第２手書入力は、ユーザーの手指等の指示体８０によって、第２領域ＡＲ２に入力される手書きの文字、図形、線画等である。
また、制御部７００は、第２手書入力に応じた画像に基づいて、第２画像ＰＴ２を更新する。
制御部７００は、例えば、以下の処理を実行することによって、第２手書入力に応じた画像に基づいて、第２画像ＰＴ２を更新する。
まず、制御部７００は、位置検出部６００の検出結果に基づき、第２手書入力に応じた第３画像ＰＴ３を生成する。そして、制御部７００は、第３画像ＰＴ３を、投射画像生成部５００によって、第２投射画像メモリー５１２において、第２手書入力がされた第２領域ＡＲ２の位置に書き込ませる。なお、第３画像ＰＴ３は、第２画像ＰＴ２の一部として第２投射画像メモリー５１２に書き込まれる。このようにして、第２手書入力に応じた画像に基づいて、第２画像ＰＴ２を更新する。
また、制御部７００は、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率の逆数の縮小倍率で縮小した大きさで、第１画像ＰＴ１の一部として表示する。すなわち、第２手書入力に応じた画像に基づいて、第１画像ＰＴ１を更新する。
本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、第２手書入力に応じた画像に基づいて、第１画像ＰＴ１を更新する。
まず、制御部７００は、位置検出部６００の検出結果に基づき、第２手書入力に応じた第３画像ＰＴ３を生成する。そして、制御部７００は、第３画像ＰＴ３を、所定の拡大率の逆数の縮小倍率で縮小した大きさの第４画像ＰＴ４を生成する。次に、制御部７００は、第４画像ＰＴ４を、投射画像生成部５００によって、第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々において、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に書き込ませる。なお、第４画像ＰＴ４は、第１画像ＰＴ１の一部として第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々に書き込まれる。このようにして、第２手書入力に応じた画像に基づいて、第１画像ＰＴ１を更新する。
また、制御部７００は、第２画像ＰＴ２を第２領域ＡＲ２に表示している期間に、第１領域ＡＲ１に対する第１手書入力を受け付ける。そして、受け付けた第１手書入力に基づいて、第１画像ＰＴ１を更新し、更新した第１画像ＰＴ１を第１領域ＡＲ１に表示する。
本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、更新した第１画像ＰＴ１を第１領域ＡＲ１に表示する。
まず、制御部７００は、位置検出部６００が検出した第１手書入力に基づいて、第１画像ＰＴ１を更新する。そして、制御部７００は、投射画像生成部５００によって、第１画像ＰＴ１を、第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々に書き込ませる。次に、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第１画像ＰＴ１に対応する画像信号を光変調部２２０に出力させて、投射部２００により第１画像ＰＴ１を投射させる。このようにして、制御部７００は、更新した第１画像ＰＴ１をスクリーンＳＣに表示する。
また、制御部７００は、第１領域ＡＲ１の外縁を示す第１枠画像ＰＬ１と、第２領域ＡＲ２の外縁を示す第２枠画像ＰＬ２と、をスクリーンＳＣに表示する。
第１枠画像ＰＬ１は、「第１領域画像」の一例に対応する。第２枠画像ＰＬ２は、「第２領域画像」の一例に対応する。
本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、第１枠画像ＰＬ１及び第２枠画像ＰＬ２をスクリーンＳＣに表示する。
まず、制御部７００は、第１手書入力に対応するスクリーンＳＣの位置を含む第１領域ＡＲ１を決定する。第１領域ＡＲ１の大きさは、例えば、予め定められた大きさである。第１領域ＡＲ１の大きさは、ユーザーが設定可能であってもよい。次に、制御部７００は、スクリーンＳＣにおける第２領域ＡＲ２を決定する。制御部７００は、例えば、第２領域ＡＲ２が第１領域ＡＲ１と重ならない位置に、第２領域ＡＲ２を決定する。
次に、制御部７００は、第１枠画像ＰＬ１及び第２枠画像ＰＬ２を生成する。そして、制御部７００は、生成した第１枠画像ＰＬ１及び第２枠画像ＰＬ２を、投射画像生成部５００によって、第２投射画像メモリー５１２に書き込ませる。次に、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第１枠画像ＰＬ１及び第２枠画像ＰＬ２に対応する画像信号を光変調部２２０に出力させて、投射部２００により第１枠画像ＰＬ１及び第２枠画像ＰＬ２を投射させる。このようにして、制御部７００は、第１枠画像ＰＬ１及び第２枠画像ＰＬ２をスクリーンＳＣに表示する。
このようにして、第１投射画像メモリー５１１には、第１手書入力、及び第２手書入力に基づいて、第１画像ＰＴ１が書き込まれる。また、第２投射画像メモリー５１２には、第１画像ＰＴ１、第２画像ＰＴ２、第１枠画像ＰＬ１及び第２枠画像ＰＬ２が書き込まれる。
また、第２投射画像メモリー５１２に書き込まれた第１画像ＰＴ１、第２画像ＰＴ２、第１枠画像ＰＬ１及び第２枠画像ＰＬ２は、投射画像生成部５００によって、光変調部２２０に出力されて、投射部２００によりスクリーンＳＣに投射される。
次に、図５～図８を参照して、制御部７００の処理の具体例について説明する。
図５は、制御部７００の処理の第１具体例を示す図である。
図５では、まず、制御部７００が、第１手書入力を受け付けて、第１手書入力に対応する第１画像ＰＴ１と、第１枠画像ＰＬ１とを表示する処理について説明する。
制御部７００は、第１手書入力を受け付けて第１領域ＡＲ１を決定する。第１領域ＡＲ１は、第１手書入力の位置を含む。図５では、第１領域ＡＲ１は、例えば、スクリーンＳＣの左側領域ＳＣ１の左上部、すなわち、スクリーンＳＣの長辺に沿って一方側、に配置される。第１領域ＡＲ１は、幅ＬＷ１、高さＬＨ１の矩形状の領域である。
制御部７００は、位置検出部６００が検出した第１手書入力の位置に基づいて、第１画像ＰＴ１を生成する。図５では、第１画像ＰＴ１として、アルファベットの「Ａ」を示す第１テキスト画像ＴＸ１１が生成される。
制御部７００は、第１テキスト画像ＴＸ１１をスクリーンＳＣの第１領域ＡＲ１に表示する。本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、第１テキスト画像ＴＸ１１をスクリーンＳＣに表示する。
まず、制御部７００は、投射画像生成部５００によって、第１テキスト画像ＴＸ１１を、第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々に書き込ませる。次に、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第１テキスト画像ＴＸ１１に対応する画像信号を光変調部２２０に出力させて、投射部２００により第１テキスト画像ＴＸ１１を投射させる。このようにして、制御部７００は、第１テキスト画像ＴＸ１１をスクリーンＳＣに表示する。
制御部７００は、第１枠画像ＰＬ１をスクリーンＳＣの第１領域ＡＲ１に表示する。本実施形態では、制御部７００は、例えば、前述した処理を実行することによって、第１枠画像ＰＬ１をスクリーンＳＣに表示する。
このように、第１枠画像ＰＬ１がスクリーンＳＣに表示されるため、ユーザーは、第１手書入力を受け付ける第１領域ＡＲ１を容易に視認できる。したがって、ユーザーは、第１領域ＡＲ１に、容易に第１手書入力を行うことができる。なお、第１枠画像ＰＬ１を表示しない態様であってもよい。
次に、制御部７００が、第２画像ＰＴ２と、第２枠画像ＰＬ２とを表示する処理について説明する。
制御部７００は、第１手書入力を受け付けた場合に、第２領域ＡＲ２が第１領域ＡＲ１と重ならない位置に、第２領域ＡＲ２を決定する。第２領域ＡＲ２は、例えば、スクリーンＳＣの右側領域ＳＣ２の中央部に配置される。すなわち、第２領域ＡＲ２は、スクリーンＳＣの長辺に沿って他方側に配置される。第２領域ＡＲ２は、幅ＬＷ２、高さＬＨ２の矩形状の領域である。幅ＬＷ２は、例えば、第１領域ＡＲ１の幅ＬＷ１の２倍であり、高さＬＨ２は、例えば、第１領域ＡＲ１の高さＬＨ１の２倍である。２倍は、「所定の拡大率」の一例に対応する。なお、制御部７００は、第１手書入力を受け付けたことを契機として第２領域ＡＲ２を決定する。したがって、ユーザーが第１画像ＰＴ１を拡大するための操作を行わなくても、第２領域ＡＲ２が表示される。
第２領域ＡＲ２は、表示領域ＡＲ２１と、空白領域２２とを含む。表示領域ＡＲ２１は、第２画像ＰＴ２が表示される領域を示す。空白領域２２は、第２領域ＡＲ２のうちの表示領域ＡＲ２１を除く領域を示す。
制御部７００は、空白領域２２の面積が、表示領域ＡＲ２１の面積よりも大きくなるように、第２領域ＡＲ２を決定する。
制御部７００は、第２枠画像ＰＬ２をスクリーンＳＣに表示する。本実施形態では、制御部７００は、例えば、前述した処理を実行することによって、第２枠画像ＰＬ２をスクリーンＳＣに表示する。
このように、第２枠画像ＰＬ２がスクリーンＳＣに表示されるため、ユーザーは、第２手書入力を受け付ける第２領域ＡＲ２を容易に視認できる。したがって、ユーザーは、第２領域ＡＲ２に、容易に第２手書入力を行うことができる。なお、第２枠画像ＰＬ２を表示しない態様であってもよい。
制御部７００は、第２画像ＰＴ２をスクリーンＳＣに表示する。本実施形態では、制御部７００は、例えば、以下の処理を実行することによって、第２画像ＰＴ２をスクリーンＳＣに表示する。
制御部７００は、第１画像ＰＴ１を２倍に拡大した第２画像ＰＴ２を生成する。そして、制御部７００は、投射画像生成部５００によって、第２画像ＰＴ２を、第２投射画像メモリー５１２に書き込ませる。次に、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第２画像ＰＴ２に対応する画像信号を光変調部２２０に出力させて、投射部２００により第２画像ＰＴ２を投射させる。このようにして、制御部７００は、第２画像ＰＴ２をスクリーンＳＣに表示する。
以上の説明においては、制御部７００が、便宜上、第１手書入力を受け付けた場合に、第２領域ＡＲ２を決定して、第２画像ＰＴ２を表示する場合について説明したが、さらに、第１手書入力が特定の条件を満たす場合に、第２領域ＡＲ２を決定して、第２画像ＰＴ２を表示してもよい。
制御部７００は、例えば、第１手書入力が、スクリーンＳＣの所定面積の範囲に対する所定回数以上の接触動作を含む場合に、第２画像ＰＴ２を第２領域ＡＲ２に表示してもよい。接触動作とは、指示体８０がスクリーンＳＣに対して非接触状態から接触状態に変化する動作を示す。所定面積は、例えば、９ｃｍ２であり、所定回数は、例えば、５回である。第１手書入力が行われている面積が所定面積よりも大きい場合、または、接触動作の回数が所定回数未満である場合には、制御部７００は、第２画像ＰＴ２を表示しない。
非接触状態は、図３に示す検出光ＩＤＬ１よりも指示体８０がスクリーンＳＣから離間している状態を示す。接触状態とは、図３に示す検出光ＩＤＬ１よりも指示体８０がスクリーンＳＣに近接している状態を示す。指示体８０が非接触状態にあるか、接触状態にあるかは、位置検出部６００によって検出される。
この場合には、第１手書入力が複雑な文字、図形、線画等に対応するときに、第２画像ＰＴ２を第２領域ＡＲ２に表示する。例えば、複雑な文字を手書きで入力する場合には、狭い領域に小さい文字を入力することは、ユーザーにとって困難である。
そこで、ユーザーは、第１領域ＡＲ１に第１手書入力を入力する代わりに、第１領域ＡＲ１よりも面積の広い第２領域ＡＲ２に第２手書入力を入力することによって、第１領域ＡＲ１に複雑な文字等を入力する。したがって、ユーザーは、第１領域ＡＲ１に複雑な文字、図形、線画等を容易に入力できる。
一方、広い領域に手書き入力する場合や、入力内容が単純な場合には、第２画像ＰＴ２が表示されるとユーザーがかえって煩わしく感じる可能性がある。条件を満たさない場合には第２画像ＰＴ２を表示しないことで、さらに使い勝手を向上できる。
図６は、制御部７００の処理の第２具体例を示す図である。
図６では、制御部７００が、第２領域ＡＲ２に入力された第２手書入力に基づいて、第２画像ＰＴ２の一部を構成する第３画像ＰＴ３と、第１画像ＰＴ１の一部を構成する第４画像ＰＴ４をスクリーンＳＣに表示する。
第１領域ＡＲ１には、第１テキスト画像ＴＸ１１、第１テキスト画像ＴＸ１２、及び第１テキスト画像ＴＸ１３と、第４テキスト画像ＴＸ１４、第４テキスト画像ＴＸ１５、及び第４テキスト画像ＴＸ１６と、が表示される。
第１テキスト画像ＴＸ１１～第１テキスト画像ＴＸ１３は、第１手書入力に基づいて生成される第１画像ＰＴ１の一例に対応する。第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６は、第２手書入力に基づいて生成される第４画像ＰＴ４の一例に対応する。第４画像ＰＴ４は、第１画像ＰＴ１の一部を構成する。すなわち、第１画像ＰＴ１は、第１テキスト画像ＴＸ１１～第１テキスト画像ＴＸ１３、及び、第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６を含む。
第１テキスト画像ＴＸ１２、及び第１テキスト画像ＴＸ１３は、図５を参照して説明した第１テキスト画像ＴＸ１１と同様にして、スクリーンＳＣに表示される。
第２領域ＡＲ２には、第２テキスト画像ＴＸ２１、第２テキスト画像ＴＸ２２、及び第２テキスト画像ＴＸ２３と、第３テキスト画像ＴＸ２４、第３テキスト画像ＴＸ２５、及び第３テキスト画像ＴＸ２６と、が表示される。
第２テキスト画像ＴＸ２２、及び第２テキスト画像ＴＸ２３は、図５を参照して説明した第２テキスト画像ＴＸ２１と同様にして、スクリーンＳＣに表示される。
第２テキスト画像ＴＸ２１～第２テキスト画像ＴＸ２３は、第１手書入力に基づいて生成される第２画像ＰＴ２の一例に対応する。第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６は、第２手書入力に基づいて生成される第３画像ＰＴ３の一例に対応する。第３画像ＰＴ３は、第２画像ＰＴ２の一部を構成する。すなわち、第２画像ＰＴ２は、第２テキスト画像ＴＸ２１～第２テキスト画像ＴＸ２３、及び、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６を含む。
まず、制御部７００が、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６をスクリーンＳＣに表示する処理の一例について説明する。
制御部７００は、位置検出部６００の検出結果に基づき、第２手書入力に応じた第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６を生成する。そして、制御部７００は、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６を、投射画像生成部５００によって、第２投射画像メモリー５１２において、第２手書入力がされた第２領域ＡＲ２の位置に書き込ませる。なお、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６は、第２画像ＰＴ２の一部として第２投射画像メモリー５１２に書き込まれる。このようにして、第２手書入力に応じた画像に基づいて、第２画像ＰＴ２を更新する。
また、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６は、第２画像ＰＴ２と同様にして、スクリーンＳＣに表示される。具体的には、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６に対応する画像信号を光変調部２２０に出力させて、投射部２００により第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６を投射させる。このようにして、制御部７００は、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６をスクリーンＳＣに表示する。
次に、制御部７００が、第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６をスクリーンＳＣに表示する処理の一例について説明する。
制御部７００は、第３テキスト画像ＴＸ２４～第３テキスト画像ＴＸ２６の各々を、所定の拡大率の逆数の縮小倍率（ここでは、１／２倍）で縮小した大きさの第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６を生成する。次に、制御部７００は、第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６を、投射画像生成部５００によって、第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々において、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に書き込ませる。なお、第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６は、第１画像ＰＴ１の一部として第１投射画像メモリー５１１及び第２投射画像メモリー５１２の各々に書き込まれる。このようにして、第２手書入力に応じた画像に基づいて、第１画像ＰＴ１を更新する。
また、第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６は、第１画像ＰＴ１と同様にして、スクリーンＳＣに表示される。具体的には、制御部７００は、投射画像生成部５００によって、第２投射画像メモリー５１２の第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６に対応する画像信号を光変調部２２０に出力させて、投射部２００により第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６を投射させる。このようにして、制御部７００は、第４テキスト画像ＴＸ１４～第４テキスト画像ＴＸ１６をスクリーンＳＣに表示する。
次に、図７及び図８を参照して、第１手書入力の位置が移動する場合における、第１領域ＡＲ１、及び第２領域ＡＲ２の位置の調整方法について説明する。
なお、図７及び図８では、便宜上、制御部７００が、指示体８０の位置が第１領域ＡＲ１の中央位置になるように第１領域ＡＲ１を決定する場合について説明する。
図７は、制御部７００の処理の第３具体例を示す図である。
図７の上段図に示すように、指示体８０の位置が、スクリーンＳＣの中央から手書き入力を始め、書き進んだ結果、右側に距離ＭＨ１だけ移動する場合について説明する。
この場合には、制御部７００は、手書き入力を開始した時点では、指示体８０の位置に基づき、図７の上段図に示すように、スクリーンＳＣの中央を中心として第１領域ＡＲ１の位置を決定する。第２領域ＡＲ２は、第１領域ＡＲ１と重ならない位置に表示される。例えば、図７の上段図では、第１領域ＡＲ１の右側である。位置検出部６００は、指示体８０の位置を繰り返し検出し、制御部７００は、位置検出部６００の検出結果に応じて、図７の下段図に示すように、第１領域ＡＲ１を距離ＭＡ１１だけ右側に移動し、第２領域ＡＲ２を、距離ＭＡ２１だけ右側に移動する。
距離ＭＡ１１、及び距離ＭＡ２１は、例えば、距離ＭＨ１と一致する。
図７の下段図に示す状態になると、第１領域ＡＲ１の右端が、第２領域ＡＲ２の左端と接触し、第２領域ＡＲ２の右端は、スクリーンＳＣの右端に位置している。したがって、第１領域ＡＲ１を更に右側に移動することが困難になる。
図８は、制御部７００の処理の第４具体例を示す図である。図８は、図７の下段図に示す状態から第１領域ＡＲ１を更に右側に移動する方法の一例を示す。
図８の上段図に示す第１領域ＡＲ１及び第２領域ＡＲ２の位置は、図７の下段図に示す第１領域ＡＲ１及び第２領域ＡＲ２の位置と同一である。図８の上段図に示すように、指示体８０の位置が、右側に距離ＭＨ２だけ移動する場合について説明する。
この場合には、図８の下段図に示すように、制御部７００は、第１領域ＡＲ１を距離ＭＡ１２だけ右側に移動し、第２領域ＡＲ２を、第２領域ＡＲ２の左端がスクリーンＳＣの左端に位置するように距離ＭＡ２２だけ移動する。
距離ＭＡ１２は、例えば距離ＭＨ２と一致する。
図８の下段図に示す状態になると、第２領域ＡＲ２の左端は、スクリーンＳＣの左端に位置している。第１領域ＡＲ１の左端は、第２領域ＡＲ２の右端から、例えば距離ＭＡ１２だけ離間した位置にある。
このように、第１領域ＡＲ１の移動に伴い、第２領域ＡＲ２を移動することによって、第１領域ＡＲ１と重ならない位置に、第２領域ＡＲ２を決定できる。
また、図８の下段図に示すように、第２領域ＡＲ２がスクリーンＳＣの右端からスクリーンＳＣの左端に移動した場合に、第２領域ＡＲ２が配置される位置に、既に、文字や図形等が記載されている可能性がある。このような場合であっても、第２領域ＡＲ２を利用可能にするために、制御部７００は、第２領域ＡＲ２が配置される位置に記載されている文字や図形等に、第２領域ＡＲ２を、オーバーレイして配置する。換言すれば、制御部７００は、第２領域ＡＲ２を、第２領域ＡＲ２が配置される位置に記載されている文字や図形等の上層に配置する。
また、図８の下段図に示すように、第１領域ＡＲ１の幅ＬＷ１と、第２領域ＡＲ２の幅ＬＷ２と、スクリーンＳＣの幅ＬＷＳとは、次の式（１）を満たす。
ＬＷ１＋２×ＬＷ２≦ＬＷＳ （１）
本実施形態では、幅ＬＷ２は、幅ＬＷ１の２倍であるため、式（１）より次の式（２）が成立する。
５×ＬＷ１≦ＬＷＳ （２）
式（２）により、第１領域ＡＲ１の幅ＬＷ１は、スクリーンＳＣの幅ＬＷＳの１／５以下に設定する必要がある。なお、高さＬＨＳは、スクリーンＳＣの高さを示す。
例えば、幅ＬＷ２が、幅ＬＷ１のＭＧ倍である場合には、式（１）より次の式（３）が成立する。
（１＋２×ＭＧ）×ＬＷ１≦ＬＷＳ （３）
制御部７００は、幅ＬＷ１、幅ＬＷ２、および、スクリーンＳＣにおける第１領域ＡＲ１および第２領域ＡＲ２の位置を、式（３）に基づいて決定してもよい。なお、幅ＬＷＳおよび高さＬＷＨは、撮像部３００によって得られた画像から算出することが可能である。
図９は、制御部７００の処理の一例を示すフローチャートである。
図９に示すように、まず、ステップＳ１０１において、制御部７００は、第１手書入力を受け付ける。
次に、ステップＳ１０３において、制御部７００は、第１手書入力に対応するスクリーンＳＣの位置を含む第１領域ＡＲ１を決定する。そして、制御部７００は、第１領域ＡＲ１の外縁を示す第１枠画像ＰＬ１を生成し、第１枠画像ＰＬ１をスクリーンＳＣに表示する。
次に、ステップＳ１０５において、制御部７００は、第１手書入力に対応する第１画像ＰＴ１を生成する。
次に、ステップＳ１０７において、制御部７００は、第１画像ＰＴ１を第１領域ＡＲ１に表示する。
次に、ステップＳ１０９において、制御部７００は、第２領域ＡＲ２を表示するか否かを判定する。制御部７００は、例えば、第１手書入力が特定の条件を満たすか否かに基づいて、第２領域ＡＲ２を表示するか否かを判定する。特定の条件は、例えば、第１手書入力が、スクリーンＳＣの所定面積の範囲に対する所定回数以上の接触動作を含むことである。
第２領域ＡＲ２を表示しないと制御部７００が判定した場合（ステップＳ１０９；ＮＯ）には、処理がステップＳ１０１に戻る。第２領域ＡＲ２を表示すると制御部７００が判定した場合（ステップＳ１０９；ＹＥＳ）には、処理がステップＳ１１１に進む。
そして、ステップＳ１１１において、制御部７００は、第１領域ＡＲ１と重ならない位置に第２領域ＡＲ２を決定する。また、第１手書入力が移動することによって第１領域ＡＲ１が移動した場合には、制御部７００は、第１領域ＡＲ１と重ならない位置に第２領域ＡＲ２を移動する。そして、制御部７００は、第２領域ＡＲ２の外縁を示す第２枠画像ＰＬ２を生成し、第２枠画像ＰＬ２をスクリーンＳＣに表示する。
次に、ステップＳ１１３において、制御部７００は、第１画像ＰＴ１を所定の拡大倍率（例えば、２倍）で拡大した第２画像ＰＴ２を生成し、第２画像ＰＴ２をスクリーンＳＣの第２領域ＡＲ２に表示する。
次に、ステップＳ１１５において、制御部７００は、第２領域ＡＲ２において第２手書入力を受け付けたか否かを判定する。
第２領域ＡＲ２において第２手書入力を受け付けていないと制御部７００が判定した場合（ステップＳ１１５；ＮＯ）には、処理がステップＳ１２３に進む。第２領域ＡＲ２において第２手書入力を受け付けたと制御部７００が判定した場合（ステップＳ１１５；ＹＥＳ）には、処理がステップＳ１１７に進む。
そして、ステップＳ１１７において、制御部７００は、第２手書入力に基づいて、第１画像ＰＴ１を更新する。すなわち、制御部７００は、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率の逆数の縮小倍率（例えば、１／２倍）で縮小した大きさで、第１画像ＰＴ１の一部として生成する。このようにして、第２手書入力に応じた画像に基づいて、第１画像ＰＴ１を更新する。
次に、ステップＳ１１９において、制御部７００は、第１画像ＰＴ１の表示を更新する。換言すれば、制御部７００は、更新された第１画像ＰＴ１をスクリーンＳＣの第１領域ＡＲ１に表示する。
次に、ステップＳ１２１において、制御部７００は、更新された第１画像ＰＴ１を所定の拡大率（例えば、２倍）に拡大することによって、第２画像ＰＴ２を更新する。そして、制御部７００は、更新した第２画像ＰＴ２をスクリーンＳＣの第２領域ＡＲ２に表示する。その後、処理がステップＳ１１５に戻る。
ステップＳ１１５でＮＯの場合には、ステップＳ１２３において、制御部７００は、第１領域ＡＲ１に対する第１手書入力を受け付けたか否かを判定する。
第１手書入力を受け付けたと制御部７００が判定した場合（ステップＳ１２３；ＹＥＳ）には、処理がステップＳ１０３に戻る。第１手書入力を受け付けていないと制御部７００が判定した場合（ステップＳ１２３；ＮＯ）には、処理がステップＳ１２５へ進む。
そして、ステップＳ１２５において、制御部７００は、第１手書入力、及び第２手書入力を受け付けていないとステップＳ１２３で判定してから、所定時間が経過したか否かを判定する。所定時間は、例えば、５分間である。
所定時間が経過していないと制御部７００が判定した場合（ステップＳ１２５；ＮＯ）には、処理がステップＳ１１５に戻る。所定時間が経過したと制御部７００が判定した場合（ステップＳ１２５；ＹＥＳ）には、処理が終了する。
図９を参照して説明したように、第２領域ＡＲ２に第２手書入力を行うことによって、第１領域ＡＲ１の第１画像ＰＴ１を更新できる。したがって、ユーザーの利便性を向上できる。
例えば、第１領域ＡＲ１に複雑な文字、図形、線画等を示す第１画像ＰＴ１を表示する場合に、以下のようにして、第１画像ＰＴ１を表示できる。すなわち、ユーザーは、第１領域ＡＲ１に第１手書入力を行うことに換えて、第１領域ＡＲ１よりも面積の広い第２領域ＡＲ２に第１手書入力の所定の拡大率（例えば、２倍）の大きさで第２手書入力を行うことによって、第１領域ＡＲ１に第１画像ＰＴ１を表示できる。
以上、図１～図９を参照して説明したように、本実施形態に係る表示方法は、スクリーンＳＣに対する第１手書入力を受け付けることと、第１手書入力がされたスクリーンＳＣの位置を含む第１領域ＡＲ１を決定することと、第１手書入力に対応する第１画像ＰＴ１を第１領域ＡＲ１に表示することと、第１画像ＰＴ１を所定の拡大倍率で拡大した第２画像ＰＴ２を、スクリーンＳＣの第２領域ＡＲ２に表示することと、第２領域ＡＲ２において第２手書入力を受け付けることと、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率の逆数の縮小倍率で縮小した大きさで、第１画像ＰＴ１の一部として表示することと、を含む。
すなわち、第２手書入力を受け付けると、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率（例えば、２倍）の逆数の縮小倍率（例えば、１／２倍）で縮小した大きさで、第１画像ＰＴ１の一部として表示する。よって、第２領域ＡＲ２への第２手書入力で、第１画像ＰＴ１として複雑な文字、図形、線画等を入力できる。したがって、ユーザーによる手書入力の操作性を向上できる。
また、本実施形態に係る表示方法は、スクリーンＳＣの第１領域ＡＲ１と重ならない位置に、第２領域ＡＲ２を決定することを、更に含む。
よって、第２領域ＡＲ２が第１領域ＡＲ１と重ならないため、ユーザーは、第２領域ＡＲ２への第２手書入力を行いながら、第１領域ＡＲ１の表示内容を確認できる。したがって、ユーザーによる手書入力の操作性を向上できる。
また、本実施形態に係る表示方法は、スクリーンＳＣは、長辺と、短辺とを有する矩形であり、前記第１領域ＡＲ１を決定することにおいて、第１領域ＡＲ１を、スクリーンＳＣの長辺に沿って一方側に配置し、前記第２領域ＡＲ２を決定することにおいて、第２領域ＡＲ２を、スクリーンＳＣの長辺に沿って他方側に配置する。
よって、第１領域ＡＲ１と第２領域ＡＲ２とが、スクリーンＳＣの長辺に沿って配置される。したがって、第１領域ＡＲ１と第２領域ＡＲ２とを短辺に沿って配置する場合と比較して、第２領域ＡＲ２を配置しやすい。その結果、ユーザーによる手書入力の操作性を向上できる。
また、第１領域ＡＲ１に対して第１手書入力を実行している場合に、第２領域ＡＲ２に第１画像ＰＴ１を所定の拡大倍率で拡大した第２画像ＰＴ２が表示される。したがって、例えば、スクリーンＳＣの長辺が左右方向である場合に、教室において、教師が第１領域ＡＲ１に対して第１手書入力を実行している場合に、第２領域ＡＲ２に表示される第２画像ＰＴ２を、生徒は、教師の体に邪魔されることなく容易に視認できる。
また、本実施形態に係る表示方法は、第２領域ＡＲ２は、第２画像ＰＴ２の表示される表示領域ＡＲ２１と、表示領域ＡＲ２１を除く領域である空白領域ＡＲ２２と、を含み、空白領域ＡＲ２２の面積は、表示領域ＡＲ２１の面積よりも大きい。
よって、空白領域ＡＲ２２の面積は、表示領域ＡＲ２１の面積よりも大きいため、第２領域ＡＲ２への第２手書入力を容易に実行できる。したがって、ユーザーによる手書入力の操作性を向上できる。
また、本実施形態に係る表示方法は、前記第１手書入力を受け付けることは、第２画像ＰＴ２を第２領域ＡＲ２に表示している期間に、第１領域ＡＲ１に対する第１手書入力を受け付けること、を含む。
すなわち、ユーザーは、第２領域ＡＲ２に対する第２手書入力、及び、第１領域ＡＲ１に対する第１手書入力のいずれを行ってもよい。したがって、ユーザーによる手書入力の操作性を向上できる。
また、本実施形態に係る表示方法は、第２画像ＰＴ２を第２領域ＡＲ２に表示することは、第１手書入力が、スクリーンＳＣの所定面積の範囲に対する所定回数以上の接触動作を含む場合に、第２画像ＰＴ２を第２領域ＡＲ２に表示すること、を含む。
よって、第１手書入力として、例えば、複雑な文字、図形、線画等を入力する際に、第２領域ＡＲ２が表示される。したがって、適正なタイミングで、第２領域ＡＲ２を表示できる。
また、本実施形態に係る表示方法は、スクリーンＳＣにおける第１手書入力の位置がされたスクリーンＳＣの位置に応じて、スクリーンＳＣにおける第２領域ＡＲ２の位置を移動させること、を更に含む。
したがって、第１手書き入力の位置が移動した場合にも、第２領域ＡＲ２が第１領域ＡＲ１と重ならない位置に、第２領域ＡＲ２を決定できる。
また、本実施形態に係る表示方法は、第１領域ＡＲ１の外縁を示す第１枠画像ＰＬ１をスクリーンＳＣに表示することと、第２領域ＡＲ２の外縁を示す第２枠画像ＰＬ２をスクリーンＳＣに表示することと、を更に含む。
よって、ユーザーは、第１枠画像ＰＬ１及び第２枠画像ＰＬ２によって、第１領域ＡＲ１及び第２領域ＡＲ２を容易に認識できる。したがって、第１領域ＡＲ１に対する第１手書き入力、及び第２領域ＡＲ２に対する第２手書き入力を、ユーザーは容易に実行できる。その結果、ユーザーによる手書入力の操作性を向上できる。
本実施形態に係るプロジェクター１００は、スクリーンＳＣに画像を表示する投射部２００と、スクリーンＳＣに対する手書入力の位置を検出する位置検出部６００と、位置検出部６００の検出結果に基づき、スクリーンＳＣに表示する画像を制御する制御部７００と、を備え、制御部７００は、位置検出部６００の検出結果に基づいて、スクリーンＳＣに対する第１手書入力を受け付けることと、第１手書入力がされたスクリーンＳＣの位置を含む第１領域ＡＲ１を決定することと、第１手書入力に対応する第１画像ＰＴ１を第１領域ＡＲ１に表示することと、第１画像ＰＴ１を所定の拡大率で拡大した第２画像ＰＴ２を、スクリーンＳＣの第２領域ＡＲ２に表示することと、位置検出部６００の検出結果に応じて、第２領域ＡＲ２において第２手書入力を受け付けることと、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率の逆数の縮小率で縮小した大きさで、第１画像ＰＴ１の一部として表示することと、を実行する。
すなわち、第２手書入力を受け付けると、第２手書入力に応じた画像を、第２手書入力がされた第２領域ＡＲ２の位置に対応する第１領域ＡＲ１の位置に、所定の拡大率（例えば、２倍）の逆数の縮小倍率（例えば、１／２倍）で縮小した大きさで、第１画像ＰＴ１の一部として表示する。よって、第２領域ＡＲ２への第２手書入力で、第１画像ＰＴ１として複雑な文字、図形、線画等を入力できる。したがって、ユーザーによる手書入力の操作性を向上できる。
上述した本実施形態は、好適な実施の形態である。ただし、上述の実施形態に限定されるものではなく、要旨を逸脱しない範囲内において種々の変形実施が可能である。
本実施形態では、所定の拡大倍率が２倍である場合について説明したが、所定の拡大倍率は、１より大であればよい。例えば、所定の拡大倍率が、１．１倍でもよいし、１．５倍でもよい。また、所定の拡大倍率が、２倍より大きくてもよい。例えば、所定の拡大倍率が、３倍でもよいし、５倍でもよい。第２領域ＡＲ２への複雑な文字、図形、線画等の第２手書入力を容易にするために、所定の拡大倍率は、１．５倍～３倍が好ましい。
また、本実施形態では、第１手書入力が行われた場合、または、第１手書入力が、スクリーンＳＣの所定面積の範囲に対する所定回数以上の接触動作を含む場合に、制御部７００は、第２領域ＡＲ２を表示すると判定するが、これに限定されない。例えば、第１手書入力が文字入力である場合に、制御部７００は、第２領域ＡＲ２を表示すると判定してもよい。
また、本実施形態では、第１手書入力がされた位置に応じて第１領域ＡＲ１を決定し、第１領域ＡＲ１に応じて第２領域ＡＲ２を決定する場合について説明したが、これに限定されない。例えば、第２手書入力の位置に応じて第２領域ＡＲ２を決定してもよい。この場合には、第２領域ＡＲ２の位置を更に適正に決定できる。
また、図４に示した各機能部は機能的構成を示すものであって、具体的な実装形態は特に制限されない。つまり、必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。また、上記実施形態においてソフトウェアで実現される機能の一部をハードウェアで実現してもよく、或いは、ハードウェアで実現される機能の一部をソフトウェアで実現してもよい。その他、プロジェクター１００の他の各部の具体的な細部構成についても、趣旨を逸脱しない範囲で任意に変更可能である。
また、図９に示すフローチャートの処理単位は、制御部７００の処理を理解容易にするために、主な処理内容に応じて分割したものである。図９のフローチャートに示す処理単位の分割の仕方や名称によって制限されることはなく、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、上記のフローチャートの処理順序も、図示した例に限られるものではない。
また、プロジェクター１００の表示方法は、プロジェクター１００が備えるプロセッサー７１０に、プロジェクター１００の表示方法に対応した制御プログラムを実行させることで実現できる。また、この制御プログラムは、コンピューターで読み取り可能に記録した記録媒体に記録しておくことも可能である。記録媒体としては、磁気的、光学的記録媒体又は半導体メモリーデバイスを用いることができる。具体的には、フレキシブルディスク、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ、光磁気ディスク、フラッシュメモリー、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。また、記録媒体は、プロジェクター１００が備える内部記憶装置であるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。また、プロジェクター１００の表示方法に対応した制御プログラムをサーバー装置等に記憶させておき、サーバー装置からプロジェクター１００に、制御プログラムをダウンロードすることでプロジェクター１００の表示方法を実現することもできる。
また、本実施形態ではプロジェクター１００を例に説明したが、表示装置は、画像を表示することに用いる光源および表示パネルと、タッチセンサーとを有するタッチパネルディスプレイであってもよい。
８０…指示体、１００…プロジェクター（表示装置）、２００…投射部（表示部）、２１０…光源部、２２０…光変調部、２３０…投射光学系、３００…撮像部、３１０…カメラ、４１０…検出光射出部、４１１…第１射出部、４１２…第２射出部、５００…投射画像生成部、５１０…投射画像メモリー、５１１…第１投射画像メモリー、５１２…第２投射画像メモリー、６００…位置検出部（検出部）、７００…制御部、７１０…プロセッサー、７２０…メモリー、９００…表示システム、９１０…支持部材、９２０…スクリーン板、ＡＲ１…第１領域、ＡＲ２…第２領域、ＡＲ２１…表示領域、ＡＲ２２…空白領域、ＤＡ…検出領域、ＩＤＬ、ＩＤＬ１…検出光、ＬＣ１、ＬＣ２…光軸、ＬＨ１、ＬＨ２、ＬＨＳ…高さ、ＬＷ１、ＬＷ２、ＬＷＳ…幅、ＭＡ１１、ＭＡ２１、ＭＡ１２、ＭＡ２２、ＭＨ１、ＭＨ２…距離、ＰＬ１…第１枠画像（第１領域画像）、ＰＬ２…第２枠画像（第２領域画像）、ＰＭ…撮像画像、ＰＳ…投射画像、ＰＴ１…第１画像、ＰＴ２…第２画像、ＰＴ３…第３画像、ＰＴ４…第４画像、ＲＤＬ…反射検出光、ＳＣ…スクリーン（表示面）、ＳＣ１…左側領域、ＳＣ２…右側領域、ＴＸ…テキスト画像、ＴＸ１１～ＴＸ１３…第１テキスト画像、ＴＸ１４～ＴＸ１６…第４テキスト画像、ＴＸ２１～ＴＸ２３…第２テキスト画像、ＴＸ２４～ＴＸ２６…第３テキスト画像、θ１、θ２…角。

Claims (9)

  1. 表示面に対する第１手書入力を受け付けることと、
    前記第１手書入力がされた前記表示面の位置を含む第１領域を決定することと、
    前記第１手書入力に対応する第１画像を前記第１領域に表示することと、
    前記第１画像を所定の拡大倍率で拡大した第２画像を、前記表示面の第２領域に表示することと、
    前記第２領域において第２手書入力を受け付けることと、
    前記第２手書入力に応じた画像を、前記第２手書入力がされた前記第２領域の位置に対応する前記第１領域の位置に、前記所定の拡大率の逆数の縮小倍率で縮小した大きさで、前記第１画像の一部として表示することと、
    を含む、表示方法。
  2. 前記表示面の前記第１領域と重ならない位置に、前記第２領域を決定すること、
    を更に含む、
    請求項１に記載の表示方法。
  3. 前記表示面は、長辺と短辺とを有する矩形であり、
    前記第１領域を決定することにおいて、前記第１領域を、前記表示面の前記長辺に沿って一方側に配置し、
    前記第２領域を決定することにおいて、前記第２領域を、前記表示面の前記長辺に沿って他方側に配置する、
    請求項２に記載の表示方法。
  4. 前記第２領域は、前記第２画像の表示される表示領域と、前記表示領域を除く領域である空白領域と、を含み、
    前記空白領域の面積は、前記表示領域の面積よりも大きい、
    請求項１から請求項３のいずれか１項に記載の表示方法。
  5. 前記第１手書入力を受け付けることは、前記第２画像を前記第２領域に表示している期間に、前記第１領域に対する前記第１手書入力を受け付けること、
    を含む、
    請求項１から請求項４のいずれか１項に記載の表示方法。
  6. 前記第２画像を前記第２領域に表示することは、前記第１手書入力が、前記表示面の所定面積の範囲に対する所定回数以上の接触動作を含む場合に、前記第２画像を前記第２領域に表示すること、
    を含む、
    請求項１から請求項５のいずれか１項に記載の表示方法。
  7. 前記表示面における前記第１手書入力がされた前記表示面の位置に応じて、前記表示面における前記第２領域の位置を移動させること、
    を更に含む、請求項１から請求項６のいずれか１項に記載の表示方法。
  8. 前記第１領域の外縁を示す第１領域画像を前記表示面に表示することと、
    前記第２領域の外縁を示す第２領域画像を前記表示面に表示することと、
    を更に含む、請求項１から請求項７のいずれか１項に記載の表示方法。
  9. 表示面に画像を表示する表示部と、
    前記表示面に対する手書入力の位置を検出する検出部と、
    前記検出部の検出結果に基づき、前記表示面に表示する画像を制御する制御部と、を備え、
    前記制御部は、
    前記検出部の検出結果に基づいて、前記表示面に対する第１手書入力を受け付けることと、
    前記第１手書入力がされた前記表示面の位置を含む第１領域を決定することと、
    前記第１手書入力に対応する第１画像を前記第１領域に表示することと、
    前記第１画像を所定の拡大率で拡大した第２画像を、前記表示面の第２領域に表示することと、
    前記検出部の検出結果に応じて、前記第２領域において第２手書入力を受け付けることと、
    前記第２手書入力に応じた画像を、前記第２手書入力がされた前記第２領域の位置に対する前記第１領域の位置に、前記所定の拡大率の逆数の縮小率で縮小した大きさで、前記第１画像の一部として表示することと、
    を実行する、表示装置。
JP2020174003A 2020-10-15 2020-10-15 表示方法、及び表示装置 Active JP7521372B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2020174003A JP7521372B2 (ja) 2020-10-15 2020-10-15 表示方法、及び表示装置
CN202111191759.9A CN114374827B (zh) 2020-10-15 2021-10-13 显示方法和显示装置
US17/501,296 US11550431B2 (en) 2020-10-15 2021-10-14 Display method and display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020174003A JP7521372B2 (ja) 2020-10-15 2020-10-15 表示方法、及び表示装置

Publications (3)

Publication Number Publication Date
JP2022065419A true JP2022065419A (ja) 2022-04-27
JP2022065419A5 JP2022065419A5 (ja) 2023-07-20
JP7521372B2 JP7521372B2 (ja) 2024-07-24

Family

ID=81138466

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020174003A Active JP7521372B2 (ja) 2020-10-15 2020-10-15 表示方法、及び表示装置

Country Status (3)

Country Link
US (1) US11550431B2 (ja)
JP (1) JP7521372B2 (ja)
CN (1) CN114374827B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023023791A (ja) * 2021-08-06 2023-02-16 セイコーエプソン株式会社 表示方法

Family Cites Families (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2986507B2 (ja) 1990-04-27 1999-12-06 株式会社日立製作所 会議システム
JP3120085B2 (ja) * 1991-11-21 2000-12-25 株式会社セガ 電子装置及び情報担体
JP3579061B2 (ja) * 1992-08-31 2004-10-20 株式会社東芝 表示装置
JPH0877176A (ja) * 1994-09-07 1996-03-22 Hitachi Ltd 外国語翻訳装置
US5838302A (en) * 1995-02-24 1998-11-17 Casio Computer Co., Ltd. Data inputting devices for inputting typed and handwritten data in a mixed manner
JPH0926769A (ja) * 1995-07-10 1997-01-28 Hitachi Ltd 画像表示装置
JP4035187B2 (ja) 1995-11-22 2008-01-16 富士通株式会社 文書作成装置
US6545669B1 (en) * 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US9715252B2 (en) * 2011-08-24 2017-07-25 Z124 Unified desktop docking behavior for window stickiness
JP2003271294A (ja) 2002-03-15 2003-09-26 Canon Inc データ入力装置、データ入力方法、及びプログラム
US7002560B2 (en) * 2002-10-04 2006-02-21 Human Interface Technologies Inc. Method of combining data entry of handwritten symbols with displayed character data
JP4455185B2 (ja) 2004-06-29 2010-04-21 キヤノン株式会社 プレゼンテーションシステム及びその制御方法並びにプログラム及び記憶媒体
JP4549212B2 (ja) 2005-03-23 2010-09-22 日立ソフトウエアエンジニアリング株式会社 電子ボードシステム
JP4683970B2 (ja) * 2005-03-24 2011-05-18 任天堂株式会社 タッチ入力プログラムおよびタッチ入力装置
US7750893B2 (en) * 2005-04-06 2010-07-06 Nintendo Co., Ltd. Storage medium storing input position processing program, and input position processing device
KR20070034767A (ko) * 2005-09-26 2007-03-29 엘지전자 주식회사 다중 표시영역을 갖는 이동통신 단말기 및 이를 이용한 디스플레이 간의 데이터 표시 방법
US8018440B2 (en) * 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
DE202007018940U1 (de) * 2006-08-15 2009-12-10 N-Trig Ltd. Bewegungserkennung für einen Digitalisierer
JP4995056B2 (ja) 2007-12-06 2012-08-08 キヤノン株式会社 画像表示装置、その制御方法、及びプログラム
US20110102354A1 (en) * 2008-06-30 2011-05-05 Tetsuya Fuyuno Information processing device, display control method, and recording medium
US20100251112A1 (en) * 2009-03-24 2010-09-30 Microsoft Corporation Bimodal touch sensitive digital notebook
JP5229083B2 (ja) * 2009-04-14 2013-07-03 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP2011150413A (ja) * 2010-01-19 2011-08-04 Sony Corp 情報処理装置、操作入力方法及び操作入力プログラム
JP4571230B1 (ja) 2010-02-12 2010-10-27 善俊 張 手書きデータ処理装置
US9454304B2 (en) * 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US9851747B2 (en) * 2010-05-21 2017-12-26 Peter G. Winsky Electronic book reader with closely juxtaposed display screens
JP5661547B2 (ja) * 2011-04-26 2015-01-28 京セラ株式会社 携帯端末装置およびプログラム
US20120318077A1 (en) * 2011-06-15 2012-12-20 Paca Roy Ergonomically enhanced System and Method for Handwriting
JP2014022901A (ja) * 2012-07-18 2014-02-03 Sharp Corp 表示入力装置および表示入力方法
US20150212647A1 (en) * 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
KR101984683B1 (ko) * 2012-10-10 2019-05-31 삼성전자주식회사 멀티 디스플레이 장치 및 그 제어 방법
KR102083918B1 (ko) * 2012-10-10 2020-03-04 삼성전자주식회사 멀티 디스플레이 장치 및 그 제어 방법
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
JP5458161B1 (ja) * 2012-10-23 2014-04-02 株式会社東芝 電子機器および方法
KR102162836B1 (ko) * 2013-08-30 2020-10-07 삼성전자주식회사 필드 속성을 이용한 컨텐트를 제공하는 전자 장치 및 방법
US20150098653A1 (en) * 2013-10-07 2015-04-09 Kabushiki Kaisha Toshiba Method, electronic device and storage medium
US9411508B2 (en) 2014-01-03 2016-08-09 Apple Inc. Continuous handwriting UI
JPWO2015107692A1 (ja) * 2014-01-20 2017-03-23 株式会社東芝 手書きのための電子機器および方法
JP6323035B2 (ja) 2014-01-29 2018-05-16 セイコーエプソン株式会社 表示装置および表示方法
KR102332468B1 (ko) * 2014-07-24 2021-11-30 삼성전자주식회사 기능 제어 방법 및 그 전자 장치
JP6352766B2 (ja) 2014-10-15 2018-07-04 シャープ株式会社 情報処理装置、情報処理プログラムおよび情報処理方法
US10437461B2 (en) * 2015-01-21 2019-10-08 Lenovo (Singapore) Pte. Ltd. Presentation of representation of handwriting input on display
JP2016186678A (ja) * 2015-03-27 2016-10-27 セイコーエプソン株式会社 インタラクティブプロジェクターおよびインタラクティブプロジェクターの制御方法
JP6451446B2 (ja) * 2015-03-27 2019-01-16 セイコーエプソン株式会社 インタラクティブプロジェクター及びインタラクティブプロジェクションシステム
US20180095653A1 (en) * 2015-08-14 2018-04-05 Martin Hasek Device, method and graphical user interface for handwritten interaction
JP5993072B1 (ja) 2015-08-27 2016-09-14 レノボ・シンガポール・プライベート・リミテッド 電子機器のユーザ・インターフェース、入力の処理方法および電子機器
JP2017117020A (ja) 2015-12-21 2017-06-29 株式会社リコー 表示装置、表示システム及び方法
JP6716409B2 (ja) 2016-09-23 2020-07-01 株式会社Ｎｔｔドコモ 情報処理装置
US10514844B2 (en) * 2016-11-16 2019-12-24 Dell Products L.P. Automatically modifying an input area based on a proximity to one or more edges
JP6841647B2 (ja) 2016-12-20 2021-03-10 シャープ株式会社 表示装置、表示方法及びプログラム
US10503396B2 (en) * 2017-06-02 2019-12-10 Apple Inc. Device, method, and graphical user interface for simulating and interacting with handwritten text
JP6832822B2 (ja) * 2017-09-29 2021-02-24 シャープ株式会社 表示制御装置及びプログラム
US11157047B2 (en) * 2018-11-15 2021-10-26 Dell Products, L.P. Multi-form factor information handling system (IHS) with touch continuity across displays
JP2020123118A (ja) * 2019-01-30 2020-08-13 セイコーエプソン株式会社 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター
JP2020123115A (ja) * 2019-01-30 2020-08-13 セイコーエプソン株式会社 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター
JP2020160654A (ja) 2019-03-26 2020-10-01 セイコーエプソン株式会社 表示装置の制御方法及び表示装置
JP2020160807A (ja) * 2019-03-27 2020-10-01 セイコーエプソン株式会社 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター
JP2020160808A (ja) * 2019-03-27 2020-10-01 セイコーエプソン株式会社 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター
JP2020061179A (ja) 2019-12-27 2020-04-16 シャープ株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP7443819B2 (ja) * 2020-02-27 2024-03-06 セイコーエプソン株式会社 画像表示装置、画像表示方法、および画像表示プログラム

Also Published As

Publication number Publication date
US20220121317A1 (en) 2022-04-21
CN114374827B (zh) 2023-12-01
JP7521372B2 (ja) 2024-07-24
CN114374827A (zh) 2022-04-19
US11550431B2 (en) 2023-01-10

Similar Documents

Publication Publication Date Title
JP6059223B2 (ja) 携帯型投射捕捉デバイス
US9521276B2 (en) Portable projection capture device
KR100939501B1 (ko) 2개의 투사형 영상을 제공하는 멀티미디어 재생 장치
JPH0876082A (ja) 投影表示装置
CN104660946B (zh) 投影机及其控制方法
JP3733915B2 (ja) プロジェクタ
JP4993029B2 (ja) 投写型表示装置、およびその調整方法
JP7521372B2 (ja) 表示方法、及び表示装置
JP6690551B2 (ja) 投射型表示装置
JP4590858B2 (ja) 書き込み可能プロジェクタおよび光ポインタ
JP2017129767A (ja) 反射体、光出射装置の調整方法、及び検出システム
WO2021131646A1 (ja) 投影装置、投影方法、及び制御プログラム
JP2011254268A (ja) 撮像装置、撮像方法、及びプログラム
JP7310649B2 (ja) 位置検出装置の制御方法、位置検出装置、及びプロジェクター
JP2009511970A (ja) 画像を表示するアセンブリ及び方法
CN106993146A (zh) 控制方法、控制装置、投影机
JP2009157307A (ja) プロジェクタ
JP5488584B2 (ja) 画像処理装置及びプログラム
JP2023179887A (ja) 投射画像の補正方法、プロジェクター、プロジェクションシステム、及びプログラム
JP2015011282A (ja) 投影装置
WO2019034057A1 (zh) 投影仪及其控制方法
JP2019106106A (ja) インタラクティブプロジェクションシステム、インタラクティブプロジェクター、インタラクティブプロジェクターの制御方法

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210913

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20211108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230711

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230711

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240123

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240321

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240611

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240624

R150 Certificate of patent or registration of utility model

Ref document number: 7521372

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150