Nothing Special   »   [go: up one dir, main page]

JP2020507174A - 表示コンテンツのパネルをナビゲートする方法 - Google Patents

表示コンテンツのパネルをナビゲートする方法 Download PDF

Info

Publication number
JP2020507174A
JP2020507174A JP2019558996A JP2019558996A JP2020507174A JP 2020507174 A JP2020507174 A JP 2020507174A JP 2019558996 A JP2019558996 A JP 2019558996A JP 2019558996 A JP2019558996 A JP 2019558996A JP 2020507174 A JP2020507174 A JP 2020507174A
Authority
JP
Japan
Prior art keywords
panel
navigation
navigation module
user
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019558996A
Other languages
English (en)
Other versions
JP7161824B2 (ja
Inventor
ディアコフ,クリスティアン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lingozing Holding Ltd
Original Assignee
Lingozing Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lingozing Holding Ltd filed Critical Lingozing Holding Ltd
Publication of JP2020507174A publication Critical patent/JP2020507174A/ja
Application granted granted Critical
Publication of JP7161824B2 publication Critical patent/JP7161824B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)

Abstract

表示コンテンツのパネルをナビゲートする方法が提供され、グラフィックデータ24を有する複数の画像ファイル20、計算装置10、及び画像ファイル20をナビゲート及び表示するためのナビゲーションモジュール50を備える。計算装置10は、メモリ装置15と、計算を行い、ナビゲーションモジュールを実行することによってメモリ装置15に記憶されたデータを操作する中央処理装置16と、ユーザが表示領域12a内に表示されたグラフィックデータ24の順次並置されたパネル19を提供する複数の画像ファイル20にアクセスすることを可能にするための表示領域12aを有するユーザインターフェース12と、を備える。ナビゲーションモジュール50は中央処理装置16によって実行され、ユーザが表示領域12aをパンし、被選択パネル19aを選択するときに、ユーザがパネル19の表示モードとパネル19のナビゲーションモードとの間で切り替えることを可能にする。

Description

関連出願との相互参照
本出願は、2017年1月13日に出願された米国仮特許出願第62/446,065号の米国特許法119条(a)〜(d)に基づく出願日の利益を主張する。
本発明は、汎用ユーザインターフェース上の表示コンテンツのパネル(panel:こま)をナビゲートする方法に関し、より詳細には、汎用ユーザインターフェース上の表示コンテンツの順次並置されたパネルをナビゲートする方法に関する。
従来の紙への発行は、単一のページのレイアウトが複数の論理的なコンテンツパネルを利用することを常に可能にしてきた。例としては、1)記事の文章に入りにくい情報を提供するサイドバーとともにストーリーを発行する新聞や雑誌、読者の体験を向上させるグラフや写真又は文章以外の他のコンテンツを提供するグラフィック挿入物、2)ページは互いに複数のパネルで構成されている漫画本を含む。ほとんどの人がよく使うタッチスクリーン計算装置、例えば、スマートフォンやタブレットの画面は、従来の発行されたページほど大きくはないので、もっと小さなスペースで従来のページレイアウト技術を採用することは最適でない読書体験を生み出し、メイン文章以外の論理コンテンツパネルが、文章末尾のリンクに追いやられているか、又は視聴されている装置の画面サイズに比例して一致しない方法で表示され、ユーザが手動でぎこちないズームイン及びズームアウトを行うことを要求する、又は時々それらは完全に省略される。ここで本発明は、ユーザが特定の論理コンテンツパネルのズームインビューに入ってそのコンテンツを視聴すること、及びタッチスクリーンスワイプジェスチャを使用することによってズームインコンテンツの焦点を隣接する論理コンテンツパネルに変更することを可能にする。
米国特許第8,301,999号は、デジタル著作物内のデジタル化された漫画本又は他の一連のイラストシーン(illustrative scene)を自動的にナビゲートする方法及びシステムを対象としている。この方法及びシステムは、2つの表示モードを提供する。第1の表示モードでは、1つのパネルを他のパネルと視覚的に区別することなく、ページ全体が表示画面上に見える。第2の表示モードでは、一連のイラストシーンの1つが視覚的に強調されて、1つの表示されたイラストシーンが隣接するイラストシーンよりも容易に知覚され、各表示されたイラストシーンの寸法がデジタル著作物内の他のパネルの各々の寸法から独立している。方法又はシステムのユーザは、第1又は第2の表示モードのいずれかを要求することができる。方法及びシステムは、局所的又は遠隔的に制御及び記憶することができる。したがって、これは筋書きでコマ割りされた(storyline-framed)順序のシーンをナビゲートする上で非常に広い方法である。
より具体的には、’999特許は、表示体験を作り出すこと、より具体的には、各表示されたイラストシーンを、指定された順序で隣接するイラストシーンよりも、容易に知覚させる視覚強調を用いてイラストシーンの各順序を表示することに焦点を当てており、各表示されたイラストシーンの寸法は、デジタル著作物内の各パネルの寸法とは無関係である。結果として、強調されたフレームとその寸法の視覚的な強調は、元の順序のいずれかのパネルの寸法とは無関係であり、つまり、それらは対応していない。例えば、図10A及び図12Bに示されるように、元のパネル1204が引き延ばされる一方で、強調パネル1004は切り詰められ、それは独自の視覚効果を生み出す。これは元のフレームの不均衡な表示である。
さらに、’999特許は、ボタンをクリックし、カーソル又は他の位置インジケータをパネル上に又は特定のパネルをクリックして配置するために、ボタンの選択、マウス又は他の入力機構の操作によるナビゲーション制御ボタンの起動などの特定の動作にユーザを集中させる。タッチスクリーン装置の継続的な開発に伴い、コンテンツをナビゲートするためにスワイプを使用することが必要とされている。
したがって、スワイプなどの単純なコマンドを使用して連続セルの画面ビューを切り替えることによってデジタル化されたコンテンツをナビゲートするユーザの能力を向上させる方法及び関連ツールを提供することが望ましい。
結果として、汎用ユーザインターフェース上の表示コンテンツの順次並置されたパネルをナビゲートする方法が提供される。このシステムは概して、グラフィックデータを有する複数の画像ファイルと、計算装置と、画像ファイルをナビゲートして表示するためのナビゲーションモジュールと、を含む。計算装置は、メモリ装置と、計算を行い、ナビゲーションモジュールを実行することによってメモリ装置に記憶されたデータを操作する中央処理装置と、ユーザが表示領域内に表示されたグラフィックデータの順次並置されたパネルを提供する複数の画像ファイルにアクセスすることを可能にするための表示領域を有するユーザインターフェースと、を備える。ナビゲーションモジュールは、中央処理装置によって実行され、ユーザが表示領域をパンして、選択されたパネルを選択するときに、ユーザがパネルの表示モードとパネルのナビゲーションモードとの間で切り替えることを可能にする。
本発明は、ここで添付の図面を参照して例により説明される。
本発明による表示システムのためのハードウェア及びネットワークインフラストラクチャのフロー図である。 本発明による表示システムの接続装置の概略図である。 複数の順次並置されたパネルを有する汎用ユーザインターフェースを示す、本発明による表示システムの表示モジュールのグラフィック表示である。 本発明によるナビゲーションモジュールを使用して表示領域の順次並置されたパネル間をナビゲートする表示システムのグラフィック表示である。 本発明によるナビゲーションモジュールを用いた表示システムのグラフィック表示であり、表示領域の順次並置されたパネルのうちの選択されたパネルを示す。 図5の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの第1のステップを示す。 図6の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの後続のステップを示す。 図7の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図8の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図9の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャによって選択された後続のパネルを表示する。 本発明によるナビゲーションモジュールを用いた表示システムのグラフィック表示であり、表示領域の順次並置されたパネルのうちの選択されたパネルを示す。 図11の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの第1のステップを示す。 図12の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの後続のステップを示す。 図13の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図14の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャによって選択された後続のパネルを表示する。 本発明によるナビゲーションモジュールを使用した表示システムのグラフィック表示であり、表示領域の順次並置されたパネルのうちの選択されたパネルを示す。 図16の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの第1のステップを示す。 図17の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの後続のステップを示す。 図18の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図19の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図20の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャによって選択された後続のパネルを表示する。 本発明によるナビゲーションモジュールを使用した表示システムのグラフィック表示であり、表示領域の順次並置されたパネルのうちの選択されたパネルを示す。 図22の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの第1のステップを示す。 図23の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの後続のステップを示す。 図24の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図25の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図26の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャの別の後続のステップを示す。 図27の表示システムのグラフィック表示であり、表示領域の順次並置されたパネル間をナビゲートするための直線的ジェスチャによって選択された後続のパネルを表示する。
添付の図面を含む実施形態を参照して、本発明をここでさらに詳細に説明する。
本発明による表示システム1は、図に示されるような好ましい実施形態により説明される。概して、表示システム1は、ソフトウェア及びハードウェアを使用して、汎用ユーザインターフェースを介して表示コンテンツの順次並置されたパネルをナビゲートする。
まず図1を参照して、表示システム1の一実施形態のためのハードウェアインフラストラクチャを説明する。好ましい実施形態では、表示システム1は、ネットワークルータ2(例えば無線ルータ)上に構築され、データベースサーバ4に接続されている一方、ウェブサーバ6、ファイアウォール8、ネットワーク9、及び計算装置10を備える既知のハードウェア構成要素も利用する。
表示システム1は、ユーザが、計算装置10及びウェブサーバ6に接続するデータベースサーバ4(すなわち、SQLServer又はWindowsServer2012以降)上のネットワークトラフィック情報を通じて、情報及び画像などのグラフィックデータ24を備える複数の画像ファイル20にアクセスすることを可能にする。ウェブサーバ6は、ネットワークルータ2が計算装置10とデータベースサーバ4との間のアプリケーションプログラミングインターフェース(API)を介してデータベースサーバ4と通信する手段として機能する。ファイアウォール8は、限定はしないが、ウェブサーバ6への不正アクセスを阻止し、不正な通信を許可するなどのセキュリティ目的のために統合されている。表示システム1は、パーソナルエリアネットワーク(PAN)、ローカルエリアネットワーク(LAN)、キャンパスエリアネットワーク(CAN)、ワイドエリアネットワーク(WAN)、メトロポリタンエリアネットワーク(MAN)及び将来開発される任意の新しいネットワークシステムを介してダウンロードされる画像ファイル20を介して計算装置10により動作するように設計される。これらのネットワークはネットワーク9で表される。当業者であれば、画像ファイル20を計算装置10に事前にロードすることができるので、表示システム1を計算装置10を通してのみ維持することができることを理解されたい。図示の実施形態では、ユーザは、ネットワーク9を介して計算装置10を使用してネットワークルータ2に接続する。
図2を参照して計算装置10について説明する。計算装置10は、概して、表示領域12aを備えた汎用ユーザインターフェース12、メモリ装置15、及びプロセッサ16を備える。図示の実施形態では、計算装置10はタッチスクリーンディスプレイ11を備えたタブレットコンピュータである。計算装置10は、音声出力装置17及び音声入力装置18を備えるセンサを備える。音声出力装置17はスピーカ又は音声ジャックであり、一方、音声入力装置18は内蔵マイクロホンであってもよい。タッチスクリーンディスプレイ11は、汎用ユーザインターフェース12をナビゲートするために指又はスタイラスのジェスチャを使用する。しかしながら、当業者であれば、コンピュータのマウス、キーボード、又はジョイスティックを備える他の器具を使用できることを理解されたい。実際、計算装置10は物理的なコンピュータであり、デスクトップコンピュータ、ラップトップコンピュータ、又は携帯電話であり得るが、それらに限定されないことを当業者は理解されたい。メモリ装置15は、デジタルデータを保持するために使用されるコンピュータ構成要素及び記録媒体を有する記憶装置である。プロセッサ16は、計算を行うことによりメモリ装置15に記憶されているデータを操作する中央処理装置(CPU)である。
図3を参照する。画像ファイル20は、計算装置10のための汎用ユーザインターフェース12の例示として説明される。
画像ファイル20は、表示するために指定されたタスクを実行するように書かれた一連の命令を備え、概して表示モジュール及び聴覚モジュールを備える。画像ファイル20は、グラフィック要素25、字句要素26、及び場合によっては聴覚要素(図示せず)を含むグラフィックデータ24をさらに備える。特に、表示モジュールは、汎用ユーザインターフェース12を介してグラフィック要素25及び字句要素26を表示する。聴覚モジュールはまた、グラフィック要素25及び字句要素26に対応する聴覚要素27を知らせる(broadcasting)ことによって聴覚機能も実行する。
図3に示すように、表示システム1は、1つ以上のページのグラフィックデータ24を表示する。グラフィックデータ24はリレーショナルデータベースに記憶され、リレーショナルデータベースは、図3のパネル19として識別されるリンクに一致する関連テーブルに記録されたデータ要素を含む。示されるように、単一のページは1つ以上のパネル19を備える。これらのパネル19は、汎用ユーザインターフェース12に沿った座標に対応する。
図3に示すように、どのパネルのデータが聴覚モジュールによって利用されているかを識別するためにインデックスキーを使用して、各パネル19に関連付けられたグラフィックデータ24をデータベースに記憶する方法の例では、インデックスキーに関連する他の様々な要素を呼び出して、文章パネルを所望の言語の文章で埋めるか、又は話している文章の音声記録を装置に再生させることができる。
次に図4を参照すると、表示システム1用のナビゲーションモジュール50を説明する。
概して、ナビゲーションモジュール50は、表示システム1を介して表示されたグラフィックデータ24の順次並置されたパネル19をユーザがナビゲートするシステム及び方法を提供する。より具体的には、ユーザは、表示システム1を介してパネル19の表示モードとパネル19のナビゲーションモードとの間で切り替えることができる。図3に示されるように、表示モードは、表示システム1の各ページについて100%の表示可能コンテンツを含む。例えば、図4に示すように、表示モードはパネル19の完全なページを表示する。より具体的には、図4は、汎用ユーザインターフェース12の利用可能な表示領域12aの100%を占める8つのパネル19を示す。
対照的に、図5に示されるように、ナビゲーションモードにおいて、ユーザは汎用ユーザインターフェース12を通して被選択パネル19aを選択する。ナビゲーションモジュール50は、被選択パネル19aに向かってページ全体に亘ってパンする。パンしている間、ナビゲーションモジュール50は、次いでズームインし、被選択パネル19のズーム画像を表示する。図示の実施形態では、被選択パネル19aは、使用可能な利用可能表示領域12aの約85〜90%を占めてもよい。さらに、被選択ディスプレイ19aを囲むように順次並置されたパネル19が示されている。図示の実施形態では、順次並置されたパネル19は、利用可能な表示領域12aの残りの約10〜15%を占める。
図4〜図28に示すように、ナビゲーションモジュール50は、タッチスクリーン計算装置のオペレーティングシステムの標準入出力処理技術の上にオーバーレイを有するタッチスクリーン13を備える計算装置10を使用する。入出力システムの上にあるオーバーレイは、画面上の特定の領域を選択可能な要素、すなわち、グラフィック要素25、字句要素26として識別し、ユーザが選択したい要素を含む弧として認識されるジェスチャを検出及び処理するように設計されている。
図4から図10まで参照すると、並置されたパネル19は、例えば話の筋書きの順に、順次順番に配置されている。第1に、ユーザは、汎用ユーザインターフェース12内のパネル19に対応するようにタッチスクリーン13に触れることによって被選択パネル19aを選択する。これによりナビゲーションモジュール50が開始される。最初の接触のナビゲーション開始位置52は、メモリ装置15に記憶されており、汎用ユーザインターフェース12の座標系の特定の座標に対応する。ナビゲーションモジュール50は、被選択パネル19aにズームインし、被選択パネル19aの周囲にソフトエッジ効果60を配置する。ナビゲーションモジュール50は、被選択パネル19aを囲む任意の順次並置されたパネル19の上に陰影Sを同時に提供する。図5に示す実施形態では、ナビゲーションモジュール50は、シーンのエッジにおける100%の透明度から80%の不透明度まで〜20pxのソフトな遷移を提供する。
図6に示されるように、ユーザは、再び汎用ユーザインターフェース12を押してナビゲーション開始位置52を提供することによって、順次並置されたパネル19の話の筋書きを続けることができる。その後ユーザは、被選択パネル19a及び周囲の順次並置されたパネル19の位置に対してスワイプジェスチャを上、下、左、又は右の方向に実行することによって後続のパネル19cを選択することができる。これは、計算装置10を指で押すこと(例えば、画面に触れてから連続動作を使用してある方向に移動すること)によって、1回の連続した直線的な動作における完全なスワイプジェスチャによって実行され、ナビゲーション開始位置52はナビゲーションモジュール50によって生成され記憶される。図示の実施形態では、ユーザは、一定又は可変の長さ寸法の連続スワイプ51を通して直線的ジェスチャを実行する。しかしながら、当業者は、ナビゲーションモジュール50が弧のような他の幾何学的経路を必要とする可能性があることを理解されたい。特に、図示の実施形態では、ナビゲーションモジュール50が起動されると表示シーケンスが起動され、図示の実施形態では図5〜図10に例示的に示されている。例えば、表示シーケンスは、順次並置されたパネル19のズームアウト/再センタリング/ズームインの組み合わせ動作を表す画像ファイル20の連続表示である。さらに、陰影順序Sも実行される。例えば、ユーザが被選択パネル19aからズームアウトすると、周囲の順次並置されたパネル19の陰影Sは、100%から100%→0%→100%になり、その後、後続のパネル19cがズームインする場合、100%戻る。
本発明によれば、ナビゲーションモジュール50は、連続スワイプ51の直線経路のナビゲーション開始位置52とナビゲーション終了位置54との間の距離(L)を決定することによって、連続スワイプ51の経路を評価する。スワイプジェスチャが停止すると、ナビゲーション終了位置54が決定される。直線経路が開始したとナビゲーションモジュール50が判断すると、ナビゲーションモジュール50は、連続スワイプ51の開始位置52と現在位置との間の座標であるナビゲーション開始位置52と中間経路53の選択座標によって、連続スワイプ51の方向ベクトル(V)の計算を開始する。
図5〜図10に示すように、ユーザは、被選択パネル19に対する後続パネル19cの位置と一致するナビゲーション開始位置52を提供する。次に、ユーザは、被選択パネル19aの位置及び方向と一致するナビゲーション終了位置54まで汎用ユーザインターフェース12を横切ってスライドする。示された実施形態では、これは横方向の動作であり、ナビゲーションモジュール50は、これが、示された実施形態では方向ベクトルV、又は横方向のスワイプの形態であることを識別する。ナビゲーションモジュール50は、その後、後続パネル19cを決定し、上述のように表示シーケンスを実行する。指がタッチスクリーン13から持ち上げられる前に、連続スワイプ51に沿って移動することによって、いつでもシーケンスを制御し前後に移動させることができる。例えば、ユーザは、被選択パネル19aを30〜40%ズームアウトし、後続のパネル19cに再センタリングし、次いで被選択パネル19aにズームして戻ることができる。その結果、各パネル19を直線的な順序で個々にスライドして扱う代わりに、ユーザはむしろ汎用ユーザインターフェース12のパネルをナビゲートしながらページ上でズームイン及びズームアウトする。
ナビゲーションモジュール50の計算論理は、2つの一般的なステップ、すなわち(1)ナビゲーション開始位置52及びナビゲーション終了位置54を計算すること、(2)それらの間の中間経路53を計算することに分割することができる。
ナビゲーション開始位置52を計算するとき、ズーム倍率が考慮されなければならない。例えば、被選択パネル19aの幅が表示領域12aの幅の95%未満である場合、ナビゲーションモジュール50は、被選択パネル19aの幅が表示領域12aの幅の95%となるように拡大する。被選択パネル19aの高さが表示領域12aの高さの95%より大きい場合、ナビゲーションモジュール50は被選択パネル19aの高さが表示領域12aの高さの95%になるように倍率を減少させる。さらに、ナビゲーションモジュール50は、被選択パネル19aを表示領域12aの中央に配置した。被選択パネル19aのいずれかのエッジが表示領域12aの外側にある場合、ナビゲーションモジュール50は、被選択パネル19aエッジを対応する表示領域12aエッジと位置合わせするように位置を調整する。
ナビゲーションモジュール50はまた、上述したように、ユーザが表示シーケンスを制御することを可能にする。図示の実施形態では、ユーザは、動作制御ジェスチャサイズとして、表示領域12aの幅/高さの最大50%を使用することができ、すなわち、スワイプが表示領域12aの50%をカバーする場合、そのナビゲーションモジュール50は、タッチスクリーン13から指を持ち上げるのと同じように、方向ベクトルVを決定するためにナビゲーション終了位置54を識別する。別の実施形態では、表示領域12aのサイズの半分(画面幅/高さの25%)をカバーする前にユーザが連続スワイプ50を止めると、ナビゲーションモジュール50はナビゲーションモードの被選択パネル19aの表示に戻る。しかし、表示領域12aの半分(画面幅/高さの25%)をカバーした後、全表示領域(画面幅/高さの100%)をカバーする前にユーザが連続スワイプ50を止めると、ナビゲーションモジュール50は方向ベクトルVを識別するためにナビゲーション終了位置54を自動的に識別する。さらに、方向ベクトルVの計算に関して上述したように、ユーザは、主方向が水平か垂直かを判断するために連続スワイプ50の最初の10%を使用できる。
表示シーケンスをより明確にするために、ナビゲーションモジュール50は、ユーザが中間経路53の間に表示シーケンスを制御することを可能にする。これには中間のズーム倍率が含まれる。表示シーケンス中のズーム曲線は、開始シーンのズーム倍率−>中間ズーム倍率−>終了シーンのズーム倍率である。
図示の実施形態では、開始ズーム倍率又は終了ズーム倍率の一方が1.0(ズームなし)の場合、中間ズーム倍率は開始シーンズーム倍率と終了シーンズーム倍率との中間(線形ズーム調整−「オーバーズームアウト」を回避するため)である。それ以外の場合、ズーム倍率は開始又はシーンの50%として計算される。例えば、被選択パネルのシーンズーム倍率が、現在1.5である場合、シーンが後続のパネル19cに進むにつれて、中間ズーム倍率は1.25になる。
図11〜図15に示すように、ユーザは、被選択パネル19に対する後続のパネル19cの位置と一致するナビゲーション開始位置52を提供する。次に、ユーザは、被選択パネル19aの位置及び方向と一致するナビゲーション終了位置54まで汎用ユーザインターフェース12を横切ってスライドする。図示の実施形態では、これは横方向の動作であり、ナビゲーションモジュール50は、これが、図示の実施形態では方向ベクトルV、又は垂直スワイプの形態であることを識別する。ナビゲーションモジュール50は、その後、後続パネル19cを決定し、上述のように表示シーケンスを実行する。指がタッチスクリーン13から持ち上げられる前に、連続スワイプ51に沿って移動することによって、いつでもシーケンスを制御し前後に移動させることができる。
図16から図21は、他の例示的な表示シーケンスを示し、ユーザは右から左へ連続スワイプ51を実行する。ナビゲーションモジュール50は、方向ベクトルを決定して適切な表示シーケンスを表示するために、ナビゲーション開始位置52、ナビゲーション終了位置54、及び中間経路53を決定する。
同様に、図22から図28は別の例示的な表示シーケンスを示し、ユーザは、表示領域12aの底部から上部へと連続スワイプ51を実行する(すなわち、図22から図28の順序に示すように、連続的な動作で)。ナビゲーションモジュール50は、方向ベクトルを損なうと共に適切な表示シーケンスを表示するために、ナビゲーション開始位置52、ナビゲーション終了位置54、及び中間経路53を再び決定する。
本発明による表示システム1は、コンピュータ及びモバイル装置のマルチメディア機能を利用し、グラフィック小説/漫画本フォーマットなどの出版物の通信機能を活用して様々な文脈要素(例えば、ロケール、キャラクター、ストーリー)を提供し、その一方で、装置の計算能力により、ユーザは単純なコマンドを通してそこをナビゲートすることができる。
上記は、本発明を実施するための可能性のいくつかを例示している。本発明の範囲及び趣旨内で他の多くの実施形態が可能である。したがって、その特定の目的に適合させるために、より多い又は少ない前述の構成要素を使用することができる。したがって、前述の説明は限定的なものではなく例示的なものと見なすべきであり、本発明の範囲はそれらの全範囲の均等物と共に添付の特許請求の範囲によって与えられることが意図されている。

Claims (23)

  1. 表示コンテンツのパネルをナビゲートする方法であって、
    データベース4に記憶され、グラフィックデータ24を有する複数の画像ファイル20と、計算装置10と、前記データベース4に記憶されたナビゲーションモジュール50と、を備え、
    前記計算装置10は、
    前記複数の画像ファイル20を備えるデジタルデータを保持するために使用されるメモリ装置15と、
    計算し命令を送ることによって、前記メモリ装置15に記憶されたデジタルデータを処理するための中央処理装置16と、
    表示領域12aを有し、前記表示領域12a内に表示されるグラフィックデータ24の順次並置された複数のパネル19を受け取って表示する汎用ユーザインターフェース12と、を備え、
    前記中央処理装置16は、前記ナビゲーションモジュール50を実行し、ユーザが前記順次並置されたパネル19をパンして被選択パネルを選択してズームインする際に、前記パネル19の表示モードと前記複数のパネル19のナビゲーションモードとの間の切り替えを前記ユーザに可能にする、方法。
  2. パネル19の前記表示モードは、前記表示領域12aに表示された、順次並置されたパネル19の各ページについて100%の表示可能なコンテンツを含む、請求項1に記載の方法。
  3. 前記ナビゲーションモジュール50は、前記ユーザが前記被選択パネル19aを選択すると、前記被選択パネル19aのズーム画像をズームインして表示する、請求項2に記載の方法。
  4. 前記ユーザは、前記複数のパネル19のうちの1つに対応する前記汎用ユーザインターフェース12の座標系の特定の座標を指して選択することによって前記被選択パネル19aを選択する、請求項3に記載の方法。
  5. 前記ナビゲーションモジュール50は、前記ユーザが前記被選択パネル19aを選択した後に、前記被選択パネル19aにズームインして前記被選択パネル19aの周囲にソフトエッジ効果60を配置する、請求項4に記載の方法。
  6. 前記被選択パネル19aは、前記表示領域12aの利用可能範囲の約85から約90%を占める、請求項5に記載の方法。
  7. 前記ナビゲーションモジュール50は、前記被選択パネル19aを囲む前記複数のパネル19の上に陰影Sを同時に提供する、請求項5に記載の方法。
  8. 前記ユーザは、前記汎用ユーザインターフェース12を再度選択して、ナビゲーション開始位置52を提供することによって前記複数のパネル19をナビゲートし続ける、請求項7に記載の方法。
  9. 前記ユーザは、前記被選択パネル19aの位置と前記被選択パネル19aを囲む前記複数のパネル19に対してスワイプジェスチャを実行することによって後続のパネル19cを選択する、請求項8に記載の方法。
  10. 前記スワイプジェスチャは、1回の連続的な直線的な動作で実行され、前記ナビゲーション開始位置52は、前記ナビゲーションモジュール50によって識別され記憶される、請求項9に記載の方法。
  11. 前記ナビゲーションモジュール50は、連続的なスワイプ51の経路の前記ナビゲーション開始位置52とナビゲーション終了位置54との間の距離Lを決定することによって、前記連続的なスワイプ51の前記経路を評価する、請求項10に記載の方法。
  12. 前記スワイプジェスチャが一旦停止すると、前記ナビゲーション終了位置54が決定される、請求項11に記載の方法。
  13. 前記ナビゲーションモジュール50は、前記連続的なスワイプ51の前記経路の前記ナビゲーション開始位置52と現在位置の間の座標である、前記ナビゲーション開始位置52と中間経路53の選択座標によって、前記連続的なスワイプ51の前記経路の方向ベクトルVの計算を開始する、請求項12に記載の方法。
  14. 前記ナビゲーション開始位置52は、前記被選択パネル19に対する前記後続のパネル19cの位置と一致する、請求項13に記載の方法。
  15. ユーザは、次いで、前記被選択パネル60の位置及び方向と一致するナビゲーション終了位置54まで前記汎用ユーザインターフェース12を横切ってスライドする、請求項14に記載の方法。
  16. 前記スワイプジェスチャは、前記ナビゲーションモジュール50が前記方向ベクトルVにあると識別する横方向の動作である、請求項15に記載の方法。
  17. 前記ナビゲーションモジュール50は、前記後続のパネル19cが他の被選択パネル60に遷移するように前記後続のパネル19cを決定し、表示シーケンスを実行する、請求項16に記載の方法。
  18. 前記表示シーケンスは、前記連続的なスワイプ51の前記経路に沿って移動することによって制御され、前後に移動され得る、請求項17に記載の方法。
  19. 前記表示シーケンスは、前記中間経路53の間に前記複数のパネル19のズームアウト及びズームインを含む、請求項17に記載の方法。
  20. 前記複数の画像ファイル20は、ネットワーク9を介してダウンロードされる、請求項1に記載の方法。
  21. 前記複数の画像ファイル20は、前記計算装置10に事前にロードすることができる、請求項1に記載の方法。
  22. 前記計算装置10は、タッチスクリーンディスプレイ11を備えたタブレットコンピュータである、請求項1に記載の方法。
  23. 前記タッチスクリーンディスプレイ11は、指又はスタイラスのジェスチャを用いて前記汎用ユーザインターフェース12をナビゲートし、スワイプジェスチャを通じて前記被選択パネル19aを選択する、請求項22に記載の方法。
JP2019558996A 2017-01-13 2018-01-12 表示コンテンツのパネルをナビゲートする方法 Active JP7161824B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762446065P 2017-01-13 2017-01-13
US62/446,065 2017-01-13
PCT/US2018/013569 WO2018132709A1 (en) 2017-01-13 2018-01-12 A method of navigating panels of displayed content

Publications (2)

Publication Number Publication Date
JP2020507174A true JP2020507174A (ja) 2020-03-05
JP7161824B2 JP7161824B2 (ja) 2022-10-27

Family

ID=61074623

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019558996A Active JP7161824B2 (ja) 2017-01-13 2018-01-12 表示コンテンツのパネルをナビゲートする方法

Country Status (5)

Country Link
US (1) US20190332237A1 (ja)
JP (1) JP7161824B2 (ja)
KR (1) KR20190141122A (ja)
CN (1) CN110574001A (ja)
WO (1) WO2018132709A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022182043A1 (ko) * 2021-02-24 2022-09-01 삼성전자주식회사 전자 장치 및 전자 장치를 동작시키는 방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12061777B2 (en) * 2021-03-22 2024-08-13 Wichita State University Systems and methods for conveying multimoldal graphic content

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001052208A (ja) * 1999-08-06 2001-02-23 Mixed Reality Systems Laboratory Inc 画像処理方法、画像処理装置および記憶媒体
JP2005202062A (ja) * 2004-01-14 2005-07-28 Sony Computer Entertainment Inc まんが表示装置、まんが表示方法、まんが編集装置およびまんが編集方法
JP2010164862A (ja) * 2009-01-19 2010-07-29 Sun Corp 画像表示装置
US20140380237A1 (en) * 2013-06-21 2014-12-25 Barnesandnoble.Com Llc Zoom View Mode for Digital Content Including Multiple Regions of Interest
JP2015076068A (ja) * 2013-10-11 2015-04-20 アプリックスIpホールディングス株式会社 表示装置とその表示制御方法及びプログラム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8643667B2 (en) * 2002-08-02 2014-02-04 Disney Enterprises, Inc. Method of displaying comic books and similar publications on a computer
US8301999B2 (en) 2006-09-25 2012-10-30 Disney Enterprises, Inc. Methods, systems, and computer program products for navigating content
US20110074831A1 (en) * 2009-04-02 2011-03-31 Opsis Distribution, LLC System and method for display navigation
US20110032183A1 (en) * 2009-08-04 2011-02-10 Iverse Media, Llc Method, system, and storage medium for a comic book reader platform
US8861890B2 (en) * 2010-11-24 2014-10-14 Douglas Alan Lefler System and method for assembling and displaying individual images as a continuous image
CN102737362B (zh) * 2011-04-01 2015-07-08 国基电子(上海)有限公司 具漫画图像分割功能的电子装置及方法
US9946429B2 (en) * 2011-06-17 2018-04-17 Microsoft Technology Licensing, Llc Hierarchical, zoomable presentations of media sets
US9158455B2 (en) * 2011-07-12 2015-10-13 Apple Inc. Multifunctional environment for image cropping
US9286668B1 (en) * 2012-06-18 2016-03-15 Amazon Technologies, Inc. Generating a panel view for comics
US20140178047A1 (en) * 2012-12-21 2014-06-26 The Center for Digital Content, LLC Gesture drive playback control for chromeless media players
US9436357B2 (en) * 2013-03-08 2016-09-06 Nook Digital, Llc System and method for creating and viewing comic book electronic publications
KR102225943B1 (ko) * 2014-06-19 2021-03-10 엘지전자 주식회사 이동단말기 및 그 제어방법
US9600594B2 (en) * 2014-10-09 2017-03-21 Wrap Media, LLC Card based package for distributing electronic media and services
US10871868B2 (en) * 2015-06-05 2020-12-22 Apple Inc. Synchronized content scrubber
US20170344205A1 (en) * 2015-09-10 2017-11-30 Apple Inc. Systems and methods for displaying and navigating content in digital media
DK179932B1 (en) * 2017-05-16 2019-10-11 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR NAVIGATING, DISPLAYING, AND EDITING MEDIA ITEMS WITH MULTIPLE DISPLAY MODES

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001052208A (ja) * 1999-08-06 2001-02-23 Mixed Reality Systems Laboratory Inc 画像処理方法、画像処理装置および記憶媒体
JP2005202062A (ja) * 2004-01-14 2005-07-28 Sony Computer Entertainment Inc まんが表示装置、まんが表示方法、まんが編集装置およびまんが編集方法
JP2010164862A (ja) * 2009-01-19 2010-07-29 Sun Corp 画像表示装置
US20140380237A1 (en) * 2013-06-21 2014-12-25 Barnesandnoble.Com Llc Zoom View Mode for Digital Content Including Multiple Regions of Interest
JP2015076068A (ja) * 2013-10-11 2015-04-20 アプリックスIpホールディングス株式会社 表示装置とその表示制御方法及びプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022182043A1 (ko) * 2021-02-24 2022-09-01 삼성전자주식회사 전자 장치 및 전자 장치를 동작시키는 방법
US11868547B2 (en) 2021-02-24 2024-01-09 Samsung Electronics Co., Ltd. Electronic device and method of operating the electronic device

Also Published As

Publication number Publication date
JP7161824B2 (ja) 2022-10-27
CN110574001A (zh) 2019-12-13
KR20190141122A (ko) 2019-12-23
WO2018132709A1 (en) 2018-07-19
US20190332237A1 (en) 2019-10-31

Similar Documents

Publication Publication Date Title
US11972164B2 (en) User interfaces for devices with multiple displays
CN106662964B (zh) 应用窗口的动态联合划分器
CN106537318B (zh) 应用窗口的辅助呈现
US8739073B2 (en) User interface for document table of contents
US11567624B2 (en) Techniques to modify content and view content on mobile devices
US9600090B2 (en) Multi-touch integrated desktop environment
US8988366B2 (en) Multi-touch integrated desktop environment
US20120233565A1 (en) System and method for displaying content
US10838607B2 (en) Managing objects in panorama display to navigate spreadsheet
JP2017050013A (ja) 画像表示装置、画像表示方法およびプログラム
JPWO2012141048A1 (ja) コンテンツ表示装置、コンテンツ表示方法、プログラム、および記録媒体
US11379112B2 (en) Managing content displayed on a touch screen enabled device
KR20150095540A (ko) 사용자 단말 장치 및 이의 디스플레이 방법
JP2008250948A (ja) 情報処理装置、情報処理方法、情報処理プログラム、情報処理プログラムを記録した記憶媒体、並びに情報表示装置
US9262005B2 (en) Multi-touch integrated desktop environment
US9612743B2 (en) Multi-touch integrated desktop environment
TWI646526B (zh) 子畫面佈局控制方法和裝置
US20190332237A1 (en) Method Of Navigating Panels Of Displayed Content
US20160132478A1 (en) Method of displaying memo and device therefor
EP2791773B1 (en) Remote display area including input lenses each depicting a region of a graphical user interface
Everitt et al. Modal spaces: spatial multiplexing to mediate direct-touch input on large displays
TW201502959A (zh) 強化的畫布環境

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201217

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211020

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211109

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220207

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220506

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220913

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221013

R150 Certificate of patent or registration of utility model

Ref document number: 7161824

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350