JP2021117776A - 翻訳チャットシステム、チャット制御方法、サーバ装置、及びプログラム - Google Patents

Abstract

【課題】翻訳チャットシステム、チャット制御方法、サーバ装置及びプログラムを提供する。【解決手段】翻訳チャットシステム１０において、サーバ装置40は、第１の端末装置からの要求に応じ、医師側端末装置２０のユーザに対応するチャットルームへの接続情報を発行するチャットルーム設定部を備る。医師側端末装置２０は、発行された接続情報を表示する。患者側端末装置３０は、医師側端末装置２０に表示された接続情報を読み取り、読み取った接続情報に基づいてチャットルームにアクセスする。【選択図】図１

Description

本発明は、翻訳チャットシステム、チャット制御方法、サーバ装置、及びプログラムに関する。

外国人旅行者や在日外国人の増加に伴い、医療現場において外国人の患者を診察する機会が増えている。外国人の患者が使用する言語は多岐に亘るため、医師や看護師等の医療従事者と外国人の患者とが意思疎通を行えない場合がある。

このような場合に使用できる技術として、例えば特許文献１には、テレビ電話通訳システムが記載されている。該テレビ電話通訳システムによれば、通訳者が、テレビ電話を介して、医療従事者の発言を患者の使用言語に通訳し、また、患者の発言を医療従事者の使用言語に通訳することができる。

また、近年では、ユーザの発言を任意の言語に翻訳できるスマートフォン用のアプリケーションプログラムや翻訳専用端末も普及している。

特開２０１２−２４９２６６号公報

特許文献１に記載のテレビ電話通訳システムのように、通訳者を必要とするシステムはコスト高となってしまい普及しづらい。また、通訳者を介する対話は慣れていないと違和感がある。

スマートフォンや翻訳専用端末は、対話相手（医療従事者にとっての患者、患者にとっての医療従事者）にスマートフォン等の画面を見せたり、スマートフォンに向かって発声させたりする必要があるので使い勝手に難がある。

本発明は、このような状況に鑑みてなされたものであり、使用言語が異なる人どうしの対話を、より簡単に、且つ効果的に行えるようにすることを目的とする。

本発明は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。

上記課題を解決すべく、本発明の一態様に係る翻訳チャットシステムは、サーバ装置、及び前記サーバ装置にネットワークを介して接続する複数の端末装置を含む翻訳チャットシステムであって、前記サーバ装置は、第１の端末装置からの要求に応じ、前記第１の端末装置のユーザに対応するチャットルームへの接続情報を発行するチャットルーム設定部と、前記第１の端末装置から送信されたメッセージ及びその翻訳結果、並びに、前記第１の端末装置に表示された前記接続情報に基づいて前記チャットルームにアクセスしてきた、第２の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するためのデータを生成する画面データ生成部と、を備え、前記第１の端末装置は、発行された前記接続情報を表示し、前記第２の端末装置は、前記第１の端末装置に表示された前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスすることを特徴とする。

前記サーバ装置は、前記接続情報に基づいて前記チャットルームにアクセスしてきた、前記第２の端末装置のユーザの使用言語を特定する使用言語特定部と、前記第１の端末装置から送信されたメッセージを、特定された前記第２の端末装置のユーザの使用言語に翻訳し、また、前記第２の端末装置から送信されたメッセージを、予め設定されている前記第１の端末装置のユーザの使用言語に翻訳する翻訳部と、を備えることができる。

前記使用言語特定部は、前記第２の端末装置から送信されたｈｔｔｐリクエストに含まれる言語コードに基づき、前記第２の端末装置のユーザの使用言語を特定することができる。

前記サーバ装置の前記使用言語特定部は、前記第２の端末装置のユーザの使用言語を前記第１の端末装置に送信することができ、前記第１の端末装置は、ユーザに対して、前記第２の端末装置のユーザの使用言語を通知することができる。

前記チャットルーム設定部は、有効期限を設けて前記接続情報を発行することができる。

前記チャットルーム設定部は、前記チャットルームへの前記接続情報としてＱＲコードを発行することができ、前記第２の端末装置は、ＱＲコードリーダによって前記ＱＲコードを読み取ることができる。

前記チャットルーム設定部は、前記第２の端末装置の位置情報を取得し、前記第１の端末装置と前記第２の端末装置との距離に基づいて前記第２の端末装置による前記チャットルームへのアクセスの可否を判断することができる。

前記第１の端末装置は、専用アプリケーションプログラムによって前記チャットルームの画面を表示することができ、前記第２の端末装置は、汎用ブラウザにより前記チャットルームの画面を表示することができる。

前記サーバ装置は、前記第１の端末装置、及び前記第２の端末装置の少なくとも一方から音声データとして送信された前記メッセージを文字列データに変換する音声認識部、を備えることができる。

前記第１の端末装置及び前記第２の端末装置の少なくとも一方は、前記チャットルームの画面に表示された前記翻訳結果に対応する音声を出力することができる。

本発明の他の態様に係るチャット制御方法は、サーバ装置、及び前記サーバ装置にネットワークを介して接続する複数の端末装置を含む翻訳チャットシステムによるチャット制御方法であって、前記サーバ装置が、第１の端末装置からの要求に応じ、前記第１の端末装置のユーザに対応するチャットルームへの接続情報を発行し、前記第１の端末装置が、発行された前記接続情報を表示し、第２の端末装置が、前記第１の端末装置に表示された前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスし、前記サーバ装置が、前記第１の端末装置から送信されたメッセージ及びその翻訳結果、並びに、前記第２の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するためのデータを生成するステップを含むことを特徴とする。

本発明のさらに他の態様に係るサーバ装置は、複数の端末装置間で行われるチャットを制御するサーバ装置であって、第１の端末装置からの要求に応じ、前記第１の端末装置のユーザに対応するチャットルームへの接続情報を発行するチャットルーム設定部と、前記第１の端末装置から送信されたメッセージ及びその翻訳結果、並びに、前記第１の端末装置に表示された前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスした第２の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するためのデータを生成する画面データ生成部と、を備えることを特徴とする。

本発明のさらに他の態様に係るプログラムは、端末装置としてのコンピュータに、サーバ装置に対してユーザに対応するチャットルームへの接続情報の発行を要求し、前記サーバ装置によって発行された前記接続情報を表示し、前記サーバ装置から送信された、ユーザが入力したメッセージ及びその翻訳結果、並びに、表示した前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスした他の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するステップを含む処理を実行させることを特徴とする。

本発明によれば、使用言語が異なる人どうしの対話を、より簡単に、且つ効果的に行うことが可能となる。

上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。

図１は、本発明の一実施形態に係る翻訳チャットシステムの構成例を示す図である。 図２は、サーバ装置の構成例を示す図である。 図３は、ユーザ情報の一例を示す図である。 図４は、チャットルーム情報の一例を示す図である。 図５は、チャット開始時の処理の一例を説明するシーケンス図である。 図６は、医師側端末装置におけるログイン画面の表示例を示す図である。 図７は、医師側端末装置におけるホーム画面の表示例を示す図である。 図８は、医師側端末装置におけるＱＲコード画面の表示例を示す図である。 図９は、医師側端末装置におけるアクセス通知画面の表示例を示す図である。 図１０は、医師側端末装置におけるチャット画面の表示例を示す図である。 図１１は、患者側端末装置におけるチャット画面の表示例を示す図である。 図１２は、チャット中の処理の一例を説明するシーケンス図である。 図１３は、チャット中の処理の一例を説明するシーケンス図である。 図１４は、翻訳チャットシステムの変形例を示す図である。 図１５は、翻訳チャットシステムの変形例における医師側端末装置の構成例を示す図である。

以下、本発明に係る一実施形態を図面に基づいて説明する。なお、実施形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。また、以下の実施形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、「Ａからなる」、「Ａよりなる」、「Ａを有する」、「Ａを含む」と言うときは、特にその要素のみである旨明示した場合等を除き、それ以外の要素を排除するものでないことは言うまでもない。同様に、以下の実施形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。

＜本発明の一実施形態に係る翻訳チャットシステム１０の構成例＞
図１は、本発明の一実施形態に係る翻訳チャットシステム１０の構成例を示している。

翻訳チャットシステム１０は、ネットワーク１１を介して接続された端末装置２０、端末装置３０、及びサーバ装置４０から構成される。

ネットワーク１１は、ＬＡＮ(Local Area Network)、インターネット、携帯電話通信網等の双方向通信網である。

端末装置２０は、医師（看護師等の医療従事者であってもよい）によって操作される。以下、端末装置２０を医師側端末装置２０と称する。医師側端末装置２０は、本発明の第１の端末装置に相当する。医師側端末装置２０には、例えば、パーソナルコンピュータ、タブレット型コンピュータ、スマートフォン等の一般的なコンピュータを用いることができる。該コンピュータには、翻訳チャットシステム１０における医師側端末装置２０として機能するための専用アプリケーションプログラム（以下、翻訳チャットアプリと称する）２０１がインストールされている。

端末装置３０は、患者（患者に付き添う家族等であってもよい）によって操作される。以下、端末装置３０を患者側端末装置３０と称する。患者側端末装置３０は、本発明の第２の端末装置に相当する。患者側端末装置３０は、少なくともカメラ３１、ＱＲコードリーダ３２、及び汎用ブラウザ３３を備え、患者が携帯可能な電子機器である。患者側端末装置３０としては、一般的なスマートフォンの他、タブレット型コンピュータ、携帯電話機、携帯ゲーム機等を用いることができる。

ＱＲコードリーダ３２、及び汎用ブラウザ３３は、患者側端末装置３０にインストールされているアプリケーションプログラムである。ＱＲコードリーダ３２は、カメラ３１によって撮像された画像内のＱＲコード（商標）を読み取ることができ、ＱＲコードがＵＲＬを表している場合、汎用ブラウザ３３を起動して該ＵＲＬへのアクセスを指示することができる。汎用ブラウザ３３は、Ｗｅｂページにアクセスすることができる。ＱＲコードリーダ３２は、医師側端末装置２０の画面に表示されたＱＲコードを読み取るために使用される。汎用ブラウザ３３は、ＱＲコードが表す接続情報に基づき、Ｗｅｂページとしてのチャットルームにアクセスするために使用される。さらに、患者側端末装置３０には、例えば、ＧＰＳ(Global Positioning System)モジュール等の位置センサが搭載されていることが望ましい。

サーバ装置４０は、ＣＰＵ(Central Processing Unit)、メモリ、ストレージ、入力デバイス、出力デバイス、通信モジュール等を備えた一般的なコンピュータからなる。サーバ装置４０は、医師側端末装置２０からネットワーク１１を介して送信される医師からのメッセージを患者の使用言語に翻訳し、また、患者側端末装置３０からネットワーク１１を介して送信される患者からのメッセージを医師の使用言語に翻訳する。また、サーバ装置４０は、両者のメッセージとその翻訳結果が順次表示されるチャット画面を表示するための画面データを、医師側端末装置２０及び患者側端末装置３０に送信する。

次に、図２は、サーバ装置４０の構成例を示している。サーバ装置４０は、処理部４１、記憶部４２、通信部４３、操作部４４、及び表示部４５を備える。

処理部４１は、サーバ装置４０をなすコンピュータが備えるＣＰＵに相当し、サーバ装置４０の全体を制御する。処理部４１は、チャットルーム設定部４１１、使用言語特定部４１２、翻訳部４１３、画面データ生成部４１４、音声認識部４１５の各機能ブロックを有する。これの機能ブロックは、該ＣＰＵが所定のプログラムを実行することによって実現される。

チャットルーム設定部４１１は、医師側端末装置２０からの要求に応じ、記憶部４２のユーザ情報４２１及びチャットルーム情報４２２に基づいて、医師側端末装置２０のユーザ専用のチャットルームに患者側端末装置３０がアクセスするための接続情報を有効期限を設定して発行する。

接続情報の有効期限は、診察中の患者が使用する患者側端末装置３０だけがチャットルームにアクセスできるように、数分から数十分程度に設定することが望ましい。例えば、患者側端末装置３０が接続情報の有効期限を過ぎてからチャットルームにアクセスしようとした場合にはアクセスできず、患者側端末装置３０にはエラー画面が表示される。

さらに、患者側端末装置３０が自身の位置情報を計測できる場合、チャットルーム設定部４１１は、患者側端末装置３０から位置情報を取得し、医師側端末装置２０の位置情報と、患者側端末装置３０の位置情報とが一致する場合（医師側端末装置２０と患者側端末装置３０との距離が所定の閾値以下である場合を含む）にのみ、チャットルームへのアクセスを認めるようにしてもよい。またさらに、医師側端末装置２０の位置情報と、チャットルームにアクセス中の患者側端末装置３０の位置情報との距離が、所定の閾値よりも大きくなった場合、チャットルームに対する患者側端末装置３０のアクセスを遮断するようにしてもよい。

接続情報としては、例えば、該チャットルームを表示するＷｅｂページのＵＲＬ(uniform resource locator)を画像化したＱＲコード（商標）を発行する。なお、発行する接続情報は、ＱＲコードに限らず、他の２次元コードやバーコード等であってもよい。発行された接続情報は、通信部４３によりネットワーク１１を介して医師側端末装置２０に送信され、医師側端末装置２０の画面に表示される。

使用言語特定部４１２は、医師側端末装置２０に表示された接続情報に基づいてチャットルームにアクセスしてきた患者側端末装置３０のユーザである患者の使用言語を特定する。具体的には、汎用ブラウザ３３が送信するｈｔｔｐ(hyper text transfer protocol)リクエストに含まれる言語コード(Accept-Language)が表す言語を、患者側端末装置３０のユーザの使用言語として特定する。

翻訳部４１３は、医師側端末装置２０からネットワーク１１を送信される医師からの文字列データとしてのメッセージを患者の使用言語に翻訳し、また、患者側端末装置３０からネットワーク１１を送信される患者からの文字列データとしてのメッセージを医師の使用言語に翻訳し、翻訳結果としての文字列データ及び音声データを出力する。なお、翻訳部４１３が翻訳を行う代わりに、例えば、インターネット上に存在する翻訳サイトを利用して翻訳結果を取得するようにしてもよい。

画面データ生成部４１４は、医師及び患者双方のメッセージとその翻訳結果が順次表示されるチャット画面を表示するための画面データを生成する。生成された画面データは、通信部４３によりネットワーク１１を介して医師側端末装置２０及び患者側端末装置３０に送信される。なお、医師及び患者の少なくとも一方からメッセージが追加送信された場合、画面データの更新分として、追加されたメッセージとその翻訳結果の文字列データ及び音声データが、通信部４３によりネットワーク１１を介して医師側端末装置２０及び患者側端末装置３０に送信される。

なお、翻訳結果の音声データは、医師側端末装置２０及び患者側端末装置３０において、翻訳結果を音声出力する際に再生される。ただし、翻訳結果の音声データを用いず、医師側端末装置２０の翻訳チャットアプリ２０１及び患者側端末装置３０の汎用ブラウザ３３が、翻訳結果の文字列データに基づいて合成音声を出力するようにしてもよい。

音声認識部４１５は、医師及び患者からのメッセージが音声データで送信された場合、それぞれの音声認識を行い、音声データのメッセージを文字列データに変換する。

記憶部４２は、サーバ装置４０をなすコンピュータが備えるメモリやストレージに相当する。記憶部４２は、ユーザ情報４２１、及びチャットルーム情報４２２を保持する。ユーザ情報４２１には、医師側端末装置２０のユーザである医師に関する情報が格納されている。チャットルーム情報４２２には、医師側端末装置２０のユーザである医師等に対して割り当てられているチャットルームに関する情報が格納されている。

図３は、ユーザ情報４２１の一例を示している。ユーザ情報４２１には、ユーザＩＤに対応付けて、パスワード、ユーザ名、病院名、位置情報、連絡先、使用言語、及びチャットルームＩＤが格納されている。

ユーザＩＤは、医師側端末装置２０のユーザ（医師）を一意に特定するための識別情報である。パスワードは、医師側端末装置２０がサーバ装置４０に接続する際に必要となる情報である。位置情報は、医師側端末装置２０が存在している位置または医師側端末装置２０が利用される病院等の位置を表す緯度、経度等の情報であり、医師側から予め登録されている。連絡先は、ユーザの電話番号、メールアドレス等であり、医師側から予め登録されている。使用言語は、ユーザ（医師）の使用言語であり、医師側から予め登録されている。チャットルームＩＤは、ユーザに対して予め割り当てられたユーザ専用のチャットルームを一意に特定するための識別情報である。なお、チャットルームＩＤについては、医師側からＱＲコードの発行を要求される毎、チャットルーム設定部４１１が動的に割り当てるようにしてもよい。

図４は、チャットルーム情報４２２の一例を示している。チャットルーム情報４２２には、チャットルームＩＤに対応付けて、ユーザＩＤ、ＵＲＬ、コード有効期限、医師側言語、及び患者側言語が格納されている。

ＵＲＬは、チャットルームにアクセスするためのインターネット上のアドレス情報である。コード有効期限は、文字列データとしてのＵＲＬを画像化したＱＲコードの有効期限である。有効期限は、チャットルーム設定部４１１により記録される。

医師側言語は、医師が使用する言語を表す情報であり、医師側から予め登録されているが、変更することもできる。患者側言語は、患者が使用する言語を表す情報であり、使用言語特定部４１２によって記録される。

図２に戻る。通信部４３は、サーバ装置４０をなすコンピュータが備える通信モジュールに相当する。通信部４３は、有線または無線によりネットワーク１１を介して、医師側端末装置２０及び患者側端末装置３０と各種のデータを通信する。操作部４４は、サーバ装置４０をなすコンピュータが備える入力デバイスに相当する。操作部４４は、サーバ装置４０を管理するオペレータの操作を受け付けて処理部４１に出力する。表示部４５は、サーバ装置４０をなすコンピュータが備える出力デバイスに相当する。表示部４５は、サーバ装置４０を管理するオペレータが操作入力を行う操作画面等を表示する。

＜翻訳チャットシステム１０による動作＞
次に、翻訳チャットシステム１０による動作を説明する。

図５は、翻訳チャットシステム１０によるチャット開始時の処理の一例を説明するシーケンス図である。

はじめに、ユーザ（医師）からの操作に応じて、医師側端末装置２０が、翻訳チャットアプリ２０１を起動し、サーバ装置４０にログインする（ステップ１０１）。

図６は、翻訳チャットアプリ２０１が起動されたことにより医師側端末装置２０に表示されるログイン画面１１０の表示例を示している。ログイン画面１１０には、ユーザＩＤ入力欄１１１、及びパスワード入力欄１１２が設けられている。

ユーザＩＤ入力欄１１１及びパスワード入力欄１１２に対してユーザが正確なユーザＩＤ及びパスワードを入力した場合、医師側端末装置２０はホーム画面（図７）を表示する。なお、ユーザが過去に該ログイン画面１１０に対してログインしたことがある場合、ログイン画面１１０の表示を省略するようにしてもよい。

図７は、ホーム画面１２０の表示例を示している。ホーム画面１２０には、ＱＲコード表示ボタン１２１、チャット履歴表示ボタン１２２、チャット履歴消去ボタン１２３、及びチャット保存ボタン１２４が設けられている。

ＱＲコード表示ボタン１２１は、患者側端末装置３０がチャットルームに接続するために必要な接続情報としてのＱＲコードを表示させるためのボタンである。チャット履歴表示ボタン１２２は、チャット履歴を表示させるためのボタンである。チャット履歴消去ボタン１２３は、チャット履歴を消去させるためのボタンである。チャット保存ボタン１２４は、直前に行っていたチャット内容を保存させるためのボタンである。

図５に戻る。次に、ホーム画面１２０のＱＲコード表示ボタン１２１に対するユーザからの操作に応じて、医師側端末装置２０の翻訳チャットアプリ２０１が、サーバ装置４０に対してＱＲコードの発行を要求する（ステップＳ１０２）。

次に、医師側端末装置２０からの要求に応じて、サーバ装置４０のチャットルーム設定部４１１が、記憶部４２のユーザ情報４２１及びチャットルーム情報４２２を参照し、医師側端末装置２０のユーザ専用のチャットルームにアクセスするためのＵＲＬを画像化したＱＲコードを発行する。具体的には、ユーザ情報４２１を参照して、ユーザＩＤに対応するチャットルームＩＤを特定し、次に、チャットルーム情報４２２を参照して、チャットルームＩＤに対応するＵＲＬを特定し、特定したＵＲＬを表すＱＲコードを発行する。そして、通信部４３が、ＱＲコードを医師側端末装置２０に送信する（ステップＳ２０１）。

次に、医師側端末装置２０の翻訳チャットアプリ２０１が、サーバ装置４０からのＱＲコードをＱＲコード画面１３０（図８）を表示する（ステップＳ１０３）。医師は、医師側端末装置２０に表示されたＱＲコード画面１３０を患者に見せて、ＱＲコードの読み取りを促す。

図８は、ＱＲコード画面１３０の表示例を示している。ＱＲコード画面１３０には、ＱＲコード表示領域１３１、及び説明文表示領域１３２が設けられている。

ＱＲコード表示領域１３１には、サーバ装置４０から送信されたＱＲコードが表示される。説明文表示領域１３２には、ＱＲコードを読み取るように促す説明文が複数の言語によって表示される。各言語の説明文の横には、スピーカボタン１３３が設けられている。スピーカボタン１３３は、各言語の説明文を音声によって出力させるためのボタンである。同図の場合、説明文表示領域１３２には、英語、スペイン語、中国語、韓国語、タイ語によって説明文が表示されているが、説明文の言語はこれらに限るものではない。

図５に戻る。次に、ＱＲコードの読み取りを促された患者からの操作に応じて、患者側端末装置３０が、ＱＲコードリーダ３２を起動する（ステップＳ３０１）。次に、患者側端末装置３０のユーザである患者が、医師側端末装置２０に表示されているＱＲコード画面１３０に患者側端末装置３０のカメラ３１を向けると、ＱＲコードリーダ３２が、カメラ３１によって撮像された画像からＱＲコード画面１３０に表示されているＱＲコードを読み取る。読み取ったＱＲコードはＵＲＬを表すので、さらに、ＱＲコードリーダ３２が、汎用ブラウザ３３を起動し、該ＵＲＬを汎用ブラウザ３３に出力する（ステップＳ３０２）。次に、汎用ブラウザ３３が、該ＵＲＬにアクセスしてＷｅｂデータの送信を要求するためのｈｔｔｐリクエストを送信する（ステップＳ３０３）。

次に、ｈｔｔｐリクエストを受信したことに応じ、サーバ装置４０の使用言語特定部４１２が、ｈｔｔｐリクエストに含まれる言語コードに基づき、患者側端末装置３０のユーザの使用言語を特定する。そして、通信部４３が、患者側端末装置３０からチャットルームにアクセスがあった旨、及び患者の使用言語を医師側端末装置２０に送信する（ステップＳ２０２）。次に、サーバ装置４０の画面データ生成部４１４が、ｈｔｔｐリクエストに対するレスポンスとして、Ｗｅｂページとしてのチャット画面２１０（図１２）を表示するためのＷｅｂデータを患者側端末装置３０に送信する（ステップＳ２０３）。サーバ装置４０からのＷｅｂデータの送信に応じ、患者側端末装置３０では、汎用ブラウザ３３が、チャット画面２１０（図１１）を表示する（ステップＳ３０４）。

次に、汎用ブラウザ３３が、ステップＳ３０２で読み取ったＵＲＬを指定し、サーバ装置４０に対して、医師側端末装置２０からメッセージが送信される毎に該メッセージとその翻訳結果の送信を要求するための送信メッセージ待ちのリクエスト（ロングポーリング）を送信する（ステップＳ３０５）。

一方、医師側端末装置２０では、サーバ装置４０からの送信に応じ、翻訳チャットアプリ２０１が、患者側端末装置３０からチャットルームにアクセスがあった旨、及び患者の使用言語を含むアクセス通知画面１４０（図９）を表示する（ステップＳ１０４）。

図９は、アクセス通知画面１４０の表示例を示している。アクセス通知画面１４０には、アクセス通知領域１４１、使用言語選択ボタン１４２、音声入力ボタン１４３，１４４、メッセージ入力欄１４５、及び送信ボタン１４６が設けられている。

アクセス通知領域１４１には、患者側端末装置３０からチャットルームにアクセスがあった旨、及び患者の使用言語が表示される。同図の場合、アクセス通知領域１４１には、患者の使用言語が英語である旨が表示されている。

使用言語選択ボタン１４２は、医師の使用言語を変更するためのボタンである。音声入力ボタン１４３は、医師からのメッセージを、患者の使用言語で音声入力するためのボタンである。音声入力ボタン１４４は、医師からのメッセージを、医師の使用言語で音声入力するためのボタンである。メッセージ入力欄１４５には、医師がメッセージを文字により入力することができる。なお、ユーザが音声入力ボタン１４３，１４４を操作して音声入力を行った場合、その音声データはサーバ装置４０の音声認識部４１５にて文字列データに変換され、メッセージ入力欄１４５に反映される。送信ボタン１４６は、メッセージ入力欄１４５に入力されたメッセージのサーバ装置４０への送信させるためのボタンである。

図５に戻る。医師がメッセージ入力欄１４５にメッセージを入力（音声入力を含む）し、送信ボタン１４６を操作した場合、医師からのメッセージが、サーバ装置４０に送信される。この後、医師側端末装置２０には、チャット画面１５０（図１０）が表示される（ステップＳ１０５）。この後、処理はチャット中の処理（図１２及び図１３）に移行する。

以上に説明したチャット開始時の処理によれば、医師側端末装置２０は、チャットルームへの接続情報をＱＲコードとして表示することができる。

一方、患者側端末装置３０は、ＱＲコードリーダ３２によってＱＲコードを読み取るだけの極めて簡単な操作により、チャットルームに接続することができる。

次に、図１０は、医師側端末装置２０におけるチャット画面１５０の表示例である。

チャット画面１５０には、アクセス通知画面１４０と同様、使用言語選択ボタン１４２、音声入力ボタン１４３，１４４、メッセージ入力欄１４５、及び送信ボタン１４６が設けられている。

さらに、チャット画面１５０には、医師からのメッセージとその翻訳結果を含む吹き出し１５１、及び患者からのメッセージとその翻訳結果を含む吹き出し１５２が順次追加表示される。吹き出し１５１，１５２内の翻訳結果の横には、スピーカボタン１５３が設けられている。スピーカボタン１５３は、翻訳結果の音声出力をユーザが指示するためのボタンである。なお、ユーザがスピーカボタン１５３を操作しなくても、吹き出し１５１，１５２の表示とともに翻訳結果の音声出力を行うように設定することも可能である。このように設定すれば、ユーザは、画面を注視していなくても相手（患者）のコメントを聞いて理解することが可能となる。

次に、図１１は、患者側端末装置３０におけるチャット画面２１０の表示例である。患者側端末装置３０におけるチャット画面２１０には、使用言語選択ボタン２１１、音声入力ボタン２１２、メッセージ入力欄２１３、及び送信ボタン２１４が設けられている。

使用言語選択ボタン２１１は、サーバ装置４０の使用言語特定部４１２によって特定された患者の使用言語の変更するためのボタンである。音声入力ボタン２１２は、患者からのメッセージを、患者の使用言語で音声入力するためのボタンである。メッセージ入力欄２１３には、患者がメッセージを文字により入力することができる。なお、ユーザが音声入力ボタン２１２を操作して音声入力を行った場合、その音声データはサーバ装置４０の音声認識部４１５にて文字列データに変換され、メッセージ入力欄２１３に反映される。送信ボタン２１４は、メッセージ入力欄２１３に入力されたメッセージのサーバ装置４０への送信をユーザが指示するためのボタンである。

チャット画面２１０には、医師からのメッセージとその翻訳結果を含む吹き出し２２１、及び、患者からのメッセージとその翻訳結果を含む吹き出し２２２が順次追加表示される。吹き出し２２１，２２２内の翻訳結果の横には、スピーカボタン２２３が設けられている。スピーカボタン２２３は、翻訳結果の音声出力をユーザが指示するためのボタンである。なお、ユーザがスピーカボタン２２３を操作しなくても、吹き出し２２１，２２２の表示とともに翻訳結果の音声出力を行うように設定することも可能である。このように設定すれば、ユーザは、画面を注視していなくても相手（医者）のコメントを聞いて理解することが可能となる。

次に、図１２及び図１３は、翻訳チャットシステム１０によるチャット中の処理の一例を説明するシーケンス図であり、図１２は医師がメッセージを入力した場合、図１３は患者がメッセージを入力した場合の処理を示している。

はじめに、図１２を参照して医師がメッセージを入力した場合について説明する。

医師側端末装置２０において、医師がチャット画面１５０のメッセージ入力欄１４５にメッセージを入力し、送信ボタン１４６を操作した場合、翻訳チャットアプリ２０１が、該メッセージをチャットルームのＵＲＬを指定してサーバ装置４０に送信する（ステップＳ１１１）。

医師側端末装置２０から送信された医師からのメッセージを受信したサーバ装置４０では、翻訳部４１３が、医師からのメッセージを患者の使用言語に翻訳する（ステップＳ２１１）。次に、画面データ生成部４１４が、医師からのメッセージ及びその翻訳結果を医師側端末装置２０に送信し（ステップＳ２１２）、ロングポーリングに対するレスポンスとして、医師からのメッセージ並びにその翻訳結果の文字列データ及び音声データを患者側端末装置３０に送信する（ステップＳ２１３）。

医師からのメッセージ並びにその翻訳結果の文字列データ及び音声データを受信した医師側端末装置２０では、翻訳チャットアプリ２０１が、ステップＳ１１１で送信したメッセージとその翻訳結果からなる吹き出し１５１をチャット画面１５０に追加表示する（ステップＳ１１２）。なお、チャット画面１５０のスピーカボタン１５３が操作された場合、翻訳結果の音声データが再生される。

一方、医師からのメッセージ並びにその翻訳結果の文字列データ及び音声データを受信した患者側端末装置３０では、汎用ブラウザ３３が、医師からのメッセージとその翻訳結果からなる吹き出し２２１をチャット画面２１０に追加表示する（ステップＳ３１１）。なお、チャット画面２１０のスピーカボタン２２３が操作された場合、翻訳結果の音声データが再生される。

次に、図１３を参照して患者がメッセージを入力した場合について説明する。

患者側端末装置３０において、患者がチャット画面２１０のメッセージ入力欄２１３にメッセージを入力し、送信ボタン２１４を操作した場合、汎用ブラウザ３３が、該メッセージをチャットルームのＵＲＬを指定してサーバ装置４０に送信する（ステップＳ３２１）。

患者側端末装置３０から送信された患者からのメッセージを受信したサーバ装置４０では、翻訳部４１３が、患者からのメッセージを医師の使用言語に翻訳する（ステップＳ２２１）。次に、画面データ生成部４１４が、患者からのメッセージ並びにその翻訳結果の文字列データ及び音声データを患者側端末装置３０に送信し（ステップＳ２２２）、患者からのメッセージ並びにその翻訳結果の文字列データ及び音声データを医師側端末装置２０に送信する（ステップＳ２２３）。

患者からのメッセージ並びにその翻訳結果の文字列データ及び音声データを受信した患者側端末装置３０では、汎用ブラウザ３３が、患者からのメッセージとその翻訳結果からなる吹き出し２２２をチャット画面２１０に追加表示する（ステップＳ３２２）。なお、チャット画面２１０のスピーカボタン２２３が操作された場合、翻訳結果の音声データが再生される。

一方、患者からのメッセージ並びにその翻訳結果の文字列データ及び音声データを受信した医師側端末装置２０では、翻訳チャットアプリ２０１が、患者からのメッセージ及びその翻訳結果からなる吹き出し１５２をチャット画面１５０に追加表示する（ステップＳ１２１）。なお、チャット画面１５０のスピーカボタン１５３が操作された場合、翻訳結果の音声データが再生される。

上述したチャット中の処理は、例えば、患者側端末装置３０が汎用ブラウザ３３を閉じてチャットルームへのアクセスを止めた時に終了される。

以上に説明したチャット中の処理によれば、医師からのメッセージは患者の使用言語に翻訳され、患者からのメッセージは医師の使用言語に翻訳されるので、使用言語が異なる医師と患者との対話を、より簡単に、且つ効果的に行うことができる。

＜翻訳チャットシステム１０の変形例＞
次に、図１４は、翻訳チャットシステム１０の変形例を示している。

該変形例は、図１の翻訳チャットシステム１０におけるサーバ装置４０の機能ブロックを医師側端末装置２０に移し、サーバ装置４０を省略したものである。該変形例における医師側端末装置２０には、上述した翻訳チャットアプリ２０１による機能に加えてサーバ装置４０としても機能するための翻訳チャットアプリ２０２がインストールされている。

図１５は、翻訳チャットシステム１０の変形例（図１４）における医師側端末装置２０の構成例を示している。なお、該医師側端末装置２０の構成要素のうち、サーバ装置４０の構成要素と共通するものには、同一の符号を付してその説明を省略する。

医師側端末装置２０は、処理部２１、記憶部２２、通信部２３、操作部２４、及び表示部２５を備える。処理部２１、記憶部２２、通信部２３、操作部２４、及び表示部２５は、サーバ装置４０の処理部４１、記憶部４２、通信部４３、操作部４４、及び表示部４５に相当する。

処理部２１は、サーバ装置４０の処理部４１（図２）と同様、チャットルーム設定部４１１、使用言語特定部４１２、翻訳部４１３、画面データ生成部４１４、及び音声認識部４１５の各機能ブロックを含む。これの機能ブロックは、処理部２１をなすＣＰＵが翻訳チャットアプリ２０２を実行することによって実現される。

図１４に示された翻訳チャットシステム１０の変形例によれば、ネットワーク１１を介して接続された医師側端末装置２０と患者側端末装置３０との間でチャットを行うことができる。

さらに他の変形例として、医師側端末装置２０と患者側端末装置３０とが、ネットワーク１１を介することなく、Ｐ２Ｐ(Peer to Peer)で接続するようにしてもよい。

本発明は、上述した実施形態に限定されるものではなく、様々な変形が可能である。例えば、上述した実施形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態の構成の一部を他の実施形態の構成に置き換えたり、追加したりすることが可能である。

また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ(Solid State Drive)等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

１０・・・翻訳チャットシステム、１１・・・ネットワーク、２０・・・端末装置（医師側端末装置）、２０１，２０２・・・翻訳チャットアプリ、２１・・・処理部、２２・・・記憶部、２３・・・通信部、２４・・・操作部、２５・・・表示部、３０・・・端末装置（患者側端末装置）、３１・・・カメラ、３２・・・ＱＲコードリーダ、３３・・・汎用ブラウザ、４０・・・サーバ装置、４１・・・処理部、４１１・・・チャットルーム設定部、４１２・・・使用言語特定部、４１３・・・翻訳部、４１４・・・画面データ生成部、４１５・・・音声認識部、４２１・・・ユーザ情報、４２２・・・チャットルーム情報、４２・・・記憶部、４３・・・通信部、４４・・・操作部、４５・・・表示部、１１０・・・ログイン画面、１１１・・・ユーザＩＤ入力欄、１１２・・・パスワード入力欄、１２０・・・ホーム画面、１２１・・・ＱＲコード表示ボタン、１２２・・・チャット履歴表示ボタン、１２３・・・チャット履歴消去ボタン、１２４・・・チャット保存ボタン、１３０・・・ＱＲコード画面、１３１・・・ＱＲコード表示領域、１３２・・・説明文表示領域、１３３・・・スピーカボタン、１４０・・・アクセス通知画面、１４１・・・アクセス通知領域、１４２・・・使用言語選択ボタン、１４３・・・音声入力ボタン、１４４・・・音声入力ボタン、１４５・・・メッセージ入力欄、１４６・・・送信ボタン、１５０・・・チャット画面、１５３・・・スピーカボタン、２１０・・・チャット画面、２１１・・・使用言語選択ボタン、２１２・・・音声入力ボタン、２１３・・・メッセージ入力欄、２１４・・・送信ボタン、２２３・・・スピーカボタン、

Claims (13)

1. サーバ装置、及び前記サーバ装置にネットワークを介して接続する複数の端末装置を含む翻訳チャットシステムであって、
   前記サーバ装置は、
   第１の端末装置からの要求に応じ、前記第１の端末装置のユーザに対応するチャットルームへの接続情報を発行するチャットルーム設定部と、
   前記第１の端末装置から送信されたメッセージ及びその翻訳結果、並びに、前記第１の端末装置に表示された前記接続情報に基づいて前記チャットルームにアクセスしてきた、前記第１の端末装置とは異なる第２の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するためのデータを生成する画面データ生成部と、を備え、
   前記第１の端末装置は、発行された前記接続情報を表示し、
   前記第２の端末装置は、前記第１の端末装置に表示された前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスする
   ことを特徴とする翻訳チャットシステム。
2. 請求項１に記載の翻訳チャットシステムであって、
   前記サーバ装置は、
   前記接続情報に基づいて前記チャットルームにアクセスしてきた、前記第２の端末装置のユーザの使用言語を特定する使用言語特定部と、
   前記第１の端末装置から送信されたメッセージを、特定された前記第２の端末装置のユーザの使用言語に翻訳し、また、前記第２の端末装置から送信されたメッセージを、予め設定されている前記第１の端末装置のユーザの使用言語に翻訳する翻訳部と、を備える
   ことを特徴とする翻訳チャットシステム。
3. 請求項２に記載の翻訳チャットシステムであって、
   前記使用言語特定部は、前記第２の端末装置から送信されたｈｔｔｐリクエストに含まれる言語コードに基づき、前記第２の端末装置のユーザの使用言語を特定する
   ことを特徴とする翻訳チャットシステム。
4. 請求項２または３に記載の翻訳チャットシステムであって、
   前記サーバ装置の前記使用言語特定部は、前記第２の端末装置のユーザの使用言語を前記第１の端末装置に送信し、
   前記第１の端末装置は、ユーザに対して、前記第２の端末装置のユーザの使用言語を通知する
   ことを特徴とする翻訳チャットシステム。
5. 請求項１〜４のいずれか一項に記載の翻訳チャットシステムであって、
   前記チャットルーム設定部は、有効期限を設けて前記接続情報を発行する
   ことを特徴とする翻訳チャットシステム。
6. 請求項１〜５のいずれか一項に記載の翻訳チャットシステムであって、
   前記チャットルーム設定部は、前記チャットルームへの前記接続情報としてＱＲコードを発行し、
   前記第２の端末装置は、ＱＲコードリーダによって前記ＱＲコードを読み取る
   ことを特徴とする翻訳チャットシステム。
7. 請求項１〜６のいずれか一項に記載の翻訳チャットシステムであって、
   前記チャットルーム設定部は、前記第２の端末装置の位置情報を取得し、前記第１の端末装置と前記第２の端末装置との距離に基づいて前記第２の端末装置による前記チャットルームへのアクセスの可否を判断する
   ことを特徴とする翻訳チャットシステム。
8. 請求項１〜７のいずれか一項に記載の翻訳チャットシステムであって、
   前記第１の端末装置は、専用アプリケーションプログラムによって前記チャットルームの画面を表示し、
   前記第２の端末装置は、汎用ブラウザにより前記チャットルームの画面を表示する
   ことを特徴とする翻訳チャットシステム。
9. 請求項１〜８のいずれか一項に記載の翻訳チャットシステムであって、
   前記サーバ装置は、
   前記第１の端末装置及び前記第２の端末装置の少なくとも一方から音声データとして送信された前記メッセージを文字列データに変換する音声認識部、を備える
   ことを特徴とする翻訳チャットシステム。
10. 請求項１〜８のいずれか一項に記載の翻訳チャットシステムであって、
    前記第１の端末装置及び前記第２の端末装置の少なくとも一方は、前記チャットルームの画面に表示された前記翻訳結果に対応する音声を出力する
    ことを特徴とする翻訳チャットシステム。
11. サーバ装置、及び前記サーバ装置にネットワークを介して接続する複数の端末装置を含む翻訳チャットシステムによるチャット制御方法であって、
    前記サーバ装置が、第１の端末装置からの要求に応じ、前記第１の端末装置のユーザに対応するチャットルームへの接続情報を発行し、
    前記第１の端末装置が、発行された前記接続情報を表示し、
    前記第１の端末装置とは異なる第２の端末装置が、前記第１の端末装置に表示された前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスし、
    前記サーバ装置が、前記第１の端末装置から送信されたメッセージ及びその翻訳結果、並びに、前記第２の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するためのデータを生成する
    ステップを含むことを特徴とするチャット制御方法。
12. 複数の端末装置間で行われるチャットを制御するサーバ装置であって、
    第１の端末装置からの要求に応じ、前記第１の端末装置のユーザに対応するチャットルームへの接続情報を発行するチャットルーム設定部と、
    前記第１の端末装置から送信されたメッセージ及びその翻訳結果、並びに、前記第１の端末装置に表示された前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスした第２の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示するためのデータを生成する画面データ生成部と、
    を備えることを特徴とするサーバ装置。
13. 端末装置としてのコンピュータに、
    サーバ装置に対してユーザに対応するチャットルームへの接続情報の発行を要求し、
    前記サーバ装置によって発行された前記接続情報を表示し、
    前記サーバ装置から送信された、ユーザが入力したメッセージ及びその翻訳結果、並びに、表示した前記接続情報を読み取り、読み取った前記接続情報に基づいて前記チャットルームにアクセスした他の端末装置から送信されたメッセージ及びその翻訳結果が順次表示される前記チャットルームの画面を表示する
    ステップを含む処理を実行させることを特徴とするプログラム。

Images