JP2020507165A - データ可視化のための情報処理方法及び装置 - Google Patents
データ可視化のための情報処理方法及び装置 Download PDFInfo
- Publication number
- JP2020507165A JP2020507165A JP2019542091A JP2019542091A JP2020507165A JP 2020507165 A JP2020507165 A JP 2020507165A JP 2019542091 A JP2019542091 A JP 2019542091A JP 2019542091 A JP2019542091 A JP 2019542091A JP 2020507165 A JP2020507165 A JP 2020507165A
- Authority
- JP
- Japan
- Prior art keywords
- input information
- information
- recognition result
- processing method
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013079 data visualisation Methods 0.000 title claims abstract description 34
- 230000010365 information processing Effects 0.000 title claims abstract description 30
- 238000003672 processing method Methods 0.000 title claims abstract description 28
- 230000003993 interaction Effects 0.000 claims abstract description 34
- 238000000034 method Methods 0.000 claims abstract description 33
- 238000012790 confirmation Methods 0.000 claims abstract description 10
- 238000004458 analytical method Methods 0.000 claims abstract description 7
- 238000012800 visualization Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 238000003058 natural language processing Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/338—Presentation of query results
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/04—Segmentation; Word boundary detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/3331—Query processing
- G06F16/334—Query execution
- G06F16/3344—Query execution using natural language analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/36—Creation of semantic tools, e.g. ontology or thesauri
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/205—Parsing
- G06F40/211—Syntactic parsing, e.g. based on context-free grammar [CFG] or unification grammars
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/14—Speech classification or search using statistical models, e.g. Hidden Markov Models [HMMs]
- G10L15/142—Hidden Markov Models [HMMs]
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/225—Feedback of the input speech
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Artificial Intelligence (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Probability & Statistics with Applications (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
Claims (16)
- データ可視化のための情報処理方法であって、
受信した入力情報に対して認識可能性分析を行うステップと、
前記入力情報が正しく認識されたか否かを確定し、前記入力情報が正しく認識された場合に前記入力情報の認識結果に基づいて前記認識結果と対応するインタラクション命令を確定し、さらに前記インタラクション命令を実行するステップと、を含む
ことを特徴とするデータ可視化のための情報処理方法。 - 前記入力情報が正しく認識されたか否かを確定する前記ステップは、
認識可能な前記入力情報を所定の表現形態を有するメディア情報に変換し、前記メディア情報の確認情報に基づいて前記入力情報が正しく認識されたか否かを確定するステップを含み、
前記確認情報は、前記メディア情報が前記入力情報を正しく表現したか否かを指示するためのものである
ことを特徴とする請求項1に記載のデータ可視化のための情報処理方法。 - 前記入力情報の認識結果に基づいて前記認識結果と対応するインタラクション命令を確定する前記ステップは、
データベースから前記認識結果とマッチするものを検索するステップと、
前記データベースに前記認識結果と対応するデータフィールドが存在する場合、前記認識結果に基づいて前記認識結果と対応するインタラクション命令を直接確定するステップを含む
ことを特徴とする請求項1に記載のデータ可視化のための情報処理方法。 - 前記入力情報の認識結果に基づいて前記認識結果と対応するインタラクション命令を確定する前記ステップは、
データベースから前記認識結果とマッチするものを検索し、前記データベースに前記認識結果と対応するデータフィールドが存在しない場合、前記認識結果に基づいてキーワードセットを確定するステップと、
前記キーワードセットに基づいて前記認識結果と対応するインタラクション命令を確定するステップを含む
ことを特徴とする請求項3に記載のデータ可視化のための情報処理方法。 - 前記入力情報を受信する場合、前記入力情報の受信が成功したか否かを判断し、前記入力情報の受信が成功しなかった場合、受信失敗を指示する第1フィードバック情報を生成するステップを更に含む
ことを特徴とする請求項1に記載のデータ可視化のための情報処理方法。 - 前記受信した入力情報に対して認識可能性分析を行う前記ステップは、
前記入力情報を認識するための認識モデルに基づいて前記入力情報を分析して、前記入力情報の認識可能性を確定するステップと、
前記入力情報が認識されることができなかった場合、前記入力情報が認識不可能であると指示する第2フィードバック情報を生成するステップと、を含む
ことを特徴とする請求項1に記載のデータ可視化のための情報処理方法。 - 前記入力情報が正しく認識されなかった場合、前記入力情報の認識エラーを指示する第3フィードバック情報を生成する
ことを特徴とする請求項2に記載のデータ可視化のための情報処理方法。 - 前記入力情報の認識結果に基づいてキーワードセットを確定するステップは、
前記入力情報をセマンティックテキストとして認識し、前記セマンティックテキストから前記キーワードセットを抽出するステップを含み、
前記キーワードセットは、少なくとも一つのフィールドを含む
ことを特徴とする請求項4に記載のデータ可視化のための情報処理方法。 - 前記キーワードセットに基づいて前記認識結果と対応するインタラクション命令を確定する前記ステップは、
前記キーワードセットに基づいてデータベースにおけるデータフィールドと比較するステップと、
前記キーワードセットにおけるフィールドが前記データベースにおけるデータフィールドとマッチした場合、マッチング結果に基づいて前記インタラクション命令を確定するステップと、を含む
ことを特徴とする請求項4に記載のデータ可視化のための情報処理方法。 - 前記キーワードセットに基づいて前記認識結果と対応するインタラクション命令を確定する前記ステップは、
前記キーワードセットにおけるフィールドが前記データベースにおけるデータフィールドとマッチしない場合、第4フィードバック情報を生成するステップを更に含み、
前記第4フィードバック情報は、前記キーワードセットにおけるフィールドが前記データベースにおけるデータフィールドとマッチできないことを指示するものである
ことを特徴とする請求項9に記載のデータ可視化のための情報処理方法。 - 前記入力情報は、音声、タッチ又は身体動作のうちの少なくとも一つを含む
ことを特徴とする請求項1乃至10のいずれか1項に記載のデータ可視化のための情報処理方法。 - 前記入力情報を受信する場合、前記入力情報の受信が成功したか否かを判断するステップを更に含み、
前記入力情報は音声を含み、
前記入力情報の受信が成功したか否かを判断するステップは、
第1閾値に基づいて前記音声の受信が成功したか否かを判断するステップを含む
ことを特徴とする請求項11に記載のデータ可視化のための情報処理方法。 - 前記第1閾値は、音声長さ閾値、音声強さ閾値、音声周波数領域閾値のいずれか一つ又は複数の組み合わせを含む
ことを特徴とする請求項12に記載のデータ可視化のための情報処理方法。 - 前記メディア情報は、ビデオ、オーディオ、ピクチャ又は文字のうちの少なくとも一つを含む
ことを特徴とする請求項2に記載のデータ可視化のための情報処理方法。 - データ可視化のための情報処理装置であって、
プロセッサと、
命令を記憶するためのメモリと、を備え、
前記命令が実行されると、前記プロセッサにより請求項1乃至14のいずれか1項に記載のデータ可視化のための情報処理方法のステップが実行される
ことを特徴とするデータ可視化のための情報処理装置。 - コンピュータ読取可能なプログラム命令を記憶しているコンピュータ読取可能な記憶媒体であって、
前記コンピュータの読取可能なプログラム命令が実行されると、請求項1乃至14のいずれか1項に記載のデータ可視化のための情報処理方法のステップを実現する
ことを特徴とするコンピュータ読取可能な記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711166559.1A CN108108391A (zh) | 2017-11-21 | 2017-11-21 | 用于数据可视化的信息的处理方法以及装置 |
CN201711166559.1 | 2017-11-21 | ||
PCT/CN2018/116415 WO2019101067A1 (zh) | 2017-11-21 | 2018-11-20 | 用于数据可视化的信息的处理方法以及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020507165A true JP2020507165A (ja) | 2020-03-05 |
JP6887508B2 JP6887508B2 (ja) | 2021-06-16 |
Family
ID=62207647
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019542091A Active JP6887508B2 (ja) | 2017-11-21 | 2018-11-20 | データ可視化のための情報処理方法及び装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20190213998A1 (ja) |
JP (1) | JP6887508B2 (ja) |
KR (1) | KR20190107063A (ja) |
CN (1) | CN108108391A (ja) |
WO (1) | WO2019101067A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108108391A (zh) * | 2017-11-21 | 2018-06-01 | 众安信息技术服务有限公司 | 用于数据可视化的信息的处理方法以及装置 |
CN109241464A (zh) * | 2018-07-19 | 2019-01-18 | 上海小蚁科技有限公司 | 用于数据大屏的数据展示方法及装置、存储介质、终端 |
CN111510671A (zh) * | 2020-03-13 | 2020-08-07 | 海信集团有限公司 | 一种监控视频调取显示的方法及智能终端 |
CN111610949A (zh) * | 2020-05-28 | 2020-09-01 | 广州市玄武无线科技股份有限公司 | 数据大屏的展示方法及装置、电子设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000019307A1 (fr) * | 1998-09-25 | 2000-04-06 | Hitachi, Ltd. | Procede et dispositif d'interaction de traitement |
JP2002073322A (ja) * | 2000-08-29 | 2002-03-12 | Sharp Corp | オンデマンド・インタフェース装置とそのウィンドウ表示装置 |
US20090157405A1 (en) * | 2007-12-13 | 2009-06-18 | International Business Machines Corporation | Using partial information to improve dialog in automatic speech recognition systems |
US20140207452A1 (en) * | 2013-01-24 | 2014-07-24 | Microsoft Corporation | Visual feedback for speech recognition system |
WO2017130486A1 (ja) * | 2016-01-28 | 2017-08-03 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US20170270919A1 (en) * | 2016-03-21 | 2017-09-21 | Amazon Technologies, Inc. | Anchored speech detection and speech recognition |
WO2017168936A1 (ja) * | 2016-03-31 | 2017-10-05 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
CN107300970A (zh) * | 2017-06-05 | 2017-10-27 | 百度在线网络技术(北京)有限公司 | 虚拟现实交互方法和装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103065640B (zh) * | 2012-12-27 | 2017-03-01 | 上海华勤通讯技术有限公司 | 语音信息可视化的实现方法 |
CN105005578A (zh) * | 2015-05-21 | 2015-10-28 | 中国电子科技集团公司第十研究所 | 多媒体目标信息可视化分析系统 |
CN106980689B (zh) * | 2017-03-31 | 2020-07-14 | 江苏赛睿信息科技股份有限公司 | 一种通过语音交互实现数据可视化的方法 |
CN107199971B (zh) * | 2017-05-03 | 2020-03-13 | 深圳车盒子科技有限公司 | 车载语音交互方法、终端及计算机可读存储介质 |
CN107193948B (zh) * | 2017-05-22 | 2018-04-20 | 邢加和 | 人机对话数据分析方法及装置 |
CN108108391A (zh) * | 2017-11-21 | 2018-06-01 | 众安信息技术服务有限公司 | 用于数据可视化的信息的处理方法以及装置 |
-
2017
- 2017-11-21 CN CN201711166559.1A patent/CN108108391A/zh active Pending
-
2018
- 2018-11-20 KR KR1020197023144A patent/KR20190107063A/ko active Search and Examination
- 2018-11-20 JP JP2019542091A patent/JP6887508B2/ja active Active
- 2018-11-20 WO PCT/CN2018/116415 patent/WO2019101067A1/zh active Application Filing
-
2019
- 2019-03-15 US US16/354,678 patent/US20190213998A1/en not_active Abandoned
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000019307A1 (fr) * | 1998-09-25 | 2000-04-06 | Hitachi, Ltd. | Procede et dispositif d'interaction de traitement |
JP2002073322A (ja) * | 2000-08-29 | 2002-03-12 | Sharp Corp | オンデマンド・インタフェース装置とそのウィンドウ表示装置 |
US20090157405A1 (en) * | 2007-12-13 | 2009-06-18 | International Business Machines Corporation | Using partial information to improve dialog in automatic speech recognition systems |
US20140207452A1 (en) * | 2013-01-24 | 2014-07-24 | Microsoft Corporation | Visual feedback for speech recognition system |
WO2017130486A1 (ja) * | 2016-01-28 | 2017-08-03 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US20170270919A1 (en) * | 2016-03-21 | 2017-09-21 | Amazon Technologies, Inc. | Anchored speech detection and speech recognition |
WO2017168936A1 (ja) * | 2016-03-31 | 2017-10-05 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
CN107300970A (zh) * | 2017-06-05 | 2017-10-27 | 百度在线网络技术(北京)有限公司 | 虚拟现实交互方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6887508B2 (ja) | 2021-06-16 |
US20190213998A1 (en) | 2019-07-11 |
KR20190107063A (ko) | 2019-09-18 |
CN108108391A (zh) | 2018-06-01 |
WO2019101067A1 (zh) | 2019-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102386854B1 (ko) | 통합 모델 기반의 음성 인식 장치 및 방법 | |
US10152965B2 (en) | Learning personalized entity pronunciations | |
US10114809B2 (en) | Method and apparatus for phonetically annotating text | |
US11797772B2 (en) | Word lattice augmentation for automatic speech recognition | |
US10672391B2 (en) | Improving automatic speech recognition of multilingual named entities | |
JP6484236B2 (ja) | オンライン音声翻訳方法及び装置 | |
JP6251958B2 (ja) | 発話解析装置、音声対話制御装置、方法、及びプログラム | |
US20160078020A1 (en) | Speech translation apparatus and method | |
US9484034B2 (en) | Voice conversation support apparatus, voice conversation support method, and computer readable medium | |
JP6887508B2 (ja) | データ可視化のための情報処理方法及び装置 | |
US20150179173A1 (en) | Communication support apparatus, communication support method, and computer program product | |
JP2016536652A (ja) | モバイル機器におけるリアルタイム音声評価システム及び方法 | |
CN113225612B (zh) | 字幕生成方法、装置、计算机可读存储介质及电子设备 | |
JP2012181358A (ja) | テキスト表示時間決定装置、テキスト表示システム、方法およびプログラム | |
JP2018045001A (ja) | 音声認識システム、情報処理装置、プログラム、音声認識方法 | |
KR102345625B1 (ko) | 자막 생성 방법 및 이를 수행하는 장치 | |
US10540968B2 (en) | Information processing device and method of information processing | |
JP2012018201A (ja) | テキスト補正方法及び認識方法 | |
KR102148021B1 (ko) | 딥러닝 텍스트 탐지 기술을 활용한 실생활 영상 속의 정보 검색 방법 및 그 장치 | |
JP5396530B2 (ja) | 音声認識装置および音声認識方法 | |
CN106980640B (zh) | 针对照片的交互方法、设备和计算机可读存储介质 | |
JP2012003090A (ja) | 音声認識装置および音声認識方法 | |
KR20130137367A (ko) | 이미지 기반 도서 관련 서비스 제공 시스템 및 방법 | |
JP2018045193A (ja) | 通信端末、音声変換方法、及びプログラム | |
JP2015207191A (ja) | 外国語会話理解支援装置、外国語会話理解支援方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190802 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200826 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200908 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210511 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6887508 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |