JP2015007928A - 情報処理装置、コンテンツ課金システム及びプログラム - Google Patents
情報処理装置、コンテンツ課金システム及びプログラム Download PDFInfo
- Publication number
- JP2015007928A JP2015007928A JP2013133262A JP2013133262A JP2015007928A JP 2015007928 A JP2015007928 A JP 2015007928A JP 2013133262 A JP2013133262 A JP 2013133262A JP 2013133262 A JP2013133262 A JP 2013133262A JP 2015007928 A JP2015007928 A JP 2015007928A
- Authority
- JP
- Japan
- Prior art keywords
- content
- person
- paying attention
- reaction
- photographing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 37
- 238000006243 chemical reaction Methods 0.000 claims abstract description 95
- 238000011156 evaluation Methods 0.000 claims description 67
- 238000004364 calculation method Methods 0.000 claims description 64
- 230000004044 response Effects 0.000 claims description 37
- 238000004891 communication Methods 0.000 claims description 21
- 230000008921 facial expression Effects 0.000 claims description 20
- 238000003384 imaging method Methods 0.000 abstract description 18
- 238000000034 method Methods 0.000 description 70
- 238000013500 data storage Methods 0.000 description 26
- 238000012545 processing Methods 0.000 description 11
- 238000004458 analytical method Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000008451 emotion Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 1
- 235000013361 beverage Nutrition 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0242—Determining effectiveness of advertisements
- G06Q30/0246—Traffic
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
コンテンツを表示する表示手段と、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する判断手段と、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備える。
コンテンツを表示する表示手段と、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してネガティブな反応に該当しているか否かを判断する判断手段と、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備える。
デジタルサイネージ装置2は、店舗などに設置され、広告主からの依頼を受けてコンテンツを再生する情報処理装置である。
図2はデジタルサイネージ装置2の主制御構成を示すブロック図である。
デジタルサイネージ装置2は、コンテンツの映像光を照射する投影部21と、投影部21から照射された映像光を背面で受けて前面に投影するスクリーン部22とを備えている。
投影部21は、制御部23と、プロジェクタ24と、記憶部25と、通信部26と、計時部35と、を備えている。プロジェクタ24、記憶部25、通信部26、計時部35は、図2に示すように制御部23に接続されている。
プログラム記憶部251には、制御部23で実行されるシステムプログラムや各種処理プログラム、これらのプログラムの実行に必要なデータ等が記憶されている。
映像データ記憶部252は、投影部21によりスクリーン部22に投影するコンテンツの映像データを記憶する。映像データは、動画データを構成する複数のフレーム画像の画像データ及び各フレーム画像に対応する音声データにより構成されている。映像データは、予めサーバ装置4から配信されたものが映像データ記憶部252に記憶されていることとするが、再生時にその都度サーバ装置4から配信されることとしてもよい。
再生時間帯テーブル記憶部253は、コンテンツ毎に(コンテンツを識別するための識別情報(ここでは、コンテンツID)に対応付けて)、そのコンテンツの映像データを再生する期間及び時間帯を示すテーブルを記憶する。
図3は、スクリーン部22の概略構成を示す正面図である。図3に示すようにスクリーン部22には、四角形の画像形成部27と、画像形成部27を支持する台座28とが備えられている。
カメラの光学系は、画像形成部27の前にいる人物を撮像可能な方向に向けられている。また、その撮像素子は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal-oxide Semiconductor)等のイメージセンサである。そして、撮像素子は、光学系を通過した光学像を2次元の画像信号に変換する。
撮像部30は、撮影手段、取得手段として機能する。
撮像部30、操作部32、音声出力部33、及び音声入力部34は、図2に示すように制御部23に接続されている。
図4はサーバ装置4の主制御構成を示すブロック図である。
サーバ装置4は、制御部41と、表示部42と、入力部43と、通信部44と、記憶部45と、計時部46と、を備えて構成されている。表示部42、入力部43、通信部44、記憶部45、計時部46は、制御部41に接続されている。
入力部43はキーボードとマウス等のポインティングデバイスとからなり、サーバ装置4の管理者による入力を受け付けてその操作情報を制御部41に出力する。
通信部44は、モデム、ルータ、ネットワークカード等により構成され、通信ネットワークN上のデジタルサイネージ装置2等の外部機器との通信を行う。
映像データ記憶部452は、デジタルサイネージ装置2で再生されるコンテンツの映像データを記憶する。
再生時間帯テーブル記憶部453は、コンテンツ毎に、デジタルサイネージ装置2においてそのコンテンツの映像データを再生する期間及び時間帯を示すテーブルを記憶する。
音声データ記憶部455は、デジタルサイネージ装置2から受信した音声データを、当該音声データが記録されたときに再生されていたコンテンツを識別するためのコンテンツIDと対応付けて記憶する。
ポジティブな反応の判断基準、ネガティブな反応の判断基準は、コンテンツの内容によって異なる。例えば、図5に示すコンテンツAは、飲料の宣伝を目的としたコンテンツであり、この場合、「笑顔」や「喜び」の表情はポジティブな反応となる。「恐怖」や「嫌悪」の表情はネガティブな反応となる。コンテンツBは、ホラー映画の宣伝を目的としたコンテンツであり、この場合、コンテンツAとは異なり、「恐怖」や「嫌悪」の表情はポジティブな反応となる。「笑顔」や「喜び」の表情はネガティブな反応となる。
課金金額記憶部458は、コンテンツ毎に、そのコンテンツの広告主に対する課金金額を記憶する。
次に、コンテンツ課金システム1の動作について説明する。
デジタルサイネージ装置2の制御部23は、再生時間帯テーブル記憶部253に記憶意されているテーブルにおいてコンテンツの再生が指示されている日時が到来すると、コンテンツ再生制御処理を実行し、再生すべきコンテンツの映像データを映像データ記憶部252から読み出して、その画像データをプロジェクタ24に、音声データを音声出力部33に出力し、コンテンツをスクリーン部22により再生させる。また、制御部23は、コンテンツ再生制御処理の開始と並行して、後述する反応取得処理の実行を開始し、再生中のコンテンツに注目している人物の反応を示す情報として、その人物を含む画像及び音声を記録する。
再生中のコンテンツに注目している人物のフレーム画像からの検出(認識)は、公知の画像処理技術により行うことができる。例えば、特開2011−210238号公報に記載のように、まず、フレーム画像から人体矩形領域を検出し、検出された人体矩形領域を人物の位置として特定する。次いで、検出された人体矩形領域内の画像から正面の顔矩形領域の検出処理を行い、正面の顔矩形領域が検出された場合に、その検出された顔矩形領域を再生中のコンテンツに注目している人物の顔領域として認識する。
人体矩形領域及び顔矩形領域の検出は、公知のどのような手法を用いてもよいが、例えば、人体矩形領域の検出としては、弱い識別器としてHOG(Histogram of Oriented Gradients)特徴を用いたAdaboostアルゴリズムによる人体検出法を用いることができる。また、顔矩形領域の検出としては、弱い識別器として白黒のHaar-Like特徴を用いたAdaboostアルゴリズムによる顔検出法を用いることができる。
再生中のコンテンツに注目している人物がいないと判断した場合(ステップS3;NO)、制御部23は、ステップS7の処理に移行する。
コンテンツの再生が終了していないと判断した場合(ステップS7;NO)、制御部23は、ステップS2の処理に戻り、ステップS2〜ステップS6の処理を実行する。
コンテンツの再生が終了したと判断した場合(ステップS7;YES)、制御部23は、撮像部30による動画撮影及び音声入力部34による音声入力を停止させる(ステップS8)。そして、メモリ内の画像記録領域及び音声記録領域に記録された一連のフレーム画像の画像データ(付加情報を含む)及び音声データをコンテンツIDに対応付けて通信部26によりサーバ装置4に送信し(ステップS8)、反応取得処理を終了する。なお、メモリ内のデータは消去される。
サーバ装置4の制御部41は、通信部44によりデジタルサイネージ装置2から受信した画像データをコンテンツIDに対応付けて画像データ記憶部454に記憶し、音声データをコンテンツIDに対応付けて音声データ記憶部455に記憶する。
次いで、制御部41は、評価対象のコンテンツのコンテンツIDに対応するポジティブ・ネガティブ判断テーブルをポジティブ・ネガティブ判断テーブル記憶部456から読み出す(ステップS11)。
表情認識処理は、公知の画像処理技術によって行うことができる。例えば、特開2011−81445号公報に記載のように、顔領域の各顔部品(眉(左/右)、目(左/右)、鼻、口)の周辺に注目点を設定し、設定した注目点の輝度分布に基づいて表情カテゴリを認識する手法等を用いることができる。
なお、ステップS20とS22においては、完全一致のみならず、予め定められた範囲内で語尾が不一致のものも一致(該当)しているものとして判断されるものとする。
なお、評価値算出処理の終了後、メモリ内のポジティブ件数及びネガティブ件数はクリアする。
また、サーバ装置4でポジティブな評価値のみを課金金額の算出に利用する場合(後述する課金金額算出処理Aを実行する場合)、評価値算出処理においては、P(ポジティブ)に該当するか否かの判断のみを行って、ポジティブ件数のみをカウントし、ポジティブ件数のみを評価値としてコンテンツIDと対応付けて評価値データ記憶部457に記憶させてもよい。また、サーバ装置4でネガティブな評価値のみを課金金額の算出に利用する場合(後述する課金金額算出処理Bを実行する場合)、評価値算出処理においては、N(ネガティブ)に該当するか否かの判断のみを行って、ネガティブ件数のみをカウントし、ネガティブ件数のみを評価値としてコンテンツIDと対応付けて評価値データ記憶部457に記憶させてもよい。
ここで、サーバ装置4における課金金額算出処理としては、ポジティブ評価値のみ利用して課金金額を算出する課金金額算出処理A、ネガティブ評価値のみを利用して課金金額を算出する課金金額算出処理B、ポジティブ評価値及びネガティブ評価値の双方を利用して課金金額を算出する課金金額算出処理Cが用意されている。何れの評価値を用いて課金金額を算出するかは、入力部43から予め設定しておくことができる。以下、それぞれのケースにおける課金金額算出処理について説明する。
図8に、サーバ装置4において実行される課金金額算出処理Aのフローチャートを示す。課金金額算出処理Aは、上述の評価値算出処理の終了時に、制御部41とプログラム記憶部451に記憶されているプログラムとの協働により実行される。
次いで、制御部41は、評価値のうち、ポジティブ評価値(Y)を取得し、Y>0であるか否かを判断する(ステップS32)。
Y>0ではないと判断した場合(ステップS32;NO)、制御部41は、「課金金額=予め定められた広告料のベース金額」とし(ステップS34)、課金金額をコンテンツIDと対応付けて課金金額記憶部458に記憶し(ステップS35)、課金金額算出処理Aを終了する。
図9に、サーバ装置4において実行される課金金額算出処理Bのフローチャートを示す。課金金額算出処理Bは、上述の評価値算出処理の終了時に、制御部41とプログラム記憶部451に記憶されているプログラムとの協働により実行される。
次いで、制御部41は、評価値のうち、ネガティブ評価値(Z)を取得し、Z>0であるか否かを判断する(ステップS42)。
Z>0ではないと判断した場合(ステップS42;NO)、制御部41は、「課金金額=予め定められた広告料のベース金額」とし(ステップS44)、課金金額をコンテンツIDと対応付けて課金金額記憶部458に記憶し(ステップS45)、課金金額算出処理Bを終了する。
図10に、サーバ装置4において実行される課金金額算出処理Cのフローチャートを示す。課金金額算出処理Cは、上述の評価値算出処理の終了時に、制御部41とプログラム記憶部451に記憶されているプログラムとの協働により実行される。
次いで、制御部41は、ポジティブ評価値(Y)からネガティブ評価値(Z)減算した値(X)を算出し(ステップS52)、X=0であるか否かを判断する(ステップS53)。
X=0であると判断した場合(ステップS53;YES)、制御部41は、「課金金額=予め定められた広告料のベース金額」を算出し(ステップS54)、算出した課金金額をコンテンツIDと対応付けて課金金額記憶部458に記憶し(ステップS58)、課金金額算出処理Cを終了する。
X=0ではないと判断した場合(ステップS53;NO)、制御部41は、ステップS55に移行する。
X>0であると判断した場合(ステップS55;YES)、制御部41は、「課金金額=予め定められた広告料のベース金額×Y×係数α(α>1)」を算出し(ステップS56)、算出した課金金額をコンテンツIDと対応付けて課金金額記憶部458に記憶し(ステップS58)、課金金額算出処理Cを終了する。
X>0ではないと判断した場合(ステップS55;NO)、制御部41は、「課金金額=予め定められた広告料のベース金額×係数βのZ乗(β<1)」を算出し(ステップS57)、算出した課金金額をコンテンツIDと対応付けて課金金額記憶部458に記憶し(ステップS58)、課金金額算出処理Cを終了する。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
[付記]
<請求項1>
コンテンツを表示する表示手段と、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する判断手段と、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備える情報処理装置。
<請求項2>
前記取得手段は、前記撮影手段により取得された前記コンテンツに注目している人物の画像を前記コンテンツに注目している人物の反応を示す情報として取得し、
前記判断手段は、前記取得手段により取得された前記コンテンツに注目している人物の画像に基づいて、前記コンテンツに注目している人物の表情を認識し、認識した表情が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する請求項1に記載の情報処理装置。
<請求項3>
音声入力手段を備え、
前記取得手段は、前記音声入力手段により入力された前記コンテンツに注目している人物の音声を前記コンテンツに注目している人物の反応を示す情報として取得し、
前記判断手段は、前記取得手段により取得された前記コンテンツに注目している人物の音声に基づいて、前記コンテンツに注目している人物の発言内容を認識し、認識した発言内容が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する請求項1又は2に記載の情報処理装置。
<請求項4>
前記判断手段におけるポジティブな反応に該当しているか否かの判断基準は、前記コンテンツの内容に応じて異なる請求項1〜3の何れか一項に記載の情報処理装置。
<請求項5>
前記判断手段は、更に、前記取得手段により取得された反応が前記コンテンツに対してネガティブな反応に該当するか否かを判断し、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより前記コンテンツに対するポジティブな評価値を算出し、前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより前記コンテンツに対するネガティブな評価値を算出する評価値算出手段を備え、
前記金額算出手段は、前記評価値算出手段により算出された評価値に基づいて、前記コンテンツに対する課金金額を算出する請求項1〜4の何れか一項に記載の情報処理装置。
<請求項6>
コンテンツを表示する表示手段と、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してネガティブな反応に該当しているか否かを判断する判断手段と、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備える情報処理装置。
<請求項7>
コンテンツを表示する表示手段を有する情報処理装置と、前記コンテンツに対する課金金額を算出するサーバ装置と、が通信ネットワークを介して接続されたコンテンツ課金システムであって、
前記情報処理装置は、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報を前記サーバに送信する送信手段と、
を備え、
前記サーバ装置は、
前記情報処理装置から送信された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記取得手段により取得された反応が前記コンテンツに対してポジティブな反応に該当するか否かを判断する判断手段と、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備えるコンテンツ課金システム。
<請求項8>
コンテンツを表示する表示手段を有する情報処理装置と、前記コンテンツに対する課金金額を算出するサーバ装置と、が通信ネットワークを介して接続されたコンテンツ課金システムであって、
前記情報処理装置は、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報を前記サーバに送信する送信手段と、
を備え、
前記サーバ装置は、
前記情報処理装置から送信された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記取得手段により取得された反応が前記コンテンツに対してネガティブな反応に該当するか否かを判断する判断手段と、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備えるコンテンツ課金システム。
<請求項9>
コンテンツの表示中に表示手段の前にいる人物を撮影する撮影手段を備える情報処理装置に用いられるコンピュータを、
コンテンツを表示する表示手段、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する判断手段、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段、
として機能させるためのプログラム。
<請求項10>
コンテンツの表示中に表示手段の前にいる人物を撮影する撮影手段を備える情報処理装置に用いられるコンピュータを、
コンテンツを表示する表示手段、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してネガティブな反応に該当しているか否かを判断する判断手段、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段、
として機能させるためのプログラム。
2 デジタルサイネージ装置
21 投影部
22 スクリーン部
23 制御部
24 プロジェクタ
25 記憶部
251 プログラム記憶部
252 映像データ記憶部
253 再生時間帯テーブル記憶部
26 通信部
27 画像形成部
28 台座
29 透光板
30 撮像部
32 操作部
33 音声出力部
34 音声入力部
35 計時部
4 サーバ装置
41 制御部
42 表示部
43 入力部
44 通信部
45 記憶部
451 プログラム記憶部
452 映像データ記憶部
453 再生時間帯テーブル記憶部
454 画像データ記憶部
455 音声データ記憶部
456 ポジティブ・ネガティブ判断テーブル記憶部
457 評価値データ記憶部
458 課金金額記憶部
46 計時部
Claims (10)
- コンテンツを表示する表示手段と、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する判断手段と、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備える情報処理装置。 - 前記取得手段は、前記撮影手段により取得された前記コンテンツに注目している人物の画像を前記コンテンツに注目している人物の反応を示す情報として取得し、
前記判断手段は、前記取得手段により取得された前記コンテンツに注目している人物の画像に基づいて、前記コンテンツに注目している人物の表情を認識し、認識した表情が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する請求項1に記載の情報処理装置。 - 音声入力手段を備え、
前記取得手段は、前記音声入力手段により入力された前記コンテンツに注目している人物の音声を前記コンテンツに注目している人物の反応を示す情報として取得し、
前記判断手段は、前記取得手段により取得された前記コンテンツに注目している人物の音声に基づいて、前記コンテンツに注目している人物の発言内容を認識し、認識した発言内容が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する請求項1又は2に記載の情報処理装置。 - 前記判断手段におけるポジティブな反応に該当しているか否かの判断基準は、前記コンテンツの内容に応じて異なる請求項1〜3の何れか一項に記載の情報処理装置。
- 前記判断手段は、更に、前記取得手段により取得された反応が前記コンテンツに対してネガティブな反応に該当するか否かを判断し、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより前記コンテンツに対するポジティブな評価値を算出し、前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより前記コンテンツに対するネガティブな評価値を算出する評価値算出手段を備え、
前記金額算出手段は、前記評価値算出手段により算出された評価値に基づいて、前記コンテンツに対する課金金額を算出する請求項1〜4の何れか一項に記載の情報処理装置。 - コンテンツを表示する表示手段と、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してネガティブな反応に該当しているか否かを判断する判断手段と、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備える情報処理装置。 - コンテンツを表示する表示手段を有する情報処理装置と、前記コンテンツに対する課金金額を算出するサーバ装置と、が通信ネットワークを介して接続されたコンテンツ課金システムであって、
前記情報処理装置は、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報を前記サーバに送信する送信手段と、
を備え、
前記サーバ装置は、
前記情報処理装置から送信された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記取得手段により取得された反応が前記コンテンツに対してポジティブな反応に該当するか否かを判断する判断手段と、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備えるコンテンツ課金システム。 - コンテンツを表示する表示手段を有する情報処理装置と、前記コンテンツに対する課金金額を算出するサーバ装置と、が通信ネットワークを介して接続されたコンテンツ課金システムであって、
前記情報処理装置は、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段と、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段と、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段と、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報を前記サーバに送信する送信手段と、
を備え、
前記サーバ装置は、
前記情報処理装置から送信された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記取得手段により取得された反応が前記コンテンツに対してネガティブな反応に該当するか否かを判断する判断手段と、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段と、
を備えるコンテンツ課金システム。 - コンテンツの表示中に表示手段の前にいる人物を撮影する撮影手段を備える情報処理装置に用いられるコンピュータを、
コンテンツを表示する表示手段、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してポジティブな反応に該当しているか否かを判断する判断手段、
前記判断手段によりポジティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段、
として機能させるためのプログラム。 - コンテンツの表示中に表示手段の前にいる人物を撮影する撮影手段を備える情報処理装置に用いられるコンピュータを、
コンテンツを表示する表示手段、
コンテンツの表示中に前記表示手段の前にいる人物を撮影する撮影手段、
前記撮影手段により取得された撮影画像に基づいて前記コンテンツに注目している人物を認識する認識手段、
前記コンテンツに注目している人物の反応を示す情報を取得する取得手段、
前記取得手段により取得された前記コンテンツに注目している人物の反応を示す情報に基づいて、前記コンテンツに注目している人物の反応が前記コンテンツに対してネガティブな反応に該当しているか否かを判断する判断手段、
前記判断手段によりネガティブな反応に該当すると判断された件数をカウントすることにより、前記コンテンツに対する課金金額を算出する金額算出手段、
として機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013133262A JP6191278B2 (ja) | 2013-06-26 | 2013-06-26 | 情報処理装置、コンテンツ課金システム及びプログラム |
US14/310,600 US20150006281A1 (en) | 2013-06-26 | 2014-06-20 | Information processor, information processing method, and computer-readable medium |
CN201410290973.3A CN104253984B (zh) | 2013-06-26 | 2014-06-25 | 信息处理装置以及信息处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013133262A JP6191278B2 (ja) | 2013-06-26 | 2013-06-26 | 情報処理装置、コンテンツ課金システム及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017154375A Division JP6447681B2 (ja) | 2017-08-09 | 2017-08-09 | 情報処理装置、情報処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015007928A true JP2015007928A (ja) | 2015-01-15 |
JP6191278B2 JP6191278B2 (ja) | 2017-09-06 |
Family
ID=52116527
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013133262A Expired - Fee Related JP6191278B2 (ja) | 2013-06-26 | 2013-06-26 | 情報処理装置、コンテンツ課金システム及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20150006281A1 (ja) |
JP (1) | JP6191278B2 (ja) |
CN (1) | CN104253984B (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018074787A1 (ko) * | 2016-10-20 | 2018-04-26 | 삼성전자주식회사 | 컨텐츠를 제공하기 위한 방법 및 그 전자 장치 |
JP2019036191A (ja) * | 2017-08-18 | 2019-03-07 | ヤフー株式会社 | 判定装置、判定方法及び判定プログラム |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10401411B2 (en) | 2014-09-29 | 2019-09-03 | Ecoatm, Llc | Maintaining sets of cable components used for wired analysis, charging, or other interaction with portable electronic devices |
WO2016053378A1 (en) | 2014-10-02 | 2016-04-07 | ecoATM, Inc. | Wireless-enabled kiosk for recycling consumer devices |
CA3074916A1 (en) | 2014-10-02 | 2016-04-07 | Ecoatm, Llc | Application for device evaluation and other processes associated with device recycling |
US10445708B2 (en) | 2014-10-03 | 2019-10-15 | Ecoatm, Llc | System for electrically testing mobile devices at a consumer-operated kiosk, and associated devices and methods |
US10572946B2 (en) | 2014-10-31 | 2020-02-25 | Ecoatm, Llc | Methods and systems for facilitating processes associated with insurance services and/or other services for electronic devices |
EP3968255A1 (en) | 2014-10-31 | 2022-03-16 | ecoATM, LLC | Systems and methods for recycling consumer electronic devices |
CA2967021C (en) | 2014-11-06 | 2024-03-12 | ecoATM, Inc. | Methods and systems for evaluating and recycling electronic devices |
US11080672B2 (en) | 2014-12-12 | 2021-08-03 | Ecoatm, Llc | Systems and methods for recycling consumer electronic devices |
JP5927363B1 (ja) * | 2015-02-10 | 2016-06-01 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
US20160275518A1 (en) * | 2015-03-19 | 2016-09-22 | ecoATM, Inc. | Device recycling systems with facial recognition |
WO2017038574A1 (ja) * | 2015-08-28 | 2017-03-09 | 日本電気株式会社 | 影響度測定装置および影響度測定方法 |
US10127647B2 (en) | 2016-04-15 | 2018-11-13 | Ecoatm, Llc | Methods and systems for detecting cracks in electronic devices |
US9885672B2 (en) | 2016-06-08 | 2018-02-06 | ecoATM, Inc. | Methods and systems for detecting screen covers on electronic devices |
US10269110B2 (en) | 2016-06-28 | 2019-04-23 | Ecoatm, Llc | Methods and systems for detecting cracks in illuminated electronic device screens |
CA3124435A1 (en) | 2018-12-19 | 2020-06-25 | Ecoatm, Llc | Systems and methods for vending and/or purchasing mobile phones and other electronic devices |
EP3924917A1 (en) | 2019-02-12 | 2021-12-22 | ecoATM, LLC | Connector carrier for electronic device kiosk |
KR20210126068A (ko) | 2019-02-12 | 2021-10-19 | 에코에이티엠, 엘엘씨 | 중고 전자 디바이스를 평가하고 구매하기 위한 키오스크 |
CN211956539U (zh) | 2019-02-18 | 2020-11-17 | 埃科亚特姆公司 | 用于评估电子设备状况的系统 |
WO2022040668A1 (en) | 2020-08-17 | 2022-02-24 | Ecoatm, Llc | Evaluating an electronic device using optical character recognition |
US11922467B2 (en) | 2020-08-17 | 2024-03-05 | ecoATM, Inc. | Evaluating an electronic device using optical character recognition |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002092481A (ja) * | 2000-09-20 | 2002-03-29 | Tijuana.Com:Kk | 料金分配システム、料金分配方法及びこの方法を記憶した記憶媒体並びにサーバ機器 |
JP2002123756A (ja) * | 2000-10-12 | 2002-04-26 | Sony Corp | 情報処理装置および方法、並びに記録媒体 |
JP2007241379A (ja) * | 2006-03-06 | 2007-09-20 | Tokyo Electric Power Co Inc:The | 感情取得システム |
JP2008204355A (ja) * | 2007-02-22 | 2008-09-04 | Nippon Telegr & Teleph Corp <Ntt> | 辞書作成方法 |
JP2009223749A (ja) * | 2008-03-18 | 2009-10-01 | C2Cube Inc | 情報処理装置、情報処理方法、およびプログラム |
JP2010287064A (ja) * | 2009-06-11 | 2010-12-24 | Pfu Ltd | キオスク端末装置 |
WO2012174381A2 (en) * | 2011-06-17 | 2012-12-20 | Microsoft Corporation | Video highlight identification based on environmental sensing |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5774591A (en) * | 1995-12-15 | 1998-06-30 | Xerox Corporation | Apparatus and method for recognizing facial expressions and facial gestures in a sequence of images |
US7134130B1 (en) * | 1998-12-15 | 2006-11-07 | Gateway Inc. | Apparatus and method for user-based control of television content |
US8561095B2 (en) * | 2001-11-13 | 2013-10-15 | Koninklijke Philips N.V. | Affective television monitoring and control in response to physiological data |
US7607097B2 (en) * | 2003-09-25 | 2009-10-20 | International Business Machines Corporation | Translating emotion to braille, emoticons and other special symbols |
US20080147488A1 (en) * | 2006-10-20 | 2008-06-19 | Tunick James A | System and method for monitoring viewer attention with respect to a display and determining associated charges |
CN101853259A (zh) * | 2009-03-31 | 2010-10-06 | 国际商业机器公司 | 添加和处理带有情感数据的标签的方法和设备 |
JP5220705B2 (ja) * | 2009-07-23 | 2013-06-26 | オリンパス株式会社 | 画像処理装置、画像処理プログラムおよび画像処理方法 |
US20120143693A1 (en) * | 2010-12-02 | 2012-06-07 | Microsoft Corporation | Targeting Advertisements Based on Emotion |
EP2678816A4 (en) * | 2011-02-23 | 2016-06-29 | Ayuda Media Systems Inc | METHODS, APPARATUSES AND SYSTEMS FOR CALCULATING AN AMOUNT TO BE INVOICED IN RELATION TO THE EXECUTION OF OUT-OF-HOME ADVERTISING DURING A PERIOD OF TIME |
CN103092348A (zh) * | 2013-01-24 | 2013-05-08 | 北京捷讯华泰科技有限公司 | 一种基于用户行为的移动终端广告播放方法 |
-
2013
- 2013-06-26 JP JP2013133262A patent/JP6191278B2/ja not_active Expired - Fee Related
-
2014
- 2014-06-20 US US14/310,600 patent/US20150006281A1/en not_active Abandoned
- 2014-06-25 CN CN201410290973.3A patent/CN104253984B/zh not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002092481A (ja) * | 2000-09-20 | 2002-03-29 | Tijuana.Com:Kk | 料金分配システム、料金分配方法及びこの方法を記憶した記憶媒体並びにサーバ機器 |
JP2002123756A (ja) * | 2000-10-12 | 2002-04-26 | Sony Corp | 情報処理装置および方法、並びに記録媒体 |
JP2007241379A (ja) * | 2006-03-06 | 2007-09-20 | Tokyo Electric Power Co Inc:The | 感情取得システム |
JP2008204355A (ja) * | 2007-02-22 | 2008-09-04 | Nippon Telegr & Teleph Corp <Ntt> | 辞書作成方法 |
JP2009223749A (ja) * | 2008-03-18 | 2009-10-01 | C2Cube Inc | 情報処理装置、情報処理方法、およびプログラム |
JP2010287064A (ja) * | 2009-06-11 | 2010-12-24 | Pfu Ltd | キオスク端末装置 |
WO2012174381A2 (en) * | 2011-06-17 | 2012-12-20 | Microsoft Corporation | Video highlight identification based on environmental sensing |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018074787A1 (ko) * | 2016-10-20 | 2018-04-26 | 삼성전자주식회사 | 컨텐츠를 제공하기 위한 방법 및 그 전자 장치 |
KR20180043605A (ko) * | 2016-10-20 | 2018-04-30 | 삼성전자주식회사 | 컨텐츠를 제공하기 위한 방법 및 그 전자 장치 |
US10698590B2 (en) | 2016-10-20 | 2020-06-30 | Samsung Electronics Co., Ltd. | Method for providing content and electronic device therefor |
KR102534565B1 (ko) | 2016-10-20 | 2023-05-19 | 삼성전자주식회사 | 컨텐츠를 제공하기 위한 방법 및 그 전자 장치 |
JP2019036191A (ja) * | 2017-08-18 | 2019-03-07 | ヤフー株式会社 | 判定装置、判定方法及び判定プログラム |
Also Published As
Publication number | Publication date |
---|---|
CN104253984A (zh) | 2014-12-31 |
JP6191278B2 (ja) | 2017-09-06 |
US20150006281A1 (en) | 2015-01-01 |
CN104253984B (zh) | 2017-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6191278B2 (ja) | 情報処理装置、コンテンツ課金システム及びプログラム | |
KR101444103B1 (ko) | 상태 정보를 이용하여 미디어 신호를 생성하는 방법 및장치 | |
CN101325658B (zh) | 成像设备和成像方法 | |
CN101163199B (zh) | 图像拍摄设备和方法、及表情评价设备 | |
JP6447681B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US7391886B1 (en) | Digital camera with image tracking system | |
TW202145131A (zh) | 視訊處理方法及裝置、電子設備和電腦可讀儲存介質 | |
US8760551B2 (en) | Systems and methods for image capturing based on user interest | |
TWI255141B (en) | Method and system for real-time interactive video | |
CN101262561B (zh) | 成像设备及其控制方法 | |
TWI597980B (zh) | 影音管理方法及其系統 | |
JP2016177393A (ja) | 情報処理装置、顔認識方法、及びプログラム | |
JP2011217202A (ja) | 画像取得装置 | |
CN208351494U (zh) | 人脸识别系统 | |
JP2009267621A (ja) | 通信装置 | |
JP2010148132A (ja) | 撮像装置、画像検出装置及びプログラム | |
CN109344703A (zh) | 对象检测方法及装置、电子设备和存储介质 | |
KR101839406B1 (ko) | 디스플레이장치 및 그 제어방법 | |
JP6214334B2 (ja) | 電子機器、判定方法及びプログラム | |
CN104935807B (zh) | 摄像装置、摄像方法以及计算机可读取的记录介质 | |
US20210195106A1 (en) | Methods and devices for managing a dual camera mode based on image-related information | |
US12094246B1 (en) | Automatic capture of content using smile detection | |
JP2017041857A (ja) | 画像処理装置、その制御方法、プログラム及び撮像装置 | |
JP2008197889A (ja) | 静止画生成方法、静止画生成装置および静止画生成プログラム | |
JP6507747B2 (ja) | 情報処理装置、コンテンツ決定方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160608 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170406 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170711 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170724 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6191278 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |