JPWO2017179188A1 - 冷蔵庫及びそれを含むネットワークシステム - Google Patents

Abstract

食品を収納する貯蔵室と、管理者によって使用される端末装置と通信を行う通信部と、を有する冷蔵庫の制御部１００は、冷蔵庫のユーザ操作、貯蔵室内の空気の温度、及び貯蔵室内における食品の状態、の内の少なくとも１つに関する第１の情報を検知する状況検知部１０１と、ある期間における第１の情報から冷蔵庫の使用状況を示す第２の情報を取得する状況取得部１０２と、第２の情報から、冷蔵庫のユーザの生活状況が管理者に報知されるべきであると判断した場合に、生活状況を端末装置に報知する生活管理部１０３とを有する。

Description

本発明は、通信機能を備えた冷蔵庫、及び冷蔵庫を含むネットワークシステムに関する。

近年、日本において、全人口に占める高齢者（６５歳以上の者）の割合が増加している。また、１世帯を構成する人の数が少なくなっており、１人世帯（１人暮らし）が増加する傾向にある。このため、１人暮らしの高齢者の安否の確認及び介護の要否の確認が必要になっている。ところで、人の生活状況は、その人（ユーザ）の冷蔵庫の使用状況から、推測することが可能である。その理由は、冷蔵庫の使用状況は、冷蔵庫のユーザの生活の一部である食生活と密接に関係しているからである。

特許文献１は、収納室（貯蔵室）の内部を撮影することによって得られた画像データから収納室の空き容量及び空きスペースを演算し、演算結果及び収納室画像データ（庫内画像データ）を表示端末に送信する冷蔵庫を記載している。

また、特許文献２は、庫内及び庫外を撮像することによって得られた画像データを、サーバを介して携帯電話機（携帯端末）に送信し、遠隔地から庫内及び庫外を監視することを可能にした物品保存庫としての冷蔵庫を記載している。

特開２０１４−２０９０４８号公報（例えば、段落００４１−００４９、００６２−００７８、図７、図８、図１５） 特開２００７−４６８３３号公報（例えば、段落００２１−００２５、図１）

しかしながら、特許文献１に記載の冷蔵庫は、収納室の内部の画像などを表示端末の表示部に表示させることはできるが、冷蔵庫の使用状況（例えば、使用履歴）を推測する機能を有しておらず、冷蔵庫の使用状況に基づく判断（例えば、ユーザの生活状況に関する判断）をすることはできない、という課題があった。

また、特許文献２に記載の冷蔵庫は、冷蔵庫の内外の画像データをユーザの携帯端末に送信して、ユーザの携帯端末の表示部に冷蔵庫の内外の画像を表示させることはできるが、冷蔵庫の使用状況に基づく判断（例えば、ユーザの生活状況に関する判断）をすることはできない、という課題があった。

さらに、特許文献１及び２のいずれも、ユーザ以外の第三者である管理者に報知情報を報知する技術を記載していない。

本発明は、上述のような課題を解決するためになされたものであり、ある期間におけるユーザ操作等の第１の情報の検知の結果から取得された冷蔵庫の使用状況を示す第２の情報に基づいて、冷蔵庫のユーザの生活状況が要報知状況であるか否かを判断し、生活状況が要報知状況であると判断した場合に、ユーザの生活状況を端末装置に報知することができる冷蔵庫及びそれを含むネットワークシステムを提供することを目的とする。

本発明に係る冷蔵庫は、食品を収納する貯蔵室と、管理者によって使用される端末装置と通信を行う通信部と、を有する冷蔵庫であって、前記冷蔵庫のユーザ操作、前記貯蔵室内の空気の温度、及び前記貯蔵室内における食品の状態、の内の少なくとも１つに関する第１の情報を検知する状況検知部と、ある期間における前記第１の情報から前記冷蔵庫の使用状況を示す第２の情報を取得する状況取得部と、前記第２の情報から、前記冷蔵庫のユーザの生活状況が前記管理者に報知されるべきであると判断した場合に、前記生活状況を前記端末装置に報知する生活管理部とを有するものである。

本発明に係るネットワークシステムは、前記冷蔵庫と、前記冷蔵庫と通信可能に接続された端末装置とを備えている。

本発明によれば、冷蔵庫のユーザ操作、貯蔵室内の空気の温度、及び貯蔵室内における食品の状態、の内の少なくとも１つに関する第１の情報の検知の結果から取得された冷蔵庫の使用状況に基づいて、冷蔵庫のユーザの生活状況が管理者に報知されるべき要報知状況であるか否かを判断し、生活状況が要報知状況であると判断した場合に、ユーザの生活状況を、端末装置に報知することができる。このため、ユーザの生活状況を受け取った管理者は、ユーザに対する適切な対処を講じることができる。

本発明の実施の形態１に係る冷蔵庫の概略構造を示す正面図である。 実施の形態１に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態１に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図３の制御部の構成を概略的に示すブロック図である。 （ａ）及び（ｂ）は、実施の形態１に係る冷蔵庫の冷蔵室における扉の開閉履歴の例を示す図である。 本発明の実施の形態２に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態２に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図７の制御部の構成を概略的に示すブロック図である。 （ａ）から（ｃ）は、実施の形態２に係る冷蔵庫の冷蔵室における温度履歴の例を示す図である。 本発明の実施の形態３に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態３に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図１１の制御部の構成を概略的に示すブロック図である。 実施の形態３に係る冷蔵庫の動作を示すフローチャートである。 （ａ）から（ｄ）は、実施の形態１に係る冷蔵庫の冷蔵室内の撮影画像（貯蔵室内画像）、撮影画像から抽出された食品画像、及び食品画像の付帯情報の例を示す図である。 （ａ）及び（ｂ）は、実施の形態３に係る冷蔵庫の冷蔵室内の撮影画像（貯蔵室内画像）から抽出された食品画像の、携帯端末における表示画面の例を示す図である。 実施の形態３に係る冷蔵庫の冷蔵室内の撮影画像（貯蔵室内画像）から抽出された食品画像の、携帯端末における表示画面の例を示す図である。 本発明の実施の形態４に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態４に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図１８の制御部の構成を概略的に示すブロック図である。 実施の形態４に係る冷蔵庫の食品識別部が参照する、食品画像データベースの内容の例を表形式で示す図である。 実施の形態４に係る冷蔵庫の動作を示すフローチャートである。 本発明の実施の形態５に係るネットワークシステムの構成を概略的に示す図である。

《１》実施の形態１
《１−１》構成
図１は、本発明の実施の形態１に係る冷蔵庫１の概略構造を示す正面図である。図１に示されるように、実施の形態１に係る冷蔵庫１は、食品を収納するための複数の貯蔵室を備えている。複数の貯蔵室は、例えば、冷蔵室１１、製氷室１２、切替室１３、冷凍室１４、及び野菜室１５を含む。図１に示される例では、上から冷蔵室１１、製氷室１２と切替室１３、冷凍室１４、及び野菜室１５が、この順で配置されている。また、製氷室１２と切替室１３とは、水平方向の左右に並んで配置されている。冷蔵庫１は、貯蔵室を冷却する冷却装置を備えている。冷却装置は、例えば、圧縮機、凝縮器、膨張弁、及び蒸発器を有する冷凍サイクル回路を備えている。複数の貯蔵室は、冷凍サイクル回路によって冷却される。なお、図１は、実施の形態２（図６）、実施の形態３（図１０）、及び実施の形態４（図１７）においても参照される。冷蔵庫１は、実施の形態２、３、４、及び５において、冷蔵庫２、３、４、及び５とそれぞれ表記される。

冷蔵室１１の扉（冷蔵室扉）２０の前面（正面）には、表示装置としての表示部（表示画面）を有する操作パネル２１が備えられてもよい。操作パネル２１の表示画面には、各貯蔵室の設定温度及び現在温度などの冷蔵庫１に関する情報である貯蔵室情報（庫内情報）を表示させることができる。操作パネル２１は、例えば、ユーザの入力を受け付けるタッチパネルを有している。操作パネル２１の設置位置は、冷蔵室１１の扉２０に限るものではなく、他の貯蔵室の扉の外面又は冷蔵庫１の側面などのような他の位置に設置されてもよい。また、製氷室１２、切替室１３、冷凍室１４、及び野菜室１５は、例えば、それらの前面に備えられた扉と共に、冷蔵庫１の手前側にスライドさせて引き出すことができるように構成されている。図１は、本発明が適用可能な冷蔵庫の一例を示しているが、本発明が適用可能な冷蔵庫は、図１に示されるものに限定されない。

図２は、実施の形態１に係る冷蔵庫１の冷蔵室１１の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。図２に示されるように、冷蔵庫１は、冷蔵室１１の前面側（図２における左側）の開口部を開閉する扉２０を有している。冷蔵室１１は、内部に配置された複数の棚板（棚）１６によって、複数の空間に仕切られている。最下段の棚板１６の下側の空間は、チルド室１７である。チルド室１７の内部には、レールなどの案内部材（図示せず）に沿って、前方（図２における左方向）へ引き出すことができるチルドケース１８が設置されている。また、冷蔵室１１の背面側（図２における右側）には、冷凍サイクル回路によって冷却された空気を貯蔵室に導く通路としての冷却風路１９が設けられている。

扉２０と接する冷蔵庫１の本体には、扉２０の開閉を検出する開閉検出装置としての開閉検出部２２が備えられている。開閉検出部２２は、例えば、扉２０に埋め込まれたマグネット（永久磁石）の近接を、冷蔵庫１の本体に設置された１対のリードスイッチが検出するマグネット方式の装置である。ただし、開閉検出部２２は、機械式のスイッチ又は光学式のスイッチなどのような他の検出方式を採用する検出装置であってもよい。

また、冷蔵庫１は、冷蔵庫１を動作させるための制御回路を有する制御基板１１０を備えている。制御基板１１０は、例えば、冷蔵庫１の背面に取り付けられる。

図３は、実施の形態１に係る冷蔵庫１の制御系の構成を概略的に示すブロック図である。図３に示されるように、冷蔵庫１の制御系は、例えば、操作パネル２１と、扉２０の開状態及び閉状態を検出する開閉検出部２２と、外部装置としての端末装置と有線又は無線で通信することができる通信装置としての通信部２３と、情報を記憶する半導体メモリなどのような記憶部２４と、時刻情報を提供する時刻提供部２５と、冷蔵庫１の全体の動作を制御する制御部１００とを備えている。また、冷蔵庫１の制御系は、例えば、冷凍サイクル回路の一部を構成する圧縮機（コンプレッサ）３２を駆動させるコンプレッサ駆動回路３１と、冷蔵庫１の貯蔵室内に空気を流すファン（モータ）３４を駆動させるファン駆動回路３３とを備えている。冷蔵庫１の制御系の主要部である回路は、制御基板１１０に備えることができる。ただし、図３の回路の一部を、他の制御基板に備えてもよい。

通信部２３は、例えば、Ｗｉ−Ｆｉ（登録商標）又はＢｌｕｅｔｏｏｔｈ（登録商標）などの通信モジュールを具備している。冷蔵庫１は、通信部２３を用いることによって、例えば、ルータ（後述の図２２に示されるブロードバンドルータ５０６）及びインターネット（後述の図２２に示されるインターネット６０１）のうちの少なくとも一方を経由して、宅内又は宅外に存在する、スマートフォン、携帯タブレット、携帯電話、パーソナルコンピュータなどのような端末装置（例えば、冷蔵庫１のユーザ以外の第三者である管理者が使用する端末装置７０）と通信することができる。したがって、冷蔵庫１は、冷蔵庫１に関する各種情報を端末装置７０の表示部７１に表示させることができる。

時刻提供部２５が提供する時刻情報は、時、分、秒だけでなく、日にち（月日又は年月日）の情報も含むことができる。時刻提供部２５は、例えば、時計、又は、時刻信号の提供者が送信する時刻信号を受信する時刻受信装置であってもよい。

制御部１００は、記憶部２４に記憶されているソフトウェアとしてのプログラムを実行する情報処理装置としてのプロセッサを有してもよい。この場合には、制御部１００の機能は、このプログラムを実行することによって、実現される。

図４は、図３の制御部１００の構成を概略的に示すブロック図である。図４に示されるように、制御部１００は、冷蔵庫１の第１の情報（貯蔵室の状況）の検知を行う状況検知部１０１と、ユーザによる冷蔵庫１の使用状況を示す第２の情報を取得する状況取得部（使用推定部）１０２と、取得された第２情報からユーザの生活状況が管理者に報知されるべき要報知状況であるか否かを判断する生活管理部１０３とを備えている。また、通信部２３、記憶部２４、及び時刻提供部２５は、制御部１００の一部であってもよい。状況検知部１０１は、冷蔵庫１の本体に設置された開閉検出部２２及び状況取得部１０２と接続されている。

状況検知部１０１は、例えば、冷蔵庫１のユーザ操作、貯蔵室内の空気の状態の一例である空気の温度（または湿度）、及び貯蔵室内における食品の状況、の内の少なくとも１つを含む第１の情報の検知を行う。実施の形態１においては、状況検知部１０１は、冷蔵庫１のユーザ（被管理者）によるユーザ操作である扉２０の開閉を、第１の情報として検知する。なお、貯蔵室内の空気の温度については、実施の形態２で説明され、貯蔵室内における食品の状況については、実施の形態３及び４で説明される。実施の形態１においては、状況検知部１０１は、開閉検出部２２によって検出された扉２０の開閉情報を受信し、開閉情報を扉２０の開閉が実施された時刻を示す時刻情報とともに、貯蔵室情報として状況取得部１０２に送信する。また、状況検知部１０１は、扉２０の開閉情報と時刻情報とを互いに関連付けて、記憶部２４などに記憶させてもよい。

状況取得部１０２は、ある期間における第１の情報の検知の結果から冷蔵庫１の使用状況を取得する。例えば、状況取得部１０２は、状況検知部１０１から、扉２０の開閉情報と時刻情報とを含む、冷蔵室１１の貯蔵室情報を受信する。状況取得部１０２は、予め決められた期間ごと（時間帯ごと）の扉２０の開閉回数Ｎを算出する。状況取得部１０２は、１時間から数時間までの短期的な使用状況を取得することができる。また、状況取得部１０２は、月日又は年月日などの時刻情報に基づいて、１日単位、１月単位、季節（３ヶ月）単位、及び１年単位などのような長期的な使用状況も取得することができる。このように、実施の形態１における状況取得部１０２は、扉２０の開閉情報（開閉履歴）に基づいて、ユーザによる冷蔵庫１の使用状況を取得し、その取得の結果を生活管理部１０３に送信する。

生活管理部１０３は、状況取得部１０２によって取得された使用状況に基づいて、冷蔵庫１のユーザ（被管理者）の生活状況が要報知状況であるか否かを判断し、生活状況が要報知状況である場合に、冷蔵庫１のユーザの生活状況を示す報知情報を、通信部２３を介して管理者が使用する装置（例えば、管理者が使用権限を有する装置）（図３における端末装置７０）に報知する。例えば、生活管理部１０３は、状況取得部１０２から、扉２０の開閉情報（開閉履歴）に基づくユーザによる冷蔵庫の使用状況を受信し、例えば、ユーザの自宅における在宅又は不在の傾向、ユーザの食生活における自炊と外食の割合などのような、ユーザの生活状況を取得する。また、生活管理部１０３は、ユーザの生活状況が要報知状況である場合には、管理者に報知すべき報知情報（例えば、ユーザの安否に関連する情報又はユーザ宅の防犯に関連する情報など）を、通信部２３に送る。

通信部２３は、制御部１００の生活管理部１０３と接続され、また、端末装置７０とは有線又は無線で通信可能な通信装置である。通信部２３は、生活管理部１０３から、扉２０の開閉履歴に基づいて取得された生活状況の中で管理者に報知すべき報知情報を受信し、報知情報を端末装置７０に送信する。

端末装置７０は、有線又は無線にて、直接、又は、インターネットを介して、通信可能に通信部２３と接続される。端末装置７０は、通信部２３から送信された報知情報を受信し、端末装置７０の表示部７１に報知情報に基づく画像を表示させる。

《１−２》動作
次に、実施の形態１に係る冷蔵庫１の動作の一例について、図を参照して説明する。

冷蔵庫１に食品を収納する場合、冷蔵庫１から食品を取り出す場合、又は、冷蔵庫１内の食品の在庫状況を確認する場合などのように、ユーザが冷蔵庫１を使用する際には、ユーザは冷蔵庫１の扉（例えば、扉２０）を開閉する。したがって、冷蔵庫１の扉の開閉動作は、ユーザが冷蔵庫１を使用していることを示すエビデンス（証拠）となる。

図２から図４に示される冷蔵庫１の例では、冷蔵室１１の扉２０が開閉される度に、開閉検出部２２が、開動作及び閉動作を検出し、開動作を示す開信号及び閉動作を示す閉信号を状況検知部１０１に送信する。状況検知部１０１は、受け取った開信号又は閉信号を時刻情報と照合することにより、開時刻、閉時刻、及び開時間（開状態の時間）を検知する。これらの検知は、扉２０が開閉される度に実施されるため、開時刻と関連付けられた開信号及び閉時刻と関連付けられた閉信号は、扉２０の開閉履歴を示す時系列データとして、状況取得部１０２に送信される。

状況取得部１０２は、状況検知部１０１から送信された、扉２０の開閉履歴を示す時系列データから、扉２０の開閉状況を、冷蔵室１１の使用状況を示す第２の情報として取得する。具体的には、状況取得部１０２は、扉２０の開閉履歴を示す時系列データから、例えば、時間帯ごとの扉２０の開閉回数Ｎを算出し、例えば、短期的な使用状況及び長期的な使用状況の少なくとも一方を取得する。短期的な使用状況は、例えば、１日中継続して（短い時間間隔で）扉２０の開閉が行われている状況、１日の内の朝及び晩の限られた時間帯においてのみ扉２０が開閉されている状況などである。長期的な使用状況は、今月の開閉回数が先月の開閉回数よりも減っている状況、夏季の開閉回数が他の季節の開閉回数よりも多い状況などである。

図５（ａ）及び（ｂ）は、実施の形態１に係る冷蔵庫１の冷蔵室１１における扉２０の開閉履歴の例を示す図である。図５（ａ）及び（ｂ）の例では、９月２３日から９月２５日までの３日間について、所定時間（ここでは、６時間）あたりの扉２０の開閉回数Ｎの算出結果がそれぞれ示されている。図５（ａ）及び（ｂ）の例では、９月２５日（金曜日）の扉２０の開閉回数Ｎの履歴が互いに異なる。

状況取得部１０２は、例えば、図５（ａ）及び（ｂ）に示されるような扉２０の開閉情報（開閉履歴）からユーザによる冷蔵庫の使用状況を示す第２の情報を取得する。図５（ａ）及び（ｂ）のいずれの例においても、９月２３日（祝日）においては、「真夜中」（０時から６時）と「夜」（１８時から２４時）の各々における開閉回数Ｎは３回であり（若干の開閉があり）、「日中の午前」（６時から１２時）における開閉回数Ｎは４回であり（若干多くの開閉があり）、「日中の午後」（１２時から１８時）における開閉回数Ｎは０回（開閉なし）である。９月２３日（祝日）の使用状況から、「日中の午前」と「夜間（夜と真夜中）」には、冷蔵庫１が使用されているが、「日中の午後」には冷蔵庫１が使用されない、という使用状況を示す第２の情報が取得される。

図５（ａ）及び（ｂ）のいずれの例においても、９月２４日（木曜日）においては、９月２３日（祝日）に比べて、「日中の午前」（６時から１２時）と「夜」（１８時から２４時）における開閉回数Ｎが増加し、「日中の午後」（１２時から１８時）における開閉回数Ｎが３回であり、ユーザにより１日中継続して冷蔵庫１が使用されていた、という使用状況を示す第２の情報が取得される。

また、９月２５日（金曜日）においては、図５（ａ）の例では、１日中継続して冷蔵庫１が使用されており、且つ、「日中の午前」（６時から１２時）と「夜」（１８時から２４時）における開閉回数Ｎが他の日の開閉回数に比べて増加している。しかし、図５（ｂ）の例では、「真夜中」（０時から６時）における開閉回数Ｎは１回であり、その後は、冷蔵庫１は全く使用されていないという状況が示されている。

次に、生活管理部１０３では、状況取得部１０２において取得されたユーザによる冷蔵庫の使用状況を受信し、その使用状況に基づいて生活状況を取得する。図５（ａ）及び（ｂ）の例では、９月２３日（祝日）は、「真夜中」、「日中の午前」、及び「夜」のみに冷蔵庫１を使用したという使用状況から、ユーザは朝食を家で摂ったが、昼食と夕食は外食であり、「夜」に飲料などを取り出すために冷蔵庫１の扉を開閉したという生活状況が取得される。また、９月２４日（木曜日）は、１日中継続して冷蔵庫１が使用されていたという使用状況から、ほぼ終日在宅していたという生活状況が取得される。

また、図５（ａ）の例では、９月２５日（金曜日）の「夜」における開閉回数が増加した使用状況から、夕食に普段以上の食材を使用し、夜遅くまでパーティーのように長時間の間、食事を続けていたなどの生活状況（要報知状況ではない生活状況）が考えられる。しかし、図５（ｂ）の例では、９月２５日（金曜日）は、午前６時以降、全く冷蔵庫１が使用されていない生活状況であり、ユーザが早朝から外出した可能性、又は、ユーザに何らかの問題（要報知状況）が発生した可能性が考えられる。

また、生活管理部１０３は、取得された（推定された）ユーザの生活状況が、管理者に報知すべき要報知状況であるか否かを判断する。図５（ａ）の例では、９月２３日（祝日）、９月２４日（木曜日）及び９月２５日（金曜日）における生活状況は、外食の有無及び在宅情報、また、夕食の質及び時間に関する情報から、ユーザの生活状況は緊急を要さない（要報知状況ではない）と判断することができる。しかし、図５（ｂ）の例では、９月２５日（金曜日）における生活状況は、ほぼ１日の間、全く扉２０が開閉されない使用状況を要報知状況（例えば、ユーザに健康上の問題が発生した状況、又は、犯罪に関連した状況が発生した状況）と判断することが可能である。この場合には、冷蔵庫１は、通信部２３を介して、端末装置７０に安否関連情報としての報知情報を報知する。

生活管理部１０３は、取得されたユーザの生活状況が要報知状況であるか否かの判断をするために、要報知状況の判断基準を予め保持している（又は、記憶部２４に格納しておく）必要がある。生活管理部１０３は、図５（ｂ）に示される９月２５日（金曜日）の例において、冷蔵庫１が全く使用されていない状況が、予め決められた基準時間（例えば、１８時間又は２４時間などの閾値時間）以上継続した場合に、端末装置７０に報知情報を報知するように設定することができる。ただし、ユーザが旅行などで上記基準時間よりも長い期間、自宅を留守にする場合には、ユーザの操作によって、その閾値の解除をすることができるようにしておくことで、無駄な報知情報の送信を回避し、必要なタイミングで端末装置７０に報知情報を報知することができる。

また、生活管理部１０３が、要報知状況が発生したと判断したときに、端末装置７０に報知する報知情報は、図５（ａ）及び（ｂ）の例で示されたような安否関連情報に限るものではない。例えば、生活管理部１０３は、ユーザが旅行中の場合、及び、ユーザが職場又は学校にいる平日の昼間などの時間帯に、扉２０の開閉動作が発生した場合には、ユーザの許可を得ていない人物による冷蔵庫１の使用が考えられるので、端末装置７０に対して報知情報として防犯関連情報を報知することも可能である。この場合には、端末装置７０で報知情報を見た管理者は、迅速に警察又はセキュリティ会社への通報を行うことができるので、犯罪を未然に防ぐことを期待することができる。

また、扉２０の開閉の頻度（例えば、「真夜中」に扉２０の開閉の頻度が高い状況）が発生した場合には、ユーザの不摂生を報知情報として端末装置７０に報知することが可能である。また、冷蔵室１１内のチルド室１７の扉の開閉が頻繁に発生した場合（チルド室１７の扉にも開閉検出部が備えられている場合）には、生鮮食品への偏食を端末装置７０に報知することが可能である。これらの報知情報によれば、１人暮らしの子供又は単身赴任の夫の健康状態を、管理者である母又は妻が遠隔地からそれぞれ管理することが可能になる。

また、端末装置７０を使用する管理者は、予め認証された管理者に限定して設定することが望ましい。端末装置７０に送信される報知情報の内の生活関連情報は、個人情報ではあるが、不特定の管理者に開示してもセキュリティ上は特に大きな問題にはならないと考えられる。しかし、報知情報の内の安否関連情報又は防犯関連情報は、ユーザの健康情報又はユーザの在宅及び不在情報を含むため、家族、近親者、又は、ユーザが委託したヘルパーなどの管理者に制限することが望ましい。なお、端末装置７０を使用する管理者の認証方法については、実施の形態５で説明する。

《１−３》効果
以上に説明したように、実施の形態１に係る冷蔵庫１によれば、冷蔵庫１の第１の情報である扉２０の開閉回数Ｎの検知の結果から取得された冷蔵庫１の使用状況（第２の情報）に基づいて、冷蔵庫１のユーザの生活状況が要報知状況であるか否かを判断し、生活状況が要報知状況であると判断した場合に、ユーザの生活状況を示す報知情報（安否に関する情報、防犯に関する情報、不適切な食生活に関する情報など）を、端末装置７０に報知することができる。このため、報知情報を受け取った管理者（例えば、１人暮らしのユーザの家族、専門の介護機関、専門の警備会社、公共機関など）は、ユーザに対する適切な対処を講じることができる。

《１−４》変形例
上記説明では、開閉検出部２２を冷蔵室１１に設けた場合を説明したが、冷蔵室１１以外の貯蔵室に開閉検出部を設けてもよく、又は、複数の貯蔵室に扉の開閉検出部を設置してもよい。例えば、比較的頻繁に購入される（購入の間隔が短い）野菜が収納される野菜室１５に開閉検出部を設置すれば、野菜室１５の扉の開閉情報（開閉履歴）から、ユーザの生活状況の内の買い物の頻度を把握することができ、野菜室１５の扉の開閉履歴を利用すれば、ユーザの安否状況の確認の精度を高めることができる。また、例えば、冷凍室１４に開閉検出部を設置すれば、冷凍室１４の使用状況からユーザの偏食の程度（冷凍食品への依存度）を取得することが可能である。

《２》実施の形態２
《２−１》構成
図６は、本発明の実施の形態２に係る冷蔵庫２の冷蔵室１１の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。図６において、図２に示される構成要素と同一又は対応する構成要素には、図２に示される符号と同じ符号が付される。図６に示される冷蔵庫２は、冷蔵室１１の内部の温度を検出する温度検出装置である温度検出部２６を有する点、及び制御部（図７における２００）による制御の内容の点において、図２に示される冷蔵庫１と異なる。

また、図７は、実施の形態２に係る冷蔵庫２の制御系の構成を概略的に示すブロック図である。図７において、図３に示される構成要素と同一又は対応する構成要素には、図３に示される符号と同じ符号が付される。図７に示される冷蔵庫２の制御系は、温度検出部２６を有する点、及び、制御部２００による制御の内容において、図３に示される冷蔵庫１の制御系と異なる。他の点については、実施の形態２に係る冷蔵庫２は、実施の形態１に係る冷蔵庫１と同じである。

また、図８は、図７の制御部２００の構成を概略的に示すブロック図である。図８に示されるように、制御部２００は、冷蔵庫２の第１の情報の検知を行う状況検知部２０１と、ユーザによる冷蔵庫２の使用状況を示す第２の情報を取得する状況取得部２０２と、取得された使用状況から取得されるユーザの生活状況が要報知状況であるか否かを判断する生活管理部２０３とを備えている。また、通信部２３、記憶部２４、及び時刻提供部２５は、制御部２００の一部であってもよい。状況検知部２０１は、冷蔵庫２の本体に設置された開閉検出部２２、温度検出部２６、及び状況取得部２０２と接続されている。

実施の形態２においては、状況検知部２０１は、開閉検出部２２によって検出された扉２０の開閉情報（開閉履歴）と、温度検出部２６によって検出された冷蔵室１１内の温度履歴とを受信し、扉２０の開閉が実施された時刻と、温度変動が発生した時刻情報とを状況取得部２０２に送信する。すなわち、実施の形態２においては、状況検知部２０１は、食品が収納されている冷蔵室１１に関する第１の情報として、温度検出部２６によって検出された温度情報を直接的に検知して、状況取得部２０２に送信する。

実施の形態２においては、状況検知部２０１と接続されている状況取得部２０２は、状況検知部２０１から、扉２０の開閉情報（開閉履歴）と時刻情報及び冷蔵室１１内の温度情報（温度履歴）と時刻情報で構成される、冷蔵室１１内の空気の状態の一例である空気の温度（貯蔵室内の状態）を第１の情報として受信し、扉２０の開閉履歴に基づくユーザによる冷蔵庫の使用状況だけでなく、ユーザによる設定温度変更などの使用状況、扉２０の開閉に起因する温度上昇及び扉２０の開閉時の負荷変動などの貯蔵室内の空気の温度への影響因子も取得することができる。このように、実施の形態２における状況取得部２０２は、扉２０の開閉履歴と庫内（貯蔵室内）の空気の温度履歴とに基づいて、ユーザによる冷蔵庫２の使用状況を取得し、その取得結果を生活管理部２０３に送信する。

実施の形態２においては、生活管理部２０３は、状況取得部２０２から、扉２０の開閉履歴と貯蔵室内の温度履歴とに基づくユーザによる冷蔵庫の使用状況の取得結果を受信し、例えば、ユーザの設定温度の状況、負荷変動に基づく買い物の傾向など、ユーザの生活状況を取得する。その後の処理は、実施の形態１の場合と同様に、生活管理部２０３が、取得されたユーザの生活状況の中で管理者に報知すべき情報を分類して、報知情報を通信部２３を介して冷蔵庫２を使用するユーザ以外の者（第三者である管理者）が使用する端末装置７０に送信し、報知情報を表示部７１に表示させる。

制御部２００は、記憶部２４に記憶されているソフトウェアとしてのプログラムを実行する情報処理装置としてのプロセッサを有してもよい。この場合には、制御部２００の機能は、このプログラムを実行することによって、実現される。

《２−２》動作
次に、実施の形態２に係る冷蔵庫２の動作の一例について、図６から図８を参照して説明する。なお、以下の説明は、実施の形態１との相違点を中心に行われる。

ユーザが冷蔵庫２を使用する際には、扉２０を開閉する動作が発生し、また、この扉２０の開閉に伴って、貯蔵室内の空気の一部が庫外の空気と入れ換わるため、貯蔵室内の温度は変化する（一般的に上昇する）。このとき、温度の変動幅は、扉２０の開閉時のユーザの動作によって変動する。例えば、扉２０の開時間が長いほど、また、収納した食品の熱負荷が大きいほど、貯蔵室内の温度は上昇する。したがって、扉２０の開閉とともに貯蔵室内の温度を検出することにより、冷蔵庫２が使用されているときの動作内容をより正確に取得することができる。

図６に示される冷蔵室１１の例では、扉２０が開閉されると、開閉検出部２２によって検出された扉２０の開信号又は閉信号が状況検知部２０１に送信され、状況検知部２０１において、時系列データとして扉２０の開閉履歴が生成される。このとき、扉２０の開閉の有無に関係なく、温度検出部２６によって検出された冷蔵室１１内の空気の温度は、状況検知部２０１に送信されており、状況検知部２０１において時刻情報と合わせることにより、時系列データとして温度履歴が生成される。したがって、扉２０が開閉されたときには、扉２０の開閉を示す信号と貯蔵室内温度を示す信号の両方が状況取得部２０２に送信される。

状況取得部２０２は、状況検知部２０１から送信された、扉２０の開閉履歴と冷蔵室１１内の温度履歴の時系列データから、冷蔵室１１の使用状況を示す第２の情報を取得する。具体的には、状況取得部２０２は、開閉履歴から検出された扉２０の開閉動作において、温度履歴においてどの程度の温度上昇が発生したか、すなわち、ユーザが与えた冷却負荷に関する使用状況を取得し、且つ、温度履歴から検出された温度上昇が、扉２０の開閉動作によるものなのか、或いは、ユーザの設定温度変更によるものなのかを判断するなど、ユーザの温度設定に関する使用状況を取得する。

図９（ａ）から（ｃ）は、実施の形態２に係る冷蔵庫２の冷蔵室１１（貯蔵室内）における温度履歴（温度変化）の例を示す図である。図９（ａ）から（ｃ）は、図５（ｂ）で示される扉２０の開閉履歴のように開閉動作が発生した際の、９月２３日から９月２５日までの３日間連続して測定した温度履歴３５を示している。図９（ａ）は、９月２３日の貯蔵室の温度変化を示し、図９（ｂ）は、９月２４日の貯蔵室の温度変化を示し、図９（ｃ）は、９月２５日の貯蔵室の温度変化を示している。

実施の形態２における状況取得部２０２は、図５（ｂ）に示される扉２０の開閉回数Ｎの履歴と、図９（ａ）から（ｃ）に示される温度履歴３５から、ユーザによる冷蔵庫の使用状況を取得する。例えば、図５（ｂ）において、９月２３日（祝日）の「真夜中」（０時から６時）、「日中の午前」（６時から１２時）、及び「日中の午後」（１２時から１８時）に検出された扉２０の開閉に対応した温度上昇が、それぞれ図９（ａ）の温度履歴３５において、それぞれを０時から１時付近、６時から８時付近、及び１８時から２１時付近にて検出されている。同様に、９月２４日（木曜日）において全日にわたって検出された扉２０の開閉に対しては、３時付近、６時から８時付近、及び１９時から２２時付近に、明確な温度上昇が検出されている。しかし、９月２４日（木曜日）の「日中の午後」（１２時から１８時）、及び９月２５日（金曜日）の「真夜中」（０時から６時）に検出された扉２０の開閉に対しては、図９（ｂ）及び（ｃ）の温度履歴３５には特に大きな温度上昇は見られず、短時間（一瞬）の扉２０の開閉であったことが考えられる。また、扉２０の開閉が検出されていない９月２５日（金曜日）の６時以降については、図９（ｃ）の温度履歴３５においても温度上昇は見られず、むしろ温度が低下し、１２時以降には０℃以下にまで到達していることが示されている。

このように扉２０の開閉回数Ｎの履歴と温度履歴３５とを比較することにより、実施の形態２における状況取得部２０２は、ユーザによる冷蔵庫の使用状況を取得することができる。すなわち、温度履歴３５から扉２０の開閉動作の正確な実施時刻又は扉開時間が取得することができ、扉２０の開閉動作の内容を取得するのに必要な情報を抽出することができる。また、図９（ｃ）の温度履歴３５に示された温度低下のように、冷蔵室１１内の保管温度も含む使用状況を取得することができる。

次に、実施の形態２における生活管理部２０３は、扉２０の開閉履歴と温度履歴とに基づいて、状況取得部２０２において取得されたユーザによる冷蔵庫１の使用状況を受信し、その使用状況に基づいて生活状況を取得（推定）する。図５（ａ）及び（ｂ）の扉２０の開閉履歴と図９（ａ）から（ｃ）の温度履歴を組み合わせた例では、９月２３日（祝日）は、扉２０の開閉履歴からは、昼食と夕食とは外食であったという生活状況が取得される。しかし、図９（ａ）の温度履歴から「夜」に頻繁に扉２０が開閉されていることが示されているので、図９（ａ）からは、夕食は家で摂ったという状況が取得される。

また、扉２０の開閉履歴により、ほぼ終日在宅していたと推定される９月２４日（木曜日）については、図９（ｂ）の温度履歴から、昼間の１２時付近における扉２０の開閉は一瞬のものであり、昼食の調理はしていない、或いは、外食した可能性もあるということが推定される。扉２０の開閉履歴により、朝６時以降全く冷蔵庫１が使用されていない９月２５日（金曜日）については、温度が徐々に低下しているという状況から、ユーザが設定温度を下げたか、或いは、設定温度に対して庫内負荷が小さすぎるという、新たな状況が発生した可能性も考えられる。

生活管理部２０３は、実施の形態１と同様に、開閉履歴から取得したユーザの生活状況の中で、貯蔵室の温度履歴を参照して、生活状況が管理者に報知すべきと要報知状況であるか否かを判断（分類）する。図５（ｂ）の扉２０の開閉履歴のみの例では、９月２５日（金曜日）における、ほぼ１日の間、全く扉２０の開閉されない使用状況を、ユーザの健康上の問題又は犯罪に関連した状況と判断した場合に、通信部２３を介して、冷蔵庫２を使用するユーザ以外の管理者が使用する端末装置７０に安否関連情報として報知する。しかし、実施の形態２においては、生活管理部２０３は、図９（ｃ）に示される温度履歴と組み合わせることにより、扉２０の開閉がなくても、ユーザが設定温度を変更したと判断した場合などの報知情報を送信しないことができる。また、生活管理部２０３は、冷却負荷に対して設定温度が低すぎると判断した場合には、食生活関連情報として、食品が凍結するかも知れないことを通知する凍結リスクの報知を行うことができる。

《２−３》効果
以上に説明したように、実施の形態２に係る冷蔵庫２によれば、冷蔵庫２の第１の情報である扉の開閉回数の検知の結果と温度検出部２６によって検出された冷蔵室１１の温度履歴とから取得された冷蔵庫２の使用状況に基づいて、冷蔵庫２のユーザの生活状況が管理者に報知されるべき要報知状況であるか否かを判断し、生活状況が要報知状況であると判断した場合に、ユーザの生活状況を示す報知情報（安否に関する情報、防犯に関する情報、不適切な食生活に関する情報など）を、端末装置７０に報知することができる。このため、報知情報を受け取った管理者（例えば、１人暮らしのユーザの家族、専門の介護機関、専門の警備会社、公共機関など）は、ユーザに対する適切な対処を講じることができる。

また、温度履歴を状況検知部２０１において検知される第１の情報に反映することにより、扉２０の開閉履歴のみで生活状況を取得する場合に比べ、扉２０の開閉時の動作内容、ユーザによる設定温度変更動作、及び貯蔵室の負荷状況なども含むより多くの情報に基づいて、冷蔵庫２のユーザの生活状況を取得することができる。その結果、管理者に報知される、ユーザの安否情報、防犯関連情報、食生活関連情報などの生活状況についての推定の精度が向上し、管理者への報知が必要ではない状況であるにもかかわらず、報知情報を送信するといった事態を回避することができる。

《２−４》変形例
上記説明では、状況検知部２０１において、開閉検出部２２による扉２０の開閉履歴と温度検出部２６による温度履歴の両方の情報に基づいて、冷蔵室１１内の貯蔵室内の空気の温度を検知する例を説明したが、状況検知部２０１は、温度検出部２６による温度履歴の情報のみにより、冷蔵室１１内の第１の情報を検知してもよい。図９（ａ）から（ｃ）に示されるように、温度履歴３５には扉２０の開閉による温度上昇の情報も含まれるため、温度検出部２６にて開閉検出部２２を代用することにより、装置として温度検出部２６を追加するだけで、開閉検出部２２を追加する場合と比較し、より多くのユーザの生活状況を取得することが可能となる。

また、上記説明では、温度検出部２６を冷蔵室１１に備えた場合を例示したが、他の貯蔵室に温度検出部を備え、この温度検出部の検出結果に基づいて、冷蔵庫２の制御を行ってもよい。

《３》実施の形態３
《３−１》構成
図１０は、本発明の実施の形態３に係る冷蔵庫３の冷蔵室１１の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。図１０において、図２及び図６に示される構成要素と同一又は対応する構成要素には、図２及び図６に示される符号と同じ符号が付される。図１０に示される冷蔵庫３は、冷蔵室１１の内部を撮影するカメラである撮影装置２７を有する点において、図６に示される冷蔵庫２と異なる。

また、図１１は、実施の形態３に係る冷蔵庫３の制御系の構成を概略的に示すブロック図である。図１１において、図３及び図７に示される構成要素と同一又は対応する構成要素には、図３及び図７に示される符号と同じ符号が付される。図１１に示される冷蔵庫３の制御系は、撮影装置２７を有する点、及び、制御部３００の制御の内容の点において、図７に示される冷蔵庫２の制御系と異なる。他の点については、実施の形態３に係る冷蔵庫３は、実施の形態２に係る冷蔵庫２と同じである。

また、図１２は、図１１の制御部３００の構成を概略的に示すブロック図である。図１２に示されるように、制御部３００は、撮影装置２７によって生成された画像データを管理する食品管理部３０４と、冷蔵庫３の第１の情報の検知を行う状況検知部３０１と、ユーザによる冷蔵庫３の使用状況を取得する状況取得部３０２と、取得された使用状況からユーザの生活状況が要報知状況であるか否かを判断する生活管理部３０３とを備えている。また、通信部２３、記憶部２４、及び時刻提供部２５は、制御部３００の一部であってもよい。状況検知部３０１は、冷蔵庫３の本体に設置された開閉検出部２２、温度検出部２６、及び状況取得部３０２と接続されている。状況取得部３０２は、状況検知部３０１及び生活管理部３０３と接続されている。生活管理部３０３は、状況取得部３０２及び通信部２３と接続されている。

図１０に示されるように、実施の形態３に係る冷蔵庫３は、扉２０の内面に画像を撮影する撮影装置２７が設置されている。撮影装置２７は、冷蔵室１１の天井面からチルド室１７までの冷蔵室１１の内部の全域を視野範囲とし、ユーザの視点と同じく、扉２０の側から（冷蔵室１１の全面の開口部位置から）冷蔵室１１の内部を撮影することができる構成であることが望ましい。したがって、撮影装置２７から出力される画像データは、冷蔵室１１の内部の全体を含む全体画像データであることが望ましい。

なお、撮影装置２７の設置位置は、扉２０の内面に限られない。撮影装置２７は、冷蔵室１１の棚板１６に載置される食品などの収納物を広範囲に撮影することができる位置であれば、他の位置に設置されてもよい。また、冷蔵室１１の棚板１６に視野を遮られることを考慮して、より多くの収納物を撮影することができるように、冷蔵室１１の内部を撮影する複数の撮影装置２７を設置してもよい。

また、冷蔵庫３の背面に設置された制御基板３１０には、制御部３００が実装されており、食品管理部３０４は、撮影装置２７、及び状況検知部３０１に接続されている。食品管理部３０４は、撮影装置２７によって撮影された冷蔵室１１内の画像（貯蔵室内画像）から食品画像を抽出し、抽出された食品画像から、食品の入庫又は出庫を判別したうえで、食品の入庫及び出庫の情報（食品画像を含む）を時系列に記憶する。記憶された食品画像は、状況検知部３０１に送信されるので、制御部３００は、冷蔵室１１内に収納された食品の画像と、その入出庫履歴を含む食品画像情報を、状況検知部３０１において検知する第１の情報に反映させることができる。なお、食品管理部３０４に記憶される食品画像のデータは、他の記憶部（例えば、記憶部２４）に記憶してもよい。

したがって、実施の形態３における状況検知部３０１は、開閉検出部２２によって検出された扉２０の開閉履歴、温度検出部２６によって検出された冷蔵室１１内の温度履歴、及び撮影装置２７によって撮影された貯蔵室内画像から抽出され記憶された入出庫履歴を含む食品画像情報を受信し、扉２０の開閉履歴及び温度履歴とともに、冷蔵室１１内に収納されている食品に関する画像情報を状況取得部３０２に送信する。このように、実施の形態３における状況検知部３０１は、食品が収納されている冷蔵室１１内の空気の温度だけでなく、収納されている食品そのものの情報も検知して送信する。

実施の形態３における状況取得部３０２は、状況検知部３０１から、扉２０の開閉履歴と時刻情報及び冷蔵室１１内の温度履歴と時刻情報で構成される、冷蔵室１１内における空気の温度と、収納されている食品そのものの情報とを、第１の情報として受信し、冷蔵室１１内の空気の温度だけでなく、保管されている食品の状況から、ユーザによる冷蔵庫３の使用状況を取得することができる。このように、実施の形態３における状況取得部３０２は、扉２０の開閉履歴と貯蔵室温度履歴だけでなく、保管されている食品の状況に基づいてユーザによる冷蔵庫３の使用状況を取得し、その取得結果を生活管理部３０３に送信する。

実施の形態３における生活管理部３０３は、状況取得部３０２から、扉２０の開閉履歴と貯蔵室温度履歴、及び保管されている食品の状態に基づいたユーザによる冷蔵庫３の使用状況の取得結果を受信し、例えば、時間帯による食品の出し入れ傾向、扉２０の開閉時の収納量（負荷）変動の要因となる買い物の傾向、温度変動と収納状態の相関などのような、ユーザの生活状況を取得する。その後、生活管理部３０３は、実施の形態１及び２の場合と同様に、取得したユーザの生活状況が管理者に報知すべき要報知状況を含んでいるか否かを判断し、要報知状況を含んでいる場合には、報知情報を通信部２３を介して冷蔵庫３を使用するユーザ以外の管理者に使用権限が与えられている端末装置７０に送信し、報知情報を表示部７１に表示させる。

なお、制御部３００は、記憶部２４に記憶されているソフトウェアとしてのプログラムを実行する情報処理装置としてのプロセッサを有してもよい。この場合には、制御部３００の機能は、このプログラムを実行することによって、実現される。

《３−２》動作
次に、実施の形態３に係る冷蔵庫３の動作の一例について、図１０から図１３を参照して説明する。図１３は、冷蔵庫３の扉２０が開閉される毎に行われる動作を示すフローチャートである。

実施の形態１において説明したように、ユーザが冷蔵庫３を使用する際には、扉を開閉するという動作が発生し、また、扉２０の開閉に伴って第１の情報の変化、すなわち貯蔵室の温度及び貯蔵室に収納された食品の状態が変化する。したがって、扉２０の開閉をトリガ（契機）として第１の情報を検知し、この検知結果に基づいてユーザによる冷蔵庫の使用状況を取得し、この使用状況から生活状況を取得することができる。

図１３に示される動作は、扉２０の開閉によって開始される。扉２０の開閉が検知されると（ステップＳ１１においてＹＥＳ）、撮影装置２７が、冷蔵室１１の貯蔵室を撮影する（ステップＳ１２）。

撮影装置２７は、撮影した冷蔵室１１の貯蔵室内画像（望ましくは、貯蔵室全体の画像）を、食品管理部３０４に送信する（ステップＳ１３）。したがって、食品管理部３０４は、扉２０が開閉される毎（すなわち、冷蔵室１１内の収納状態が変化する可能性がある毎）に、撮影装置２７から貯蔵室内画像を受信する。以下の説明では、今回（最新）の扉２０の開閉時を「今回の扉２０の開閉時」と称し、前回（１回前）の扉２０の開閉時を「前回の扉２０の開閉時」と称する。

食品管理部３０４は、前回の扉２０の開閉時に撮影装置２７から受信した貯蔵室内画像を記憶しており、今回の扉２０の開閉時に撮影装置２７から受信した貯蔵室内画像を新たに記憶する。そして、前回と今回の扉２０の開閉時の貯蔵室内画像の差分を演算することにより、庫内画像の変化部分の画像を抽出する（ステップＳ１４）。庫内画像の変化部分の画像とは、入庫又は出庫された食品の画像である。

例えば、前回の扉２０の開閉時の貯蔵室内画像では、冷蔵室１１の棚板１６にビールが置かれており、今回の扉２０の開閉時の貯蔵室内画像では、同じ場所にビールが置かれていない棚板１６のみである場合には、２つの貯蔵室内画像の差分により、ビールの食品画像が抽出される。食品管理部３０４は、このようにして抽出した食品画像を、その抽出を行った時点での現在時刻である時刻情報に基づいて時系列に並び換え、時刻情報を付帯情報とし、食品画像とともに保存する（ステップＳ１５）。

このとき、食品管理部３０４は、食品の入庫又は出庫の判断を行う。具体的には、食品管理部３０４は、食品画像を抽出する際に差分により変化した部分を分析し、例えば、エッジ処理して得られたエッジの変化量、及び、予め記憶した空状態（冷蔵室１１内に食品が全く収容されていない状態）の貯蔵室内画像との比較により、食品の入庫又は出庫を判断する。そして、食品管理部３０４は、入庫又は出庫の判断結果（入出庫識別情報）を食品画像の付帯情報に追加して保存する（ステップＳ１６）。

さらに、食品管理部３０４は、食品画像及び付帯情報（時刻情報及び入出庫識別情報）を、状況検知部３０１に送信する（ステップＳ１７）。ここで、ステップＳ１２からステップＳ１７の、冷蔵室１１の貯蔵室内画像を撮影してから、食品画像及び付帯情報を状況検知部３０１に送信するまでの一連の動作は、ステップＳ１１にて扉２０の開閉が検知される度に実施される。

図１４（ａ）から（ｄ）は、実施の形態３に係る冷蔵庫３の冷蔵室１１の撮影画像、撮影画像から抽出された食品画像、及び食品画像の付帯情報の一例を示す図である。図１４（ａ）から（ｄ）には、扉２０の開閉時に、撮影装置２７によって撮影されて食品管理部３０４に送信される撮影データ（貯蔵室内画像）と、貯蔵室内画像から抽出された食品画像と、その付帯情報（時刻情報及び入出庫識別情報）とが示されている。

図１４（ａ）は、時刻Ａにおいて、撮影装置２７で撮影されて食品管理部３０４に送信される貯蔵室内画像を示す。時刻Ａでは、扉２０は開閉されたが、食品の入庫及び出庫は行われていない。時刻Ａとそれ以前とでは、貯蔵室内画像に変化がないため、食品管理部３０４では、差分画像（食品画像）が生成されない。

図１４（ｂ）は、時刻Ｂにおいて、撮影装置２７で撮影されて食品管理部３０４に送信される貯蔵室内画像と、貯蔵室内画像から抽出された食品画像と、その付帯情報とを示す。時刻Ｂでは、冷蔵室１１の最上段の冷蔵室棚板からビールが出庫している。食品管理部３０４は、時刻Ａ，Ｂの貯蔵室内画像の差分により食品画像（ビール）８２ｂを抽出し、また、入庫又は出庫の判断結果に基づき、食品画像と共に、時刻情報（時刻Ｂ）８３ｂ及び「出庫」という入出識別情報８４ｂを保存する。なお、図示の便宜上、図１４（ｂ）に示される食品画像（差分画像）には冷蔵室棚板も示されているが、実際の食品画像には冷蔵庫棚は無く、ビールのみである。

図１４（ｃ）は、時刻Ｃにおいて、撮影装置２７で撮影されて食品管理部３０４に送信される貯蔵室内画像と、貯蔵室内画像から抽出された食品画像と、その付帯情報とを示す。時刻Ｃでは、冷蔵室１１の最下段の冷蔵室棚板からサラダが出庫している。食品管理部３０４は、時刻Ｂ，Ｃの貯蔵室内画像の差分により食品画像（サラダ）８２ｃを抽出し、また、入庫又は出庫の判断結果に基づき、食品画像と共に、時刻情報（時刻Ｃ）８３ｃ及び「出庫」という入出識別情報８４ｃを保存する。

図１４（ｄ）は、時刻Ｄにおいて、撮影装置２７で撮影されて食品管理部３０４に送信される貯蔵室内画像と、貯蔵室内画像から抽出された食品画像と、その付帯情報とを示す。時刻Ｄでは、冷蔵室１１の最上段の冷蔵室棚板上に牛乳が入庫し、さらに、最下段の冷蔵室棚板上にケーキが入庫している。食品管理部３０４は、時刻Ｃ，Ｄの貯蔵室内画像の差分により食品画像（牛乳及びケーキ）８２ｄ１，８２ｄ２を抽出し、また、入庫又は出庫の判断結果に基づき、食品画像と共に、時刻情報（時刻Ｄ）８３ｄ１，８３ｄ２及び「入庫」という入出識別情報８４ｄ１，８４ｄ２を保存する。

このように、食品管理部３０４は、食品画像を、時刻情報及び入出庫識別情報と共に保存しているため、扉２０の開閉動作の度に、冷蔵室１１内の食品の収納状況、及び冷蔵室１１における出し入れの状況を把握することができ、それらの情報を画像情報として状況検知部３０１に送信する。

実施の形態３においては、状況検知部３０１は、食品管理部３０４から受信した食品画像情報を、扉２０の開閉履歴及び温度履歴とともに状況取得部３０２に送信する。状況取得部３０２では、実施の形態３において、扉２０の開閉履歴及び温度履歴に関する情報に加え、収納されている食品そのものの画像情報を得られるため、例えば、扉２０の開閉及び温度履歴の少なくとも一方に変化があった際に、同時に入庫又は出庫した食品の画像も、使用状況として確認することができる。

生活管理部３０３は、状況取得部３０２において取得された、扉２０の開閉履歴と温度履歴に食品画像情報を組み合わせたユーザによる冷蔵庫の使用状況により、例えば、調理に使用した食品を画像情報として確認し、生活状況を取得することができる。また、生活管理部３０３は、扉２０の開閉履歴と温度履歴からは、温度が徐々に低下しているという状況が、ユーザが設定温度を下げたことに起因する状況であるのか、設定温度に対して貯蔵室負荷が小さ過ぎることに起因する状況であるのかを判断することができない。しかし、生活管理部３０３は、食品画像から貯蔵室負荷を取得することができるので、食生活関連情報として、食品が凍結する可能性があること（凍結リスク）などの報知を端末装置７０に実施する必要性を判断することができる。

また、実施の形態３においては、冷蔵室１１内に収納されている食品について、食品管理部３０４は、付帯情報（時刻情報及び入出庫識別情報）と共に保存した食品画像のデータを、時系列に、或いは、入庫又は出庫に分割して保存している。このため、ユーザ本人の端末だけでなく、端末装置７０も同じ情報を送信することができるので、ユーザだけでなく管理者も表示画面を視認することにより、冷蔵室１１内に収納されている食品の状況を把握することができる。

図１５（ａ）及び（ｂ）は、実施の形態３に係る冷蔵庫３の携帯端末における、撮影画像から抽出された食品画像の表示画面の一例を示す図である。図１５（ａ）に示される表示画面（タイムライン表示画面）では、扉２０が開閉される毎に貯蔵室内画像から抽出された食品画像４２と、その食品画像に付帯する時刻情報４３及び入出庫識別情報４４とを、時系列に並べて表示している。この例では、画面中央に、時刻情報（撮影時刻情報）４３が新しいものから順に、食品画像４２が上から並べられており、それぞれの食品画像の左側に時刻情報４３、右側に入出庫識別情報４４を表示している。また、画面上側には対象とする貯蔵室（この例では、冷蔵室）とその設定温度、及び現在時刻も表示されている。

図１５（ａ）に示されるタイムライン表示画面では、例えば、対象とする食品について時間を遡って検索し、消費期限又は賞味期限を取得することができるので、食生活関連情報として、当該食品の消費期限又は賞味期限を報知して消費を促すことにより、食品を無駄に廃棄することを防止することができる。

図１５（ｂ）に示される表示画面（入出庫リスト表示画面）は、入庫と出庫とで左右の欄に分割し、それぞれの欄に食品画像と時刻情報とを時系列に表示（リスト表示）している。すなわち、左側の欄には、入出庫識別情報５４が「入庫」となっている食品画像５２及びその時刻情報（すなわち、入庫時刻）５３を、入庫時刻５３が新しいものから順に上から並べて表示している。右側の欄には、入出庫識別情報５４が「出庫」となっている食品画像５２及びその時刻情報（すなわち、出庫時刻）５３を、出庫時刻５３が新しいものから順に並べて表示している。

図１５（ｂ）に示される入出庫リスト表示画面では、対象とする食品の入庫及び出庫の履歴から、その食品の現在の残量を取得することができるので、食生活関連情報として、端末装置７０に食品の残量を報知することにより、遠隔地、例えば、買い物先において、家族又はヘルパーが表示部７１を確認することにより、無駄な食材の購入、食材の買い過ぎ、及び食材の買い忘れを防止することが可能となる。

図１６は、実施の形態３に係る冷蔵庫３の携帯端末における、撮影画像から抽出された食品画像の表示画面の別の例を示す図である。食品管理部３０４は、自ら保存している食品画像（すなわち、扉２０の開閉毎に抽出された食品画像）６２と、その付帯情報である時刻情報及び入出庫識別情報とから、ある時点で冷蔵室１１内に収納されている（入出庫識別情報が「出庫」でない）食品画像を特定し、図１６に示されるように、在庫食品画像の一覧を、在庫食品一覧表示画面として表示する。なお、この例では、図１５（ａ）及び（ｂ）とは異なり、時刻情報を基に、入庫時刻が古いものから順に、食品画像が上から並べられている。

図１６に示される在庫食品一覧表示画面では、ある時点での在庫食品画像の一覧が表示されるため、図１５（ｂ）で示されるリスト表示よりもさらに明確に、食生活関連情報として食品の残量一覧が報知されることにより、冷蔵室１１内に収納されている食品を把握することができるため、無駄な食材の購入、食材の買い過ぎ、及び食材の買い忘れを防止できるという効果が一層期待できる。また、入庫時刻が古いものから順に、上から食品画像が並べられているので、古い食品、すなわち「早期に消費する必要がある」食品を発見しやすくなり、食品の廃棄を抑制することが可能となる。

なお、図１５（ａ）及び（ｂ）及び図１６に示される、表示部７１の画面上側には、対象とする貯蔵室（この例では、冷蔵室）とその設定温度、及び現在時刻が表示されているが、設定温度の他に、開閉検出部２２によって検出された、所定期間における扉２０の扉２０の開閉回数、又は、温度検出部２６によって検出された、冷蔵室１１内の温度を表示してもよい。

《３−３》効果
以上に説明したように、実施の形態３に係る冷蔵庫３よれば、撮影装置２７によって撮影された貯蔵室内画像から抽出された食品画像と、その入出庫履歴を含む食品画像情報を、状況検知部３０１において検知される第１の情報に反映することにより、扉２０の開閉履歴及び温度履歴によって取得される、貯蔵室内の空気の温度に基づいた生活状況だけでなく、食品画像情報から取得される食品そのものの保管状態に基づいた生活状況を取得することができるという効果が得られる。その結果、特に食品の使用期限又は残量などの食生活関連情報に関する生活状況について、管理者に報知することができる情報が増加するという効果が得られる。

なお、状況検知部３０１は、開閉検出部２２による扉２０の開閉履歴及び温度検出部２６による温度履歴に、撮影装置２７によって撮影された貯蔵室内画像から抽出された食品画像情報を追加して、冷蔵室１１の第１の情報を検知する例を説明した。しかし、状況検知部３０１は、撮影装置２７に基づく食品画像情報のみにより、第１の情報を検知してもよい。食品画像情報のみによっても、食品そのものの保管状態に基づいた生活状況を取得することができるので、食品の使用期限又は残量などの食生活関連情報を報知することが可能であり、また、図１５（ａ）及び（ｂ）に示されるような入出庫履歴を検知することができれば、ユーザの使用履歴、すなわち安否関連情報も報知することが可能である。また、状況検知部３０１は、撮影装置２７に基づく食品画像情報と開閉履歴のみにより、第１の情報を検知してもよいし、又は、撮影装置２７に基づく食品画像情報と温度履歴のみにより、第１の情報を検知してもよい。

《４》実施の形態４
《４−１》構成
図１７は、本発明の実施の形態４に係る冷蔵庫４の冷蔵室１１の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。図１７において、図２、図６、及び図１０に示される構成要素と同一又は対応する構成要素には、図２、図６、及び図１０に示される符号と同じ符号が付される。図１７に示される冷蔵庫４は、制御基板４１０の制御部４００の点において、図１０に示される冷蔵庫３と異なる。

また、図１８は、実施の形態４に係る冷蔵庫４の制御系の構成を概略的に示すブロック図である。図１８において、図３、図７、及び図１１に示される構成要素と同一又は対応する構成要素には、図３、図７、及び図１１に示される符号と同じ符号が付される。図１８に示される冷蔵庫４の制御系は、制御部４００の制御の内容において、図１１に示される冷蔵庫３の制御系と異なる。他の点については、実施の形態４に係る冷蔵庫４は、実施の形態３に係る冷蔵庫３と同じである。

また、図１９は、図１８の制御部４００の構成を概略的に示すブロック図である。図１９に示されるように、制御部４００は、撮影装置２７によって生成された画像データを管理する食品管理部４０４と、冷蔵庫４内の食品の状況を示す第１の情報の検知を行う状況検知部４０１と、ユーザによる冷蔵庫４の使用状況を示す第２の情報を取得する状況取得部４０２と、取得された第２の情報が示す使用状況から、ユーザの生活状況が要報知状況であるか否かを判断する生活管理部４０３とを備えている。さらに、制御部４００は、食品識別部４０５と情報記憶部４０６とを備えている。

食品識別部４０５は、状況検知部４０１、食品管理部４０４及び情報記憶部４０６と接続されている。食品識別部４０５は、食品管理部４０４において抽出された食品画像及び付帯情報（時刻情報及び入出庫識別情報）を受信し、貯蔵室（ここでは、冷蔵室１１）内に収納されている食品の種類及び量を識別する。このとき、食品識別部４０５は、食品の種類などを識別するために、情報記憶部４０６に記憶されている情報を参照する。食品識別部４０５は、食品管理部４０４から受信した、それぞれの食品画像についての時刻情報及び入出庫識別情報に、識別結果（食品の種類及び量情報）を付帯情報として追加し、状況検知部４０１に送信する。

情報記憶部４０６は、食品識別部４０５と接続されている。情報記憶部４０６は、食品の種類のそれぞれについて、当該食品の種類を他の食品の種類と区別することができるための特徴的な属性、例えば、食品の形状、大きさ、色及び外装ラベルの少なくとも１つを、食品の種類のそれぞれに対応付けた参照情報として記憶している。

図２０は、情報記憶部４０６に記憶されている、具体的な情報の一例（食品画像データベース）を示す図である。ここでは、当該食品の種類に属する食品自体又は当該食品が入った容器の特徴量を、当該食品の種類に対応付けて記憶しており、具体的には、各食品の種類について、形状（輪郭）、長軸の大きさ、代表色（赤緑青（ＲＧＢ）値）、及びラベル（文字）などの情報を特徴量としている。

なお、情報記憶部４０６に記憶する食品の種類毎の形状としては、ここで例に挙げた輪郭の他、例えば、当該食品の外形に最も近い幾何学的形状（例えば、円柱、台形など）としてもよい。この場合、食品識別部４０５による識別においては、例えば、パターンマッチングなどの手法により情報記憶部４０６に記憶されている形状との照合を行う。また、色については、代表色のＲＧＢ値の他、例えば、明度、彩度などの他の指標値を用いるようにしてもよい。

制御部４００は、記憶部２４に記憶されているソフトウェアとしてのプログラムを実行する情報処理装置としてのプロセッサを有してもよい。この場合には、制御部４００の機能は、このプログラムを実行することによって、実現される。

《４−２》動作
次に、実施の形態４の冷蔵庫４の動作の一例について、図１７から図２１を参照して説明する。図２１は、冷蔵庫４の扉２０が開閉される毎に行われる動作を説明するためのフローチャートである。図２１において、図１３に示されるステップと同一又は対応するステップには、図１３に示されるステップ番号と同じステップ番号が付される。

図２１に示される動作において、扉２０の開閉から開始し、食品管理部４０４が、前回と今回の扉２０の開閉時の貯蔵室内画像の差分を演算することにより、貯蔵室内画像の変化部分の画像を食品画像として抽出し、また、食品の入庫又は出庫を判断し、食品画像と共に、時刻情報及び入出庫識別情報を付帯情報として保存する（ステップＳ１６）までは、図１３に示される実施の形態３の動作と同一である。実施の形態３においては、食品管理部４０４は、これら食品画像及び付帯情報を状況検知部４０１に送信したが、実施の形態４においては、まず食品識別部４０５に送信する（ステップＳ２１）。

食品識別部４０５は、図２０の例に示されるような情報記憶部４０６に記憶されている情報を参照しながら、食品管理部４０４から受信した食品画像に基づいて、貯蔵室（ここでは、冷蔵室１１）内に収納されている食品の種類及び量を識別する（ステップＳ２２）。この識別においては、食品識別部４０５は、食品管理部４０４により抽出された個々の食品の画像について、情報記憶部４０６に記憶されている食品の種類のうち、どの食品の種類の特徴量と合致するかを照合する。

そして、個々の食品の画像と合致する情報記憶部４０６に記憶されている特徴量があった場合、当該画像の食品の種類は、情報記憶部４０６においてこの合致した特徴量に対応付けられている種類であると、食品識別部４０５は判断する。なお、情報記憶部４０６に特徴量が合致するデータがない場合、当該画像の食品の種類を、最も類似する食品の種類で代替するか、或いは、当該画像の食品は種類不明の収納物として大きさだけを識別するようにしてもよい。

食品識別部４０５は、食品管理部４０４から受信した食品画像、及びそれぞれの食品画像についての時刻情報及び入出庫識別情報に、このようにして識別した食品の種類及び量情報を付帯情報として追加し（ステップＳ２３）、実施の形態３と同様に状況検知部４０１に送信する（ステップＳ１７）。

状況検知部４０１で受信する食品画像情報には、実施の形態４においては、実施の形態３と比較して、付帯情報として食品の種類及び量情報が追加されている。したがって、状況取得部４０２では、実施の形態４において、収納されている食品そのものの画像だけではなく、その種類及び量の情報も得られるため、例えば、扉２０の開閉及び温度履歴の少なくとも一方に変化があった際に、同時に入庫又は出庫した食品の種類又は量も、使用状況として確認することができる。

生活管理部４０３では、実施の形態４において、状況取得部４０２において、食品画像情報に食品の種類及び量情報を追加して取得されたユーザによる冷蔵庫の使用状況により、例えば、調理に使用した食品の種類又は量を確認し、生活状況を取得することができる。したがって、冷蔵庫４を所有するユーザ以外の管理者が、ユーザの消費傾向を確認することができ、また、予め設定しておくことにより、食生活関連情報として、ユーザの偏食傾向などの情報を受信することが可能となる。

また、冷蔵室１１内に収納されている食品について、食品画像だけでなく、食品の種類及び量情報も保存しているので、実施の形態３と同様に、ユーザ本人の端末装置の表示部にはもちろんのこと、ユーザ以外の者（第三者である管理者）の端末装置７０の表示部７１にも出力することができ、表示画面を視認することにより、冷蔵室１１内に収納されている食品の種類及び量を含む在庫状況を把握することができる。

《４−３》効果
以上に説明したように、実施の形態４に係る冷蔵庫４よれば、撮影装置２７によって撮影された貯蔵室内画像から抽出された食品画像に、さらにその食品の種類と量の情報を追加して、状況検知部４０１において検知される食品の状況（第１の情報）に反映し、ユーザによる冷蔵庫の使用状況（第２の情報）を取得することにより、食品そのものの種類及び量の少なくとも一方に基づいて、食生活関連情報として、ユーザの消費傾向を確認し、管理することができるという効果が得られる。また、特に食品の在庫状況及び残量などの食生活関連情報に関する生活状況について、実施の形態３における画像情報よりもさらに詳細に管理者に報知することができるという効果が得られる。

《５》実施の形態５
本発明の実施の形態５においては、実施の形態１から４に係る冷蔵庫のいずれかを含むネットワークシステムを説明する。図２２は、実施の形態５に係るネットワークシステムの概略構成を示す図である。図２２において、実施の形態１から４で説明された構成要素と同一の構成要素には、実施の形態１から４で用いられた符号と同じ符号が付される。図２２に示されるように、実施の形態５に係るネットワークシステムは、宅内システム５００と、インターネットによって宅内システム５００と通信を行うことができる宅外システム６００とを有している。宅内システム５００は、冷蔵庫５を有する。冷蔵庫５は、実施の形態１，２，３，４の冷蔵庫１，２，３，４のいずれかである。

図２２に示されるように、宅内システム５００は、冷蔵庫５、ルームエアコン、給湯器、ＩＨ（Ｉｎｄｕｃｔｉｏｎ Ｈｅａｔｉｎｇ）クッキングヒータ、電子レンジなどのような家電機器を有している。これらの家電機器及び電力計測装置５０３は、電灯線５０２によって系統電源５０１と接続され、系統電源５０１から電力が供給される。宅内システム５００は、系統電源５０１から電灯線５０２を通して各家電機器に供給される電力を計測するための電力計測装置５０３及び電力計測端子５０４と、宅内コントローラ５０５と、ブロードバンドルータ５０６と、通信装置としての機器通信部５１５とを有している。

電力計測装置５０３は、各家電機器に供給される電力（すなわち、各家電機器の消費電力）、並びに、系統電源５０１から家電機器全体及び電力計測装置５０３に供給される全電力を計測し、この計測の結果（履歴）を保存することができる。電力計測装置５０３は、例えば、ＣＴ（Ｃｕｒｒｅｎｔ Ｔｒａｎｓｆｏｒｍｅｒ）などの電力計測端子５０４によって供給電力を測定する。

家電機器及び電力計測装置５０３のそれぞれには、通信ネットワークを介して、宅内コントローラ５０５と通信するための機器通信部５１５が備えられている。通信ネットワークは、例えば、有線又は無線のＬＡＮ（ローカルエリアネットワーク）である。冷蔵庫５などのような家電機器及び電力計測装置５０３は、それぞれの機器通信部５１５を介して、宅内コントローラ５０５と有線又は無線で双方向通信することができる。なお、冷蔵庫５に接続された機器通信部５１５は、実施の形態１から４で説明された、通信装置としての通信部２３と同一の役割を果たす。したがって、冷蔵庫５の通信部２３が宅内コントローラ５０５と直接、有線又は無線で通信可能である場合には、冷蔵庫５についての機器通信部５１５を備える必要はない。

機器通信部５１５が有線で通信する機能を有する場合には、機器通信部５１５は、例えば、シリアルインターフェース又はドライバなどの有線通信モジュールを具備している。機器通信部５１５が無線で通信する機能を有する場合には、機器通信部５１５は、Ｗｉ−Ｆｉ（登録商標）又はＢｌｕｅｔｏｏｔｈ（登録商標）などの無線通信モジュールを具備している。なお、機器通信部５１５は、家電機器及び電力計測装置５０３のそれぞれに内蔵されていてもよいし、家電機器及び電力計測装置５０３の外部に備えられてもよい。

宅内コントローラ５０５は、電力計測装置５０３が計測した家電機器の消費電力及び系統電源５０１の供給電力の情報を、通信ネットワークを介して電力計測装置５０３から取得することができる。また、宅内コントローラ５０５は、家電機器の運転状態の情報を、通信ネットワークを介して取得することができる。そして、宅内コントローラ５０５は、取得した消費電力及び供給電力並びに運転状態の情報を管理し、必要に応じて、家電機器に対して通信ネットワークを介して制御変更指示（例えば、運転状態の変更の指示）を送信することも可能な構成となっている。

また、宅内コントローラ５０５は、ブロードバンドルータ５０６を経由して、宅外システム６００のインターネット６０１に接続される。

インターネット６０１は、各種電力情報及び天気予報などの環境情報が格納されているクラウドサーバ６０２に接続される。また、インターネット６０１は、端末装置７０にも接続される。端末装置７０は、実施の形態１で説明したものと同様、冷蔵庫５のユーザと異なる管理者に使用権限が与えられている、例えば、スマートフォン、携帯タブレット、携帯電話、パーソナルコンピュータなどのような端末装置である。

クラウドサーバ６０２は、インターネット６０１を介して冷蔵庫５及び端末装置７０と通信可能に接続された外部サーバである。クラウドサーバ６０２は、端末装置７０について冷蔵庫５への接続権限の有無を認証する個人認証手段６０３を備えていることが望ましい。

例えば、クラウドサーバ６０２は、冷蔵庫５のＩＤ（識別子）に対して、当該冷蔵庫５への接続権限を有する端末装置７０の携帯端末ＩＤを予め記憶している。ここで、冷蔵庫５のＩＤとは、インターネット６０１に接続され得る複数の冷蔵庫の各々を一意に識別可能な情報である。また、携帯端末ＩＤとは、インターネット６０１に接続された複数の携帯端末の各々を一意に識別可能な情報である。

そして、個人認証手段６０３は、端末装置７０の携帯端末ＩＤが、冷蔵庫５に対して当該冷蔵庫５への接続権限を有するものとして記憶されているか否かを確認することで、端末装置７０について冷蔵庫５への接続権限の有無を認証する。

外部サーバであるクラウドサーバ６０２は、個人認証手段６０３により冷蔵庫５への接続権限を有することを認証した端末装置７０が、インターネット６０１を介して冷蔵庫５へと接続することを許可する。すなわち、クラウドサーバ６０２は、個人認証手段６０３により冷蔵庫５への接続権限を有することが認証されていない携帯端末が、インターネット６０１を介して冷蔵庫５へと接続することを禁止する。

宅内コントローラ５０５は、宅内システム５００において電力計測装置５０３から家電機器の消費電力又は系統電源５０１の供給電力を入手し、また、家電機器から運転状態又は周囲環境の情報を入手する。さらに、宅内コントローラ５０５は、ブロードバンドルータ５０６を経由してインターネット６０１に接続しており、クラウドサーバ６０２から各種電力情報又は環境情報を入手することが可能である。

例えば、宅内システム５００の宅内コントローラ５０５は、宅外システム６００のクラウドサーバ６０２から電力情報として宅内システム５００が載置されている地域に関する電力の需給状況を入手することができる。そして、地域の消費電力が供給電力の上限値に迫っている場合には、宅内コントローラ５０５は、特に消費電力の大きい家電機器に対して節電指示を送信することができる。また、そのような場合に、冷蔵庫５については、貯蔵室の設定温度と実際の温度履歴とから冷却過剰と判断された場合に、宅内コントローラ５０５から設定温度の上昇を指示することができる。

例えば、宅内システム５００の宅内コントローラ５０５は、宅外システム６００のクラウドサーバ６０２から電力情報として宅内システム５００が載置されている地域に関する電力の需給状況を入手することができる。そして、地域の消費電力が供給電力の上限値に迫っている場合には、宅内コントローラ５０５は、特に消費電力の大きい家電機器に対して節電指示を送信することができる。また、そのような場合に、冷蔵庫５については、貯蔵室の設定温度と実際の温度履歴とから冷却過剰と判断された場合に、宅内コントローラ５０５から設定温度を上げることを指示することができる。

また、端末装置７０からインターネット６０１を経由し、宅内コントローラ５０５を介して直接的又は間接的に冷蔵庫５に接続することもできる。この際、クラウドサーバ６０２の個人認証手段６０３により、冷蔵庫５への接続権限を有することが認証された端末装置７０のみが、冷蔵庫５への接続を許可される。

したがって、例えば、家族又はヘルパーが管理者である場合には、端末装置７０の携帯端末ＩＤを登録しておけば、セキュリティを維持したうえで、冷蔵庫５のユーザの生活状況に関する情報を共有することが可能となる。また、例えば、スーパーマーケットなどのような買い物先において、冷蔵庫５の貯蔵室内の食品の在庫状態を確認することが可能となるため、家族同士で同じ食材を重複して買ったり、必要な食材を買い忘れたりすることなどを防ぐことができる。

実施の形態５においては、食品識別部が参照する情報記憶部の全部又は一部を、外部サーバであるクラウドサーバ６０２に設けるようにしてもよい。情報記憶部４０６をクラウドサーバ６０２に保存するようにすることで、食品の種類に関する膨大なデータを、例えば、他のユーザなどと共有することが可能である。

なお、以上で説明した個人認証手段６０３はＩＤを用いて接続権限を認証するものであった。認証方法については、これに限定されない。ＩＤの他に、例えば、指紋、静脈、目の虹彩などの生体認証、或いは、パスワードによる認証、もしくは、これらの認証方法の組み合わせによって、接続権限を認証するようにしてもよい。

１，２，３，４，５ 冷蔵庫、 １１ 冷蔵室（貯蔵室）、 １２ 製氷室（貯蔵室）、 １３ 切替室（貯蔵室）、 １４ 冷凍室（貯蔵室）、 １５ 野菜室（貯蔵室）、 １６ 棚板、 １７ チルド室（貯蔵室）、 １８ チルドケース、 １９ 冷却風路、 ２０ 扉、 ２１ 操作パネル、 ２２ 開閉検出部、 ２３ 通信部、 ２４ 記憶部、 ２５ 時刻提供部、 ２６ 温度検出部、 ２７ 撮影装置、 ７０ 管理者装置（端末装置）、 ７１ 表示部、 １００，２００，３００，４００ 制御部、 １０１，２０１，３０１，４０１ 状況検知部、 １０２，２０２，３０２，４０２ 状況取得部、 １０３，２０３，３０３，４０３ 生活管理部、 １１０，２１０，３１０，４１０ 制御基板、 ３０４，４０４ 食品管理部、 ４０５ 食品識別部、 ４０６ 情報記憶部、 ５００ 宅内システム、 ５０１ 系統電源、 ５０２ 電灯線、 ５０３ 電力計測装置、 ５０４ 電力計測端子、 ５０５ 宅内コントローラ、 ５０６ ブロードバンドルータ、 ６００ 宅外システム、 ６０１ インターネット、 ６０２ クラウドサーバ、 ６０３ 個人認証手段。

本発明の一態様に係る冷蔵庫は、食品を収納する貯蔵室と、管理者によって使用される端末装置と通信を行う通信部と、を有する冷蔵庫であって、前記冷蔵庫のユーザ操作、前記貯蔵室内の空気の温度、及び前記貯蔵室内における食品の状態、の内の少なくとも１つに関する第１の情報を検知する状況検知部と、ある期間における前記第１の情報から前記冷蔵庫の使用状況を示す第２の情報を取得する状況取得部と、時間帯及び曜日の少なくとも１つに応じて異なる判断基準と前記第２の情報とから、前記冷蔵庫のユーザの生活状況が前記管理者に報知されるべきであると判断した場合に、前記生活状況を前記端末装置に報知する生活管理部とを有するものである。

本発明の実施の形態１に係る冷蔵庫の概略構造を示す正面図である。 実施の形態１に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態１に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図３の制御部の構成を概略的に示すブロック図である。 （ａ）及び（ｂ）は、実施の形態１に係る冷蔵庫の冷蔵室における扉の開閉履歴の例を示す図である。 本発明の実施の形態２に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態２に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図７の制御部の構成を概略的に示すブロック図である。 （ａ）から（ｃ）は、実施の形態２に係る冷蔵庫の冷蔵室における温度履歴の例を示す図である。 本発明の実施の形態３に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態３に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図１１の制御部の構成を概略的に示すブロック図である。 実施の形態３に係る冷蔵庫の動作を示すフローチャートである。 （ａ）から（ｄ）は、実施の形態３に係る冷蔵庫の冷蔵室内の撮影画像（貯蔵室内画像）、撮影画像から抽出された食品画像、及び食品画像の付帯情報の例を示す図である。 （ａ）及び（ｂ）は、実施の形態３に係る冷蔵庫の冷蔵室内の撮影画像（貯蔵室内画像）から抽出された食品画像の、携帯端末における表示画面の例を示す図である。 実施の形態３に係る冷蔵庫の冷蔵室内の撮影画像（貯蔵室内画像）から抽出された食品画像の、携帯端末における表示画面の例を示す図である。 本発明の実施の形態４に係る冷蔵庫の冷蔵室の概略構造（図１を線分ＩＩ−ＩＩで切る断面構造）を示す断面図である。 実施の形態４に係る冷蔵庫の制御系の構成を概略的に示すブロック図である。 図１８の制御部の構成を概略的に示すブロック図である。 実施の形態４に係る冷蔵庫の食品識別部が参照する、食品画像データベースの内容の例を表形式で示す図である。 実施の形態４に係る冷蔵庫の動作を示すフローチャートである。 本発明の実施の形態５に係るネットワークシステムの構成を概略的に示す図である。

図１４（ｂ）は、時刻Ｂにおいて、撮影装置２７で撮影されて食品管理部３０４に送信される貯蔵室内画像と、貯蔵室内画像から抽出された食品画像と、その付帯情報とを示す。時刻Ｂでは、冷蔵室１１の最上段の冷蔵室棚板からビールが出庫している。食品管理部３０４は、時刻Ａ，Ｂの貯蔵室内画像の差分により食品画像（ビール）８２ｂを抽出し、また、入庫又は出庫の判断結果に基づき、食品画像と共に、時刻情報（時刻Ｂ）８３ｂ及び「出庫」という入出庫識別情報８４ｂを保存する。なお、図示の便宜上、図１４（ｂ）に示される食品画像（差分画像）には冷蔵室棚板も示されているが、実際の食品画像には冷蔵庫棚は無く、ビールのみである。

図１４（ｃ）は、時刻Ｃにおいて、撮影装置２７で撮影されて食品管理部３０４に送信される貯蔵室内画像と、貯蔵室内画像から抽出された食品画像と、その付帯情報とを示す。時刻Ｃでは、冷蔵室１１の最下段の冷蔵室棚板からサラダが出庫している。食品管理部３０４は、時刻Ｂ，Ｃの貯蔵室内画像の差分により食品画像（サラダ）８２ｃを抽出し、また、入庫又は出庫の判断結果に基づき、食品画像と共に、時刻情報（時刻Ｃ）８３ｃ及び「出庫」という入出庫識別情報８４ｃを保存する。

なお、図１５（ａ）及び（ｂ）及び図１６に示される、表示部７１の画面上側には、対象とする貯蔵室（この例では、冷蔵室）とその設定温度、及び現在時刻が表示されているが、設定温度の他に、開閉検出部２２によって検出された、所定期間における扉２０の開閉回数、又は、温度検出部２６によって検出された、冷蔵室１１内の温度を表示してもよい。

Claims (14)

1. 食品を収納する貯蔵室と、管理者によって使用される端末装置と通信を行う通信部と、を有する冷蔵庫であって、
   前記冷蔵庫のユーザ操作、前記貯蔵室内の空気の温度、及び前記貯蔵室内における食品の状態、の内の少なくとも１つに関する第１の情報を検知する状況検知部と、
   ある期間における前記第１の情報から前記冷蔵庫の使用状況を示す第２の情報を取得する状況取得部と、
   前記第２の情報から、前記冷蔵庫のユーザの生活状況が前記管理者に報知されるべきであると判断した場合に、前記生活状況を前記端末装置に報知する生活管理部と、
   を有する冷蔵庫。
2. 情報を記憶する記憶部と、
   時刻情報を提供する時刻提供部と、
   をさらに備え、
   前記状況検知部は、前記時刻提供部から前記第１の情報の前記検知の時刻を取得し、前記第１の情報と前記検知の時刻とを前記記憶部に記憶させ、
   前記状況取得部は、前記記憶部に記憶されている前記第１の情報と前記検知の時刻とを含む前記第２の情報を取得する
   請求項１に記載の冷蔵庫。
3. 前記貯蔵室の開口部を開閉する扉と、
   前記ユーザ操作である前記扉の開閉を検出する開閉検出部と、
   をさらに備え、
   前記状況検知部によって検知される前記第１の情報は、前記開閉検出部によって検出される前記扉の開閉を示す情報を含む
   請求項１又は２に記載の冷蔵庫。
4. 前記貯蔵室内の空気の温度を検出する温度検出装置をさらに備え、
   前記状況検知部によって検知される前記第１の情報は、前記温度検出装置によって検出される前記温度を含む
   請求項１から３のいずれか１項に記載の冷蔵庫。
5. 前記貯蔵室内を撮影することによって前記貯蔵室内の画像を取得する撮影装置と、
   前記撮影装置によって取得された前記画像から前記貯蔵室内に保存されている食品の食品画像を抽出し、前記貯蔵室における食品の入庫及び出庫に関する入出庫情報を前記第１の情報として保存する食品管理部と、
   をさらに備え、
   前記状況検知部によって検知される前記第１の情報は、前記食品管理部によって保存される前記入出庫情報を含む
   請求項１から４のいずれか１項に記載の冷蔵庫。
6. 前記食品管理部によって抽出された前記食品画像に対応する食品の種類及び量を識別する食品識別部をさらに備え、
   前記状況検知部によって検知される前記第１の情報は、前記食品識別部によって識別された前記食品の種類及び量を含む
   請求項５に記載の冷蔵庫。
7. 前記食品識別部は、食品の種類に、食品の形状、大きさ、色、及び外装ラベルの内の少なくとも１つを対応付けた情報を参照情報として記憶する情報記憶部を有し、
   前記食品識別部は、前記参照情報を参照して前記食品画像に対応する食品の種類及び量を識別する
   請求項６に記載の冷蔵庫。
8. 前記生活管理部は、前記第２の情報によって示される前記使用状況に変化がない状況が予め決められた期間以上継続した場合に、前記通信部を介して前記端末装置に前記報知情報を報知する
   請求項１から７までのいずれか１項に記載の冷蔵庫。
9. 前記生活管理部は、前記ユーザが不在であることを示す情報を受け取ったときから前記ユーザが在宅であることを示す情報を受け取るまでの期間に、前記第２の情報によって示される前記使用状況に変化があると判断した場合に、前記通信部を介して前記端末装置に前記報知情報を報知する
   請求項１から８までのいずれか１項に記載の冷蔵庫。
10. 前記生活管理部は、前記第２の情報によって示される前記使用状況に関する基準情報を予め記憶する情報記憶部を有し、
    前記生活管理部は、前記基準情報を参照して前記使用状況に予め決められた特徴があると判断した場合に、前記通信部を介して前記端末装置に前記報知情報を報知する
    請求項１から８までのいずれか１項に記載の冷蔵庫。
11. 食品を収納する貯蔵室と、端末装置と通信を行う通信部と、時刻情報を提供する時刻提供部と、を有する冷蔵庫であって、
    前記冷蔵庫の扉の開閉を示す第１の情報を検知する状況検知部と、
    ある期間に前記状況検知部で検知された前記第１の情報と前記扉が開閉された時刻を示す時刻情報とを含む第２の情報を取得する状況取得部と、
    前記第２の情報から、前記扉の開閉が行われない継続時間が予め決められた基準時間以上であると判断した場合に、前記生活状況を前記端末装置に報知する生活管理部と、
    を有する冷蔵庫。
12. 請求項１から１１までのいずれか１項に記載の冷蔵庫と、
    前記冷蔵庫と通信可能に接続された端末装置と、
    を備えたネットワークシステム。
13. インターネットを介して、前記冷蔵庫及び前記端末装置と通信可能に接続されるサーバをさらに備え、
    前記サーバは、前記端末装置が前記冷蔵庫との通信が許可された端末であることを認証する個人認証手段を有する
    請求項１２に記載のネットワークシステム。
14. 前記サーバは情報記憶部を有し、
    前記冷蔵庫は、前記情報記憶部に記憶されている情報を参照して、前記貯蔵室内に保存されている食品の食品画像に対応する食品の種類及び量を識別する
    請求項１３に記載のネットワークシステム。

Images