JP2012251722A - 冷蔵庫 - Google Patents
冷蔵庫 Download PDFInfo
- Publication number
- JP2012251722A JP2012251722A JP2011124815A JP2011124815A JP2012251722A JP 2012251722 A JP2012251722 A JP 2012251722A JP 2011124815 A JP2011124815 A JP 2011124815A JP 2011124815 A JP2011124815 A JP 2011124815A JP 2012251722 A JP2012251722 A JP 2012251722A
- Authority
- JP
- Japan
- Prior art keywords
- refrigerator
- camera
- food
- image
- storage room
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Devices That Are Associated With Refrigeration Equipment (AREA)
- Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
Abstract
【課題】カメラによる画像処理を単純化することで安価な構成にできるとともに、冷蔵庫の省エネを図ることを目的とする。
【解決手段】食品を冷却して保存する冷蔵室15と、前記冷蔵室15の開口部を開閉する扉22と、前記冷蔵室15に設けられ前記冷蔵室15の内部を撮影するカメラ16と、前記カメラ16で撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器13からの冷気を前記冷蔵室15へと送出する庫内ファン14と、圧縮機11を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン14、及び、前記圧縮機11の回転数を増減させるものである。
【選択図】図2
【解決手段】食品を冷却して保存する冷蔵室15と、前記冷蔵室15の開口部を開閉する扉22と、前記冷蔵室15に設けられ前記冷蔵室15の内部を撮影するカメラ16と、前記カメラ16で撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器13からの冷気を前記冷蔵室15へと送出する庫内ファン14と、圧縮機11を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン14、及び、前記圧縮機11の回転数を増減させるものである。
【選択図】図2
Description
本発明は、庫内を撮影するカメラを備えた冷蔵庫に関するものである。
従来、この種の冷蔵庫は、冷蔵庫内に置かれている食品をCCDカメラと画像処理手段によって画像を認識して、庫内食品の管理を行うものがある(例えば、特許文献1参照)。
図11〜図15は、特許文献1に記載された従来の冷蔵庫を示すものである。図11は冷凍冷蔵庫の横からみた断面図であり、図に示す位置に複数のCCDカメラが取りつけられている。各CCDカメラにはレンズ部分に発露しないように近傍にヒータが取りつけられていて、本体部分は冷蔵庫の断熱材部分にうめこまれている(図12)。図13は簡単なシステムブロック図であり、図14は庫内管理を中心とした処理のフローチャートであり、更に図15は扉の開閉毎にCCDカメラから入力した画像の一例である。
図14のフローチャートに従って説明すると、ステップS1では、あらかじめ庫内の画像をCCDカメラより入力しておく(画像1)。ステップS2では食品を入れられた状態で画像を入力し(画像2)、ステップS3で画像1と画像2の差部をとり、庫内の食品のみを抽出し(画像3)、ステップS4で縮退、膨張をくり返すことにより、ゴミ等を除去し、それぞれの食品の特徴を抽出してステップS5でラベリング(画像3の3つの食品を各々a,b,cとする)を行う。マイコンは内部メモリに抽出された各食品a,b,c毎のその食品が保存されているというフラグ及び保存期間をカウントするカウンタをそれぞれ設定する。
以上の動作により、現時点で庫内に保存されている食品が入力される。次に、ステップS6でドアスイッチ7によりドアが開閉されたかどうかをチェックし、開閉されていなければ時間の経過に従ってステップS14にて保存されている食品(a,b,c)のそれぞれのタイマーをカウントアップし、ステップS15にて、一定期間を過ぎている食品があれば液晶表示素子等よりなる表示装置6にて一定期間が過ぎたタイマーに対応する食品を画像3より選択して表示または点滅表示したり、もしくはその食品の中心付近を表示または点滅表示したりすることによって一定期間が経過していることを示す。
ドアが開閉された場合、食品の出入があったことが予想されるのでステップS7〜S10に示すように、再び庫内の画像の入力を行い、各食品毎にラベリングを行う。S7〜S10はS2〜S5と同一の処理である。ステップS11にて前回入力した画像3と今回入力した画像5との差分をとり(画像6)、ステップS12にて画像3と6の差分をとることにより食品bが庫内から取り出されたことを認識にマイコンメモリ内の食品bに対応するフラグ及びカウンタをクリアする。ステップS13にて画像5と画像6の差分をとり、新たに入れられた食品dを抽出してこれに対応するフラグ及びカウンタをマイコンメモリ内に新たに設定する。以後、S6〜S15をくり返すことにより庫内食品の在庫管理を行う。
しかしながら、前記従来の構成では、CCDカメラで撮影された画像に対して、庫内の食品のみを抽出し、縮退、膨張をくり返すことにより、ゴミ等を除去し、それぞれの食品の特徴を抽出してラベリングを行っているので、画像処理が複雑となって、処理時間が長く、処理能力の高いマイコンが必要になり、CCDカメラを含めると、相当なコストアップに繋がるという課題を有していた。
本発明は、前記従来の課題を解決するもので、カメラによる画像処理を単純化することで安価な構成にできるとともに、冷蔵庫の省エネを図ることを目的とする。
前記従来の課題を解決するために、本発明の冷蔵庫は、食品を冷却して保存する貯蔵室と、前記貯蔵室の開口部を開閉する扉と、前記貯蔵室に設けられ前記貯蔵室の内部を撮影するカメラと、前記カメラで撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器からの冷気を前記貯蔵室へと送出する庫内ファンと、圧縮機を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン、及び、前記圧縮機の回転数を増減させるものである。
これによって、制御装置による画像処理の結果、庫内の食品の収納状態が少ない場合には、前記庫内ファン、及び、前記圧縮機の回転数を減少させるという省エネ運転を行うことができ、庫内の食品の収納状態が多い場合には、前記庫内ファン、及び、前記圧縮機の回転数を増加させることにより庫内を冷却でき、冷蔵庫の庫内温度を最適に制御できる。
また、省エネ運転を行うことで制御装置及びカメラによる冷蔵庫のコストアップ分について、使用者に理解を得られ易くなる。
また、本発明の冷蔵庫は、前記制御装置は、前記貯蔵室に収納物の無い状態で撮影された初期画像が記憶されており、食品が収納されている時に前記カメラで撮影された画像は、前記制御装置に電送されて画像が画素単位に分割され、前記貯蔵室の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数が前記カメラの撮影画素数の所定値A以上であれば、冷蔵庫内に食品が詰まっていると判断し、前記カメラの撮影画素数の所定値B以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、前記庫内ファン、及び、前記圧縮機の回転数を増減するものである。
これによって、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、且つ、安価なマイコンで省エネ運転を行うことが可能となり、冷蔵庫のコストアップ分も大幅に抑制できる。
本発明の冷蔵庫は、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、また、カメラの総画素数は安価なものでも100万画素以上有しているので、個々の画素単位の比較で稀に発生するであろう「0」と「1」の認識誤差も、全体を通して見ると吸収され、精度の高い判定が可能となり、庫内の食品の収納状態に対応して、庫内ファン、及び、圧縮機の回転数を増減させるので、冷蔵庫の庫内温度を最適に制御でき、省エネ運転を行うことができる。
第1の発明は、食品を冷却して保存する貯蔵室と、前記貯蔵室の開口部を開閉する扉と、前記貯蔵室に設けられ前記貯蔵室の内部を撮影するカメラと、前記カメラで撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器からの冷気を前記貯蔵室へと送出する庫内ファンと、圧縮機を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン、及び、前記圧縮機の回転数を増減させることにより、省エネ運転を行うことができ、制御装置及びカメラによる冷蔵庫のコストアップ分を、省エネ運転による電力使用量の削減効果分で、相殺、或いは、それ以上の効果を生み出すことが可能となり、使用者に理解を得られ易くなるとともに、環境負荷(電力消費量)に対する低減効果も有している。
第2の発明は、前記カメラを前記貯蔵室の背面壁に設けたものであり、貯蔵室全体の食品の収納状態を撮影することが可能となり、安価な構成で省エネ運転を実現できる。
第3の発明は、前記カメラを前記貯蔵室の扉の内壁に設けたものであり、棚に載置された食品によって、カメラのレンズ部が塞がれるのを防止することができ、庫内に食品が大量に収納されている場合でも、信頼性の高いカメラ撮影が可能となる。
第4の発明は、前記貯蔵室の内壁に複数のカメラを設けたものであり、冷蔵室内を撮影するカメラを貯蔵室内の背面壁、或いは、貯蔵室扉の内壁だけでなく、貯蔵室内のどちらか一方の側壁、或いは、冷蔵室内の両方の側壁に設け、複数のカメラで異なる方向から、冷蔵室内を撮影することで、食品の収納状態を精度良く判別することが可能となる。
第5の発明は、前記制御装置は、前記貯蔵室に収納物の無い状態で撮影された初期画像が記憶されており、食品が収納されている時に前記カメラで撮影された画像は、前記制御装置に電送されて画像が画素単位に分割され、前記貯蔵室の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数が前記カメラの撮影画素数の所定値A以上であれば、冷蔵庫内に食品が詰まっていると判断し、前記カメラの撮影画素数の所定値B以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、前記庫内ファン、及び、前記圧縮機の回転数を増減するものであり、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、且つ、安価なマイコンで省エネ運転を行うことが可能となり、冷蔵庫のコストアップ分を大幅に抑制しつつ、環境負荷
(電力消費量)に対する低減効果も有している。
(電力消費量)に対する低減効果も有している。
第6の発明は、前記貯蔵室内の温度を検知する温度センサを備え、前記温度センサの値による前記庫内ファン及び前記圧縮機の回転数制御と、前記カメラによる画像処理の判定による前記庫内ファン及び圧縮機の回転数制御が異なる場合には、前記画像処理の判定を優先するものであり、貯蔵室内の温度検知に基づく制御では、食品(負荷)の大小による最適な制御を時間遅れなしに実行するのは困難であるが、画像処理の判定にて食品(負荷)の大小を直接認識することで、常に最適な制御をリアルタイムに実行することができる。
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、この実施の形態によって本発明が限定されるものではない。
(実施の形態1)
図1は、本発明の第1の実施の形態における冷蔵庫の正面図を示すものである。図2は、本発明の第1の実施の形態における冷蔵庫の縦断面図を示すものである。図3は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図4は、本発明の第1の実施の形態における冷蔵庫の制御に関するフローチャートである。図5は、本発明の第1の実施の形態における冷蔵庫の制御に関するフローチャートである。図6は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図7は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図8は、本発明の第1の実施の形態における冷蔵庫のダクト内部の模式図である。
図1は、本発明の第1の実施の形態における冷蔵庫の正面図を示すものである。図2は、本発明の第1の実施の形態における冷蔵庫の縦断面図を示すものである。図3は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図4は、本発明の第1の実施の形態における冷蔵庫の制御に関するフローチャートである。図5は、本発明の第1の実施の形態における冷蔵庫の制御に関するフローチャートである。図6は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図7は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図8は、本発明の第1の実施の形態における冷蔵庫のダクト内部の模式図である。
図1〜図8において、冷蔵庫本体10の上部に圧縮機11が配設され、冷凍室12の背面側には冷却器13で生成される冷気を庫内へ送風する庫内ファン14が設けられている。そして、冷蔵室15の内部に庫内を撮影するカメラ16が配設され、カメラ16には透明カバー17が設けられている。また、冷蔵室15の内部には食品を載置するための棚18が複数枚配設されている。棚18と対向する背面壁に凹部19が設けられ、凹部19内にカメラ16が収納される。冷蔵室15内の背面壁に配置されているダクト20の略中央部には中空円筒状の枠体21が設けられ、枠体21の内部にカメラが配設される。
以上のように構成された冷蔵庫について、以下その動作、作用を説明する。
まず、冷蔵室15内の背面壁の略中央に冷蔵室15内を撮影するカメラ16が配設され、
冷蔵室扉の開閉を検知するドアスイッチと連動して、撮影動作を行う。冷蔵室15内に設置されたカメラ16で撮影された画像は、制御装置に電送され、画像処理が行われる。制御装置には、冷蔵室15内に食品が収納されていない空状態の画像が、予め初期データとして記憶されている。制御装置は、冷蔵室15内のカメラ16で撮影された画像を画素単位に分割整理し、予め記憶している初期データの該当する部位の画素と比較を行う(S3)。
冷蔵室扉の開閉を検知するドアスイッチと連動して、撮影動作を行う。冷蔵室15内に設置されたカメラ16で撮影された画像は、制御装置に電送され、画像処理が行われる。制御装置には、冷蔵室15内に食品が収納されていない空状態の画像が、予め初期データとして記憶されている。制御装置は、冷蔵室15内のカメラ16で撮影された画像を画素単位に分割整理し、予め記憶している初期データの該当する部位の画素と比較を行う(S3)。
比較する方法として、画素単位の色の相違を用いた場合(S4)、初期データの画像と同じであれば「0」をカウントし(S5)、違う色であれば「1」をカウントする(S6)。
そして、カウントされた「0」と「1」を全て積算した値が(S8)、カメラ16の撮影総画素数の30%以下であれば、冷蔵室15内に空のスペースが十分にあると判断して、圧縮機11の回転数、及び、庫内ファン14の回転数を下げる制御を実施する(S10)。逆に、カウントされた「0」と「1」を全て積算した値が(S8)、カメラ16の撮
影総画素数の70%以上であれば、圧縮機11の回転数、及び、庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を実施する(S12)。ここで、カメラ16の総画素数を400万画素とすると、冷蔵室15内空間を、縦2000×横2000の領域に分割して撮影するので、冷蔵室15内の状態を詳細に撮影することができる。
影総画素数の70%以上であれば、圧縮機11の回転数、及び、庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を実施する(S12)。ここで、カメラ16の総画素数を400万画素とすると、冷蔵室15内空間を、縦2000×横2000の領域に分割して撮影するので、冷蔵室15内の状態を詳細に撮影することができる。
また、庫内に食品が一杯に詰め込まれた状態においても、冷蔵室15内の背面壁の略中央に配設されたカメラ16に半円形上の透明カバー17を設けているので、カメラ16の近傍に載置された食品によって、カメラ16のレンズ部が完全に覆われるのを防止することができる。この半円形上の透明カバー17により、カメラ16のレンズ部と載置された食品との間に所定の空間を設けることができ、カメラ16により撮影した画像データの信頼性が向上する。
また、カメラ16の近傍に載置された食品によって、カメラ16のレンズ部が少なからず塞がれる可能性があるが、この場合には、カメラ16を上下左右に角度を変えれるように、手動、或いは、自動で調整できるように構成しても良い。この方法を用いる場合には、冷蔵室15内の初期データを、カメラ16を上下左右に角度を変えたときの各々についての画像データを、制御部に記憶させておく必要がある。
そして、画像処理の速度を考慮すると、カメラ16の上下左右の移動は4〜8地点に絞った方が望ましい。さらに、冷蔵室15内を撮影するカメラ16を冷蔵室15内の背面壁だけでなく、冷蔵室15内のどちらか一方の側壁、或いは、冷蔵室15内の両方の側壁に設け、複数のカメラ16で異なる方向から、冷蔵室15内を撮影すれば、精度の高い認識が可能となる。この場合の制御装置における比較方法としては、冷蔵室15内の背面壁のカメラ16で撮影した画像について、初期データの画像と同じ色であれば「0」をカウントし、違う色であれば「1」をカウントする。そして、カウントされた「0」と「1」を全て積算する。同様に冷蔵室15内の側壁に設けたカメラで撮影した画像について、初期データの画像と同じ色であれば「0」をカウントし、違う色であれば「1」をカウントする。そして、カウントされた「0」と「1」を全て積算する。
そして、冷蔵室内の背面壁に設けたカメラ16で撮影した画像の積算値と、冷蔵室内の側壁に設けたカメラ16で撮影した画像の積算値を足し算して、W(冷蔵室15内のカメラ16の設置台数)で割った値がカメラ16の総画素数の何%になるかで、圧縮機11の回転数、及び、庫内ファン14の回転数を制御する。
具体的には、30%以下であれば、冷蔵室15内に空のスペースが十分にあると判断して、圧縮機11の回転数、及び、庫内ファン14の回転数を下げる制御を実施する。逆に、70%以上であれば、圧縮機11の回転数、及び、冷蔵室15内の庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を行う。
また好ましくは、冷蔵室15内の棚18と対向する背面壁に円錐状の凹部19を設け、凹部19の中心に冷蔵室15内を撮影するカメラ16を設けることで、カメラ16のレンズ部と棚18の間に空間が形成され、棚18の上下に収納された食品を撮影することができる。
そして、棚18の上方の棚18、棚18の下方の棚18に載置された食品も、上方と下方の棚18を高透明な材料で構成することにより、上方と下方の棚18を透かして、載置されている食品の分布状態を撮影することができるので、冷蔵室15内の食品の分布状態の精度の高い画像を得ることができる。
また、一般に冷蔵室15内の背面壁には冷却器13からの冷気が供給されるダクト20
が配設されているが、ダクト20の略中央部にカメラ16を設置するための中空円筒状の枠体21を設けることで、ダクト20内の冷気を一部迂回させ、該中空円筒状の枠体21の内部にカメラ16を設置することが可能となる。
が配設されているが、ダクト20の略中央部にカメラ16を設置するための中空円筒状の枠体21を設けることで、ダクト20内の冷気を一部迂回させ、該中空円筒状の枠体21の内部にカメラ16を設置することが可能となる。
また、カメラを広角・魚眼レンズ仕様にすることで、カメラの台数を最小限にして食品検知の精度を高めることができる。
なお、冷蔵室15内の天面にカメラを設置するのは、冷蔵室15内に設けられている複数の棚18が邪魔となるので、正確な冷蔵室15内の食品収納状態を把握するのが困難であり、仮に棚18を透明な部材で構成したとしても、上段の棚18に載置されている食品の影によって、下段の棚18に収納されている食品の分布状態を正確に撮影できないという課題を有する。
同様に、冷蔵室15内の底面にカメラを設置するのは、冷蔵室内の天面にカメラを設置する場合と同様の課題を有するとともに、カメラが食品によって塞がれる、或いは、カメラの透明カバー部が邪魔となって、食品の出し入れがしにくいという課題がある。
以上のように、本実施の形態においては、食品を冷却して保存する冷蔵室15と、冷蔵室15の開口部を開閉する扉22と、冷蔵室15に設けられ冷蔵室15の内部を撮影するカメラ16と、カメラ16で撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器13からの冷気を冷蔵室15へと送出する庫内ファン14と、圧縮機11を備える冷蔵庫において、制御装置による画像処理の結果、庫内の食品の収納状態に対応して、庫内ファン14、及び、圧縮機11の回転数を増減させるものであり、制御装置による画像処理の結果、庫内の食品の収納状態が少ない場合には、前記庫内ファン、及び、前記圧縮機の回転数を減少させるという省エネ運転を行うことができ、庫内の食品の収納状態が多い場合には、前記庫内ファン、及び、前記圧縮機の回転数を増加させることにより庫内を冷却でき、冷蔵庫の庫内温度を最適に制御できる。
また、省エネ運転を行うことで制御装置及びカメラによる冷蔵庫のコストアップ分について、使用者に理解を得られ易くなる。
また、本実施の形態では、制御装置は、冷蔵室15に収納物の無い状態で撮影された初期画像が記憶されており、冷蔵庫に食品が収納されている時にカメラ16で撮影された画像は、制御装置に電送されて画像が画素単位に分割され、冷蔵庫内の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数がカメラ16の撮影画素数の70%以上であれば、冷蔵庫内に食品が詰まっていると判断し、カメラ16の撮影画素数の30%以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、庫内ファン14、及び、前記圧縮機11の回転数を増減するものであり、庫内の食品の収納状態を、カメラ16で撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、且つ、安価なマイコンで省エネ運転を行うことが可能となり、冷蔵庫のコストアップ分も大幅に抑制できる。
(実施の形態2)
図9は、本発明の第2の実施の形態の冷蔵庫の縦断面図を示すものである。図10は、本発明の第2の実施の形態の冷蔵庫の縦断面図を示すものである。なお、実施の形態1と同じ部分にはこれと同じ符号を付し、一部の説明を省略する。
図9は、本発明の第2の実施の形態の冷蔵庫の縦断面図を示すものである。図10は、本発明の第2の実施の形態の冷蔵庫の縦断面図を示すものである。なお、実施の形態1と同じ部分にはこれと同じ符号を付し、一部の説明を省略する。
図9、図10において、冷蔵室15の扉22の内壁に凹部19を設け、凹部19内に庫
内を撮影するカメラ16が配設されている。また、冷蔵室15内には庫内の温度を検知するための温度センサ23が配設されている。
内を撮影するカメラ16が配設されている。また、冷蔵室15内には庫内の温度を検知するための温度センサ23が配設されている。
以上のように構成された冷蔵庫について、以下その動作、作用を説明する。
まず、冷蔵室15の扉22の開閉を検知するドアスイッチと連動して、撮影動作を行う。冷蔵室15の扉22内面側に設置されたカメラ16で撮影された画像は、制御装置に電送され、画像処理が行われる。制御装置には、冷蔵室15内に食品が収納されていない空状態の画像が、予め初期データとして記憶されている。制御装置は、冷蔵室15の扉22内面側のカメラで撮影された画像を画素単位に分割整理し、予め記憶している初期データの該当する部位の画素と比較を行う。比較する方法として、画素単位の色の相違を用いた場合、初期データの画像と同じであれば「0」をカウントし、違う色であれば「1」をカウントする。そして、カウントされた「0」と「1」を全て積算した値が、カメラ16の撮影総画素数の30%以下であれば、冷蔵室内に空のスペースが十分にあると判断して、圧縮機11の回転数、及び、庫内ファン14の回転数を下げる制御を実施する。
逆に、カウントされた「0」と「1」を全て積算した値が、カメラの撮影総画素数の70%以上であれば、圧縮機11の回転数、及び、庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を実施する。
このように、冷蔵室15内を撮影するカメラ16を扉22内面側に設けることにより、カメラ16と冷蔵室15内の複数の棚18との間に十分なスペースを設けることができ、複数の棚18に載置された食品によって、カメラ16を塞がれることもなく、広角のカメラ16の作用とも相まって、冷蔵室15内の食品の分布状態を精度の高い画像として撮影することができる。
また、冷蔵室15の扉22内面側に凹部19を設け、凹部19の略中央にカメラを設置し、カメラ16が冷蔵室15の扉22内面の平面から少し窪んで配設されるようにすることで、冷蔵室15内への食品の出入れ等に伴って、食品がカメラに接触して、カメラが破損するといった事態を未然に防止することができる。
また、冷蔵室15の扉22内面側にカメラが突出することがないので、外観的にも優れた特徴を有する。この場合、カメラを保護する半円形状のカバーは付けなくてもよい。
また、カメラの設置場所は、扉内面側のポケット部に設けてもよく、カメラをポケット部に埋設、或いは、ポケット部の庫内側に張り出して設置してもよい。
また、冷蔵室15内の温度を検知する温度センサ23の値による庫内ファン14及び圧縮機11の回転数制御と、カメラ16による画像処理の判定による庫内ファン14及び圧縮機11の回転数制御が異なる場合には、画像処理の判定を優先するようにしており、冷蔵室15内の実際の食品(負荷)の大小に応じて、庫内ファン14及び圧縮機11の回転数制御を行うので、無駄な電力を消費することなく、負荷の変動に素早く対応することが可能となる。
以上のように、本実施の形態においては、カメラ16を冷蔵室15の扉22の内壁に設けることにより、棚18に載置された食品によって、カメラ16のレンズ部が塞がれるのを防止することができ、庫内に食品が大量に収納されている場合でも、信頼性の高いカメラ撮影が可能となる。
以上のように、本発明にかかる冷蔵庫は、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて安価なマイコンでも必要十分な処理速度が得られるため、業務用の大型冷蔵庫やショーケース等の用途にも適用できる。
10 冷蔵庫本体
11 圧縮機
12 冷凍室
13 冷却器
14 庫内ファン
15 冷蔵室
16 カメラ
17 透明カバー
18 棚
19 凹部
20 ダクト
21 枠体
22 扉
23 温度センサ
11 圧縮機
12 冷凍室
13 冷却器
14 庫内ファン
15 冷蔵室
16 カメラ
17 透明カバー
18 棚
19 凹部
20 ダクト
21 枠体
22 扉
23 温度センサ
Claims (6)
- 食品を冷却して保存する貯蔵室と、前記貯蔵室の開口部を開閉する扉と、前記貯蔵室に設けられ前記貯蔵室の内部を撮影するカメラと、前記カメラで撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器からの冷気を前記貯蔵室へと送出する庫内ファンと、圧縮機を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン、及び、前記圧縮機の回転数を増減させることを特徴とする冷蔵庫。
- 前記カメラを前記貯蔵室の背面壁に設けたことを特徴とする請求項1に記載の冷蔵庫。
- 前記カメラを前記貯蔵室の扉の内壁に設けたことを特徴とする請求項1または2に記載の冷蔵庫。
- 前記貯蔵室の内壁に複数のカメラを設けたことを特徴とする請求項1〜3のいずれか1項に記載の冷蔵庫。
- 前記制御装置は、前記貯蔵室に収納物の無い状態で撮影された初期画像が記憶されており、食品が収納されている時に前記カメラで撮影された画像は、前記制御装置に電送されて画像が画素単位に分割され、前記貯蔵室の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数が前記カメラの撮影画素数の所定値A以上であれば、冷蔵庫内に食品が詰まっていると判断し、前記カメラの撮影画素数の所定値B以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、前記庫内ファン、及び、前記圧縮機の回転数を増減することを特徴とする請求項1〜4のいずれか1項に記載の冷蔵庫。
- 前記貯蔵室内の温度を検知する温度センサを備え、前記温度センサの値による前記庫内ファン及び前記圧縮機の回転数制御と、前記カメラによる画像処理の判定による前記庫内ファン及び圧縮機の回転数制御が異なる場合には、前記画像処理の判定を優先することを特徴とする請求項1〜5のいずれか1項に記載の冷蔵庫。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011124815A JP2012251722A (ja) | 2011-06-03 | 2011-06-03 | 冷蔵庫 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011124815A JP2012251722A (ja) | 2011-06-03 | 2011-06-03 | 冷蔵庫 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012251722A true JP2012251722A (ja) | 2012-12-20 |
Family
ID=47524701
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011124815A Withdrawn JP2012251722A (ja) | 2011-06-03 | 2011-06-03 | 冷蔵庫 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012251722A (ja) |
Cited By (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS58104689A (ja) * | 1981-12-16 | 1983-06-22 | Nippon Kokan Kk <Nkk> | 水銀含有水溶液の処理方法 |
| JP2014196834A (ja) * | 2013-03-29 | 2014-10-16 | パナソニック株式会社 | 冷蔵庫 |
| JP2014196837A (ja) * | 2013-03-29 | 2014-10-16 | パナソニック株式会社 | 冷蔵庫 |
| WO2015029582A1 (ja) | 2013-08-27 | 2015-03-05 | 株式会社 東芝 | カメラシステム、冷蔵庫 |
| JP2015068525A (ja) * | 2013-09-27 | 2015-04-13 | 三菱電機株式会社 | 冷蔵庫 |
| JP2015081762A (ja) * | 2013-10-24 | 2015-04-27 | 三菱電機株式会社 | 冷蔵庫 |
| JP2015169412A (ja) * | 2014-03-10 | 2015-09-28 | 三菱電機株式会社 | 冷蔵庫及び冷蔵庫を備えたネットワークシステム |
| KR20150127560A (ko) * | 2015-10-28 | 2015-11-17 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| JP2016023892A (ja) * | 2014-07-23 | 2016-02-08 | 株式会社東芝 | 冷蔵庫 |
| JP2016180577A (ja) * | 2015-03-25 | 2016-10-13 | 東芝ライフスタイル株式会社 | 食品管理方法および食品管理システム |
| US9528756B2 (en) | 2013-04-23 | 2016-12-27 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| JP2016223726A (ja) * | 2015-06-02 | 2016-12-28 | 三菱電機株式会社 | 冷蔵庫 |
| JP2017106715A (ja) * | 2017-02-16 | 2017-06-15 | パナソニックIpマネジメント株式会社 | 冷蔵庫 |
| JP2018036049A (ja) * | 2017-12-08 | 2018-03-08 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
| JP2018124059A (ja) * | 2013-03-29 | 2018-08-09 | パナソニックIpマネジメント株式会社 | 冷蔵庫および冷蔵庫内表示システム |
| JP2018128251A (ja) * | 2018-04-16 | 2018-08-16 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
| JP2019095816A (ja) * | 2019-03-18 | 2019-06-20 | 東芝ライフスタイル株式会社 | 貯蔵庫用カメラ装置及びこれを備えた貯蔵庫 |
| JP2019148418A (ja) * | 2013-03-12 | 2019-09-05 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
| US10694154B2 (en) | 2013-08-28 | 2020-06-23 | Toshiba Lifestyle Products & Services Corporation | Camera device for refrigerator and refrigerator comprising same |
| KR20200106473A (ko) * | 2014-04-15 | 2020-09-14 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR20200106474A (ko) * | 2014-04-15 | 2020-09-14 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| CN112329509A (zh) * | 2020-07-31 | 2021-02-05 | 深圳Tcl新技术有限公司 | 食材过期提醒方法、装置、智能冰箱和存储介质 |
| US10951863B2 (en) | 2013-03-12 | 2021-03-16 | Toshiba Lifestyle Products & Services Corporation | Refrigerator, camera device, refrigerator door pocket, and home appliance network system |
| KR20210035125A (ko) * | 2014-04-15 | 2021-03-31 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR20210036887A (ko) * | 2014-04-15 | 2021-04-05 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| JP2021081184A (ja) * | 2021-02-25 | 2021-05-27 | 東芝ライフスタイル株式会社 | 食品管理方法、食品管理システム、冷蔵庫 |
| US11143450B2 (en) | 2013-03-12 | 2021-10-12 | Toshiba Lifestyle Products & Services Corporation | Refrigerator and camera device |
| CN114485034A (zh) * | 2022-02-07 | 2022-05-13 | 海信(山东)冰箱有限公司 | 冰箱及冰箱的控制方法 |
| WO2025238839A1 (ja) * | 2024-05-17 | 2025-11-20 | 三菱電機株式会社 | 庫内状況判定装置、庫内状況判定システム、庫内状況判定方法、庫内状況判定プログラム、学習装置、推論装置および庫内状況判定装置を備える冷蔵庫 |
-
2011
- 2011-06-03 JP JP2011124815A patent/JP2012251722A/ja not_active Withdrawn
Cited By (53)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS58104689A (ja) * | 1981-12-16 | 1983-06-22 | Nippon Kokan Kk <Nkk> | 水銀含有水溶液の処理方法 |
| US11143450B2 (en) | 2013-03-12 | 2021-10-12 | Toshiba Lifestyle Products & Services Corporation | Refrigerator and camera device |
| US10951863B2 (en) | 2013-03-12 | 2021-03-16 | Toshiba Lifestyle Products & Services Corporation | Refrigerator, camera device, refrigerator door pocket, and home appliance network system |
| JP2019148418A (ja) * | 2013-03-12 | 2019-09-05 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
| JP2018124059A (ja) * | 2013-03-29 | 2018-08-09 | パナソニックIpマネジメント株式会社 | 冷蔵庫および冷蔵庫内表示システム |
| JP2014196834A (ja) * | 2013-03-29 | 2014-10-16 | パナソニック株式会社 | 冷蔵庫 |
| JP2014196837A (ja) * | 2013-03-29 | 2014-10-16 | パナソニック株式会社 | 冷蔵庫 |
| JP2021050909A (ja) * | 2013-03-29 | 2021-04-01 | パナソニックIpマネジメント株式会社 | 通知方法、システム |
| JP2019143967A (ja) * | 2013-03-29 | 2019-08-29 | パナソニックIpマネジメント株式会社 | 冷蔵庫、通知方法 |
| US10184715B2 (en) | 2013-04-23 | 2019-01-22 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9739526B2 (en) | 2013-04-23 | 2017-08-22 | Lg Electronics Inc. | Refrigerator with heated camera module |
| US9528756B2 (en) | 2013-04-23 | 2016-12-27 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US10036587B2 (en) | 2013-04-23 | 2018-07-31 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9546812B2 (en) | 2013-04-23 | 2017-01-17 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9568241B2 (en) | 2013-04-23 | 2017-02-14 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US10228187B2 (en) | 2013-04-23 | 2019-03-12 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US10215483B2 (en) | 2013-04-23 | 2019-02-26 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9851139B2 (en) | 2013-04-23 | 2017-12-26 | Lg Electronics Inc. | Refrigerator and control method for the same |
| US9890994B2 (en) | 2013-04-23 | 2018-02-13 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| USRE50269E1 (en) | 2013-04-23 | 2025-01-14 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9915471B2 (en) | 2013-04-23 | 2018-03-13 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9920980B2 (en) | 2013-04-23 | 2018-03-20 | Lg Electronics Inc. | Refrigerator with camera and control method for the same |
| US9920982B2 (en) | 2013-04-23 | 2018-03-20 | Lg Electronics Inc. | Refrigerator camera module |
| US9920981B2 (en) | 2013-04-23 | 2018-03-20 | Lg Electronics Inc. | Refrigerator with camera and control thereof |
| KR20180088760A (ko) | 2013-08-27 | 2018-08-06 | 도시바 라이프스타일 가부시키가이샤 | 카메라 시스템 및 냉장고 |
| KR20200009146A (ko) | 2013-08-27 | 2020-01-29 | 도시바 라이프스타일 가부시키가이샤 | 카메라 시스템 및 냉장고 |
| WO2015029582A1 (ja) | 2013-08-27 | 2015-03-05 | 株式会社 東芝 | カメラシステム、冷蔵庫 |
| US10694154B2 (en) | 2013-08-28 | 2020-06-23 | Toshiba Lifestyle Products & Services Corporation | Camera device for refrigerator and refrigerator comprising same |
| JP2015068525A (ja) * | 2013-09-27 | 2015-04-13 | 三菱電機株式会社 | 冷蔵庫 |
| JP2015081762A (ja) * | 2013-10-24 | 2015-04-27 | 三菱電機株式会社 | 冷蔵庫 |
| JP2015169412A (ja) * | 2014-03-10 | 2015-09-28 | 三菱電機株式会社 | 冷蔵庫及び冷蔵庫を備えたネットワークシステム |
| KR102347134B1 (ko) | 2014-04-15 | 2022-01-03 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR20210036887A (ko) * | 2014-04-15 | 2021-04-05 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR102417850B1 (ko) * | 2014-04-15 | 2022-07-05 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR102377310B1 (ko) | 2014-04-15 | 2022-03-21 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR102259582B1 (ko) | 2014-04-15 | 2021-06-01 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR20200106473A (ko) * | 2014-04-15 | 2020-09-14 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR20200106474A (ko) * | 2014-04-15 | 2020-09-14 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR20210035125A (ko) * | 2014-04-15 | 2021-03-31 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| JP2016023892A (ja) * | 2014-07-23 | 2016-02-08 | 株式会社東芝 | 冷蔵庫 |
| JP2016180577A (ja) * | 2015-03-25 | 2016-10-13 | 東芝ライフスタイル株式会社 | 食品管理方法および食品管理システム |
| JP2016223726A (ja) * | 2015-06-02 | 2016-12-28 | 三菱電機株式会社 | 冷蔵庫 |
| KR20150127560A (ko) * | 2015-10-28 | 2015-11-17 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| KR101678444B1 (ko) | 2015-10-28 | 2016-11-22 | 엘지전자 주식회사 | 냉장고 및 그 제어 방법 |
| JP2017106715A (ja) * | 2017-02-16 | 2017-06-15 | パナソニックIpマネジメント株式会社 | 冷蔵庫 |
| JP2018036049A (ja) * | 2017-12-08 | 2018-03-08 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
| JP2018128251A (ja) * | 2018-04-16 | 2018-08-16 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
| JP2019095816A (ja) * | 2019-03-18 | 2019-06-20 | 東芝ライフスタイル株式会社 | 貯蔵庫用カメラ装置及びこれを備えた貯蔵庫 |
| CN112329509A (zh) * | 2020-07-31 | 2021-02-05 | 深圳Tcl新技术有限公司 | 食材过期提醒方法、装置、智能冰箱和存储介质 |
| JP7084517B2 (ja) | 2021-02-25 | 2022-06-14 | 東芝ライフスタイル株式会社 | 食品管理方法、食品管理システム、冷蔵庫 |
| JP2021081184A (ja) * | 2021-02-25 | 2021-05-27 | 東芝ライフスタイル株式会社 | 食品管理方法、食品管理システム、冷蔵庫 |
| CN114485034A (zh) * | 2022-02-07 | 2022-05-13 | 海信(山东)冰箱有限公司 | 冰箱及冰箱的控制方法 |
| WO2025238839A1 (ja) * | 2024-05-17 | 2025-11-20 | 三菱電機株式会社 | 庫内状況判定装置、庫内状況判定システム、庫内状況判定方法、庫内状況判定プログラム、学習装置、推論装置および庫内状況判定装置を備える冷蔵庫 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2012251722A (ja) | 冷蔵庫 | |
| JP2012251724A (ja) | 冷蔵庫 | |
| JP6307698B2 (ja) | 冷蔵庫 | |
| JP6305122B2 (ja) | 冷蔵庫及び冷蔵庫を備えたネットワークシステム | |
| TWI710739B (zh) | 冰箱 | |
| CN112136014B (zh) | 冰箱系统 | |
| EP3441700B1 (en) | Refrigerator and partition control method | |
| JP6305207B2 (ja) | 冷蔵庫及びネットワークシステム | |
| JP6323279B2 (ja) | 保冷保温庫、及び、その管理システム | |
| US20160138857A1 (en) | Refrigeration appliance comprising a camera module | |
| KR20140121684A (ko) | 냉장고 | |
| KR101659937B1 (ko) | 냉장고 및 그 제어 방법 | |
| KR20120117464A (ko) | 냉장고 및 냉장고의 제어방법 | |
| JP6307702B2 (ja) | 冷蔵庫 | |
| US20140168396A1 (en) | Method for viewing contents of a refrigerator appliance | |
| KR20160089725A (ko) | 냉장고 및 그 제어 방법 | |
| WO2021212993A1 (zh) | 制冷电器摄像头模块和用于防止镜头起雾的方法 | |
| JP6592970B2 (ja) | 冷蔵庫 | |
| JP2017040425A (ja) | 冷蔵庫およびプログラム | |
| JP2018013272A (ja) | 冷蔵庫 | |
| JP7313156B2 (ja) | 冷蔵庫 | |
| KR102197963B1 (ko) | 냉장고 | |
| JP6167327B2 (ja) | 冷蔵庫 | |
| JP6361014B2 (ja) | 冷蔵庫及び冷蔵庫システム | |
| JP2018013273A (ja) | 冷蔵庫 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20140805 |