EP3864346B1 - Verfahren zum zubereiten von gargut, gargerät und gargeräte-system - Google Patents

Verfahren zum zubereiten von gargut, gargerät und gargeräte-system

Info

Publication number
EP3864346B1
EP3864346B1 EP19780263.0A EP19780263A EP3864346B1 EP 3864346 B1 EP3864346 B1 EP 3864346B1 EP 19780263 A EP19780263 A EP 19780263A EP 3864346 B1 EP3864346 B1 EP 3864346B1
Authority
EP
European Patent Office
Prior art keywords
cooking
image
images
camera
product
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP19780263.0A
Other languages
English (en)
French (fr)
Other versions
EP3864346A1 (de
Inventor
Julien Adam
Victorien BIERG
Flavien MARTOS
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BSH Hausgeraete GmbH
Original Assignee
BSH Hausgeraete GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BSH Hausgeraete GmbH filed Critical BSH Hausgeraete GmbH
Publication of EP3864346A1 publication Critical patent/EP3864346A1/de
Application granted granted Critical
Publication of EP3864346B1 publication Critical patent/EP3864346B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/08—Arrangement or mounting of control or safety devices
    • F24C7/082—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
    • F24C7/085—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00—Details
    • F24C15/32—Arrangements of ducts for hot gases, e.g. in or around baking ovens
    • F24C15/322—Arrangements of ducts for hot gases, e.g. in or around baking ovens with forced circulation

Definitions

  • the invention relates to a method for preparing food, in which a camera captures an image of the food being cooked.
  • the invention also relates to a cooking appliance with a cooking chamber and a camera directed into the cooking chamber, wherein the cooking appliance is configured to carry out the method.
  • the invention further relates to a cooking appliance system configured to carry out the method, comprising a cooking appliance and at least one camera for capturing images of food being cooked by the cooking appliance, wherein the cooking appliance is configured to transmit images captured by the camera to a data processing device.
  • the invention is particularly advantageously applicable to preparing food in an oven.
  • the cooking appliance is, in particular, a household appliance.
  • EP 1 980 791 A2 discloses a cooking appliance comprising a browning sensor device and an electronic unit. It is proposed that the electronic unit can transmit at least one browning level of a food item to a dispensing unit for output to an operator. From this, the remaining cooking time can be calculated, taking into account, for example, the insertion height of the food item, i.e., the distance between the food item and the heating element.
  • the disclosure relates to a cooking appliance.
  • the cooking appliance may include one or more heating elements; a cooking chamber; and a camera mounted inside the chamber.
  • the cooking chamber prevents visible light from escaping (e.g., the cooking chamber is windowless).
  • the heating elements are controlled by a computing device within the cooking appliance.
  • the camera output is used to adjust the heating pattern of the heating elements.
  • a real image or multiple real images of a cooking chamber can be captured by means of a camera and displayed either immediately or with a time delay.
  • the disclosure includes cooking appliances with inspection systems comprising a distance sensor and a digital optical recognition device.
  • the distance sensor detects the position of the food product placed in the cooking appliance, and the digital optical recognition device captures a series of images for the purpose of food product identification.
  • the operator is provided with the correct cooking cycle/program for the position and type of food product placed in the cooking appliance.
  • the inspection systems also ensure that the food product is cooked correctly at the end of the cooking cycle/program.
  • the inspection systems ensure: (a) the food product is correctly identified; (b) the cooking cycle/program is correctly selected; (c) the correct cooking cycle/program is followed to completion; and (d) the quality of the cooked food product meets expected standards.
  • a real-life image of a food product along with stored images of foods to be cooked, allowing the operator to identify the food product shown in the real-life image by selecting a stored image.
  • the object of the present invention is to overcome at least some of the disadvantages of the prior art and, in particular, to provide an improved possibility for a user to select a desired cooking result.
  • the problem is solved by a method for preparing food, in which the method is activated after the cooking chamber of a cooking appliance has been loaded with the food; at least one variable cooking parameter is entered by the user; at least one real image of the cooking chamber, in which the food is depicted, is taken by means of a camera, and the real image is transmitted to a data processing device; The food being cooked is determined, and the data processing device provides different virtual images of the food being cooked from at least one real image. These virtual images represent the cooking states of the previously recorded food at a later cooking time than the time the real image was recorded, with different values of the cooking parameter to be varied.
  • the virtual images are transferred by the data processing device to a touchscreen for viewing and selection by a user.
  • a state value of the food depicted in the selected virtual image, corresponding to the variable cooking parameter, is transferred to the cooking device. Then, further real images of the food are recorded by the camera, and it is monitored whether the state value has been reached. Alternatively, upon selection of the virtual image, further real images of the food are recorded by the camera, and it is monitored by comparing these real images with the selected virtual image whether the state value has been reached. At least one action is triggered if a real image recorded by the camera matches the selected virtual image within a predefined similarity range.
  • the virtual images are taken from the system using a camera. Images are modified from the recorded real image through image processing based on the identified food being cooked, or they correspond to a reference image of the identified food being cooked stored in a database.
  • the camera can also be used as an optical condition sensor.
  • At least one virtual image is calculated from the real image captured by the camera.
  • This has the advantage that the food depicted in the real image is reproduced very closely in the virtual image, for example, with regard to its specific shape, color, and/or arrangement. This, in turn, makes it particularly easy for the user to track the cooking progress of the food in the virtual image.
  • the calculation can be performed using a suitably configured (e.g., programmed) data processing unit. This can be the same data processing unit used for image comparison.
  • a camera can be understood as any image recording device designed to capture a real image of the food being cooked.
  • the camera is sensitive in the spectral range visible to humans, or specifically only sensitive in the visible spectral range (i.e., not a camera or not a purely infrared camera).
  • a "virtual" image is therefore understood to be, in particular, an image that does not correspond to the image captured by the camera as such. Rather, the virtual image is an image derived from or modified by image processing from the captured image, or an image (“reference image") retrieved from a database of a food item (but not exactly the food item captured by the camera).
  • Providing the virtual image includes, in particular, the ability to display at least one virtual image on a screen.
  • the screen can be a screen of a cooking appliance, especially one used to prepare the food, and/or a screen of a user device such as a smartphone, tablet PC, or laptop PC. Desktop PCs, etc.
  • the screen is specifically a touch-sensitive screen, so that a displayed virtual image can be manipulated to select it, e.g., to trigger at least one action related to that virtual image.
  • Providing a user with multiple virtual images for viewing can include, in particular, virtual images corresponding to different values of at least one cooking parameter, such as cooking time and/or cooking temperature.
  • a user can be provided with multiple images depicting different cooking processes. The user can select a virtual image to view its cooking parameters and/or to transfer at least some of the changing or variable cooking parameters to a cooking device, as explained in more detail below.
  • the above procedure can be triggered or started by a user during training, for example, by pressing a corresponding button on a cooking appliance or on a user device (e.g., via a corresponding application program).
  • the user can start the procedure at any time during training, particularly before or during a cooking operation or cooking process.
  • the real-world image captured by the camera can therefore be taken before and/or during a cooking process. Multiple real-world images can also be captured at different times.
  • This configuration involves providing a user (e.g., of a cooking appliance) with at least one virtual image for selection. Selecting a virtual image then provides at least one cooking parameter for the appliance, resulting in a cooking state that corresponds to the cooking state of the food in the selected virtual image.
  • This offers the advantage that a user can choose a desired future or final state of the food based on a virtual image.
  • at least one cooking parameter on the appliance is at least semi-automatically adjusted to achieve a cooking state that closely approximates the selected virtual image.
  • the cooking state corresponding to the selected virtual image can be reached upon completion of a cooking process or upon completion of a specific... A phase or section of the cooking process can be reached. In other words, the cooking process or a section thereof can be ended when the cooking state corresponding to the selected virtual image has been reached.
  • at least one other action can then be triggered, e.g., a notification can be issued to a user.
  • This feature allows the cooking appliance to automatically adopt at least one cooking parameter associated with the selected virtual image upon selection. This provides a particularly user-friendly way to control the cooking process, especially to precisely achieve a desired level of doneness.
  • the at least one cooking parameter includes at least one cooking parameter from the following group: cooking time; remaining cooking time; cooking temperature; cooking mode (e.g., bottom heat, top heat, grill mode, hot air, etc.); humidity level; fan speed; microwave power; cooking level.
  • the cooking temperature can, for example, include the temperature of the cooking chamber, the core temperature of the food being cooked, and/or the temperature of the cooking vessel (such as a pot, frying pan, roasting pan, etc.).
  • the cooking parameters available on a given cooking appliance can vary. For example, a standard oven might only offer the remaining cooking time, oven temperature, and cooking mode. An oven with a steam function might also offer the humidity level, while an appliance designed to work with a core temperature probe might offer the core temperature, and so on. If the appliance has microwave functionality (e.g., a standalone microwave oven or an oven with integrated microwave function), the microwave power setting might be available, and so on. A cooktop might offer the power level associated with a cooking zone, the temperature of a cooking vessel, and/or the temperature of the food being cooked, and so on.
  • At least one cooking parameter can be predefined by the user makes it possible to predefine such cooking parameters for providing at least one virtual image, which are necessary for the successful and/or quick preparation of food. By selecting the virtual image, at least one cooking parameter can then be provided to a user or automatically applied, which can still be freely selected or varied.
  • a user of an oven can preset a desired operating mode and cooking temperature, but select a remaining cooking time by choosing a virtual image.
  • the camera can be integrated into the oven and/or positioned outside the oven and then, for example, pointed into the cooking chamber through a viewing window in the oven door.
  • a user of an oven can specify a desired operating mode and remaining cooking time, but select a cooking temperature by choosing a virtual image.
  • a user of an oven with a steam cooking function can specify a desired operating mode, cooking temperature and cooking chamber humidity, but select a remaining cooking time by choosing a virtual image.
  • a user of an oven can specify a desired operating mode and cooking temperature, but select a target core temperature by choosing a virtual image.
  • a user of a cooktop can specify a desired power level for a particular cooking zone, but select a remaining cooking time by choosing a virtual image.
  • the camera could be integrated into a chimney or extractor hood, for example.
  • a user enters a type of food being cooked (e.g., a specific type of food, a preparation method, etc.), for example, via a user interface of a cooking appliance or a user device.
  • a type of food being cooked e.g., a specific type of food, a preparation method, etc.
  • This makes it possible to provide virtual images that represent the cooking state of the food with a particularly precise approximation.
  • the captured image can therefore be used to identify the food being cooked, particularly automatically, for example, using object recognition. This is a particularly user-friendly way to determine the type of food being cooked or already cooked. In a training session, a user can review the information about the food identified through automatic food identification and, if necessary, change or correct it.
  • the similarity range corresponds in particular to a bandwidth or target corridor assigned to the selected virtual image.
  • the similarity range can be fixed or user-adjustable.
  • At least one action can include issuing an audible and/or visual cue to the user (optionally including a message to the user) and/or ending the cooking process, a cooking phase, or a cooking segment thereof.
  • Image comparison can be performed using a data processing unit that is part of the cooking appliance or provided by an external instance that is data-linked to the camera, e.g., via a network server or the so-called “cloud” (cloud-based data processing unit).
  • One configuration triggers at least one action when the browning level of an image captured by the camera matches the browning level of the selected virtual image, possibly within a predefined range of similarity.
  • This offers the advantage of allowing the camera to also function as an optical browning sensor.
  • the at least one action can be triggered.
  • Possible cooking sections or phases could include, for example, the rising of dough (e.g., bread dough), the drying of the food, and/or browning.
  • the virtual image can, for example, be calculated or derived from the real image in such a way that the colors of the food(s) depicted in the real image are adjusted to the cooking progress. In this way, the degree of browning of the food(s) can be adjusted in the virtual image to reflect a future cooking time.
  • the virtual image can be calculated or derived from the real image in such a way that changes in the shape of the food are calculated.
  • the calculation of virtual images can be performed using suitable algorithms. These algorithms can utilize characteristic curves specific to the cooking product and dependent on cooking parameters. Alternatively or additionally, the algorithms can operate or run like neural networks, particularly using so-called "deep learning.” In a training course, the algorithms can use real images to adapt or modify themselves for a specific user or user group through self-learning.
  • the at least one virtual image can therefore be determined from an image stored in a database, in particular, it can correspond to an image stored in a database. This advantageously eliminates the need for object processing of the food being cooked that was identified in the real image, thus reducing computational effort.
  • the reference images can have been taken previously or outside of the above procedure using a camera, e.g., by a manufacturer of a cooking appliance, a cooking studio, a user, etc. If, for example, a roast chicken is identified in the real image taken as part of the procedure or is specified by a user as the food being cooked, the virtual images can correspond to reference images showing a reference roast chicken photographed at different cooking times, cooked with the same or similar predefined cooking parameters.
  • This feature allows the user to set the later cooking time.
  • One design feature is that the image captured by the camera and at least one virtual image show the food being cooked from the same perspective. This advantageously facilitates image comparison.
  • An alternative or additional feature is that the image captured by the camera and at least one virtual image show the food being cooked from different angles. This offers the advantage of providing the user with various views of the food. These views from different angles can be calculated and/or generated from reference images.
  • a cooking appliance system comprising a cooking appliance with a cooking chamber and at least one camera directed into the cooking chamber for recording the food to be cooked by the cooking appliance, wherein the cooking appliance system is configured to carry out the method as described above.
  • the cooking appliance is configured to transmit the real images recorded by the camera to a data processing device, and the data processing device is configured to provide and transmit to the cooking appliance the virtual images of the food, which represent the cooking states of the previously recorded food at different later cooking times.
  • the cooking appliance system can be designed analogously to the method and has the same advantages.
  • This cooking appliance system has the advantage that it can also be used with appliances that do not have a closable cooking chamber and may not even have a camera themselves, such as cooktops.
  • the camera can therefore be integrated into the cooking appliance or be a separate unit.
  • the camera could be a camera.
  • a possible example of such a cooking appliance system includes a cooktop and a range hood, with the camera potentially mounted on the range hood. The camera is pointed at the cooktop, or the cooktop is within the camera's field of view. The camera can then capture a real image of food cooking in a pan, pot, or similar cookware and provide corresponding virtual images.
  • the cooking appliance system includes the data processing unit.
  • This cooking appliance is specifically designed for the autonomous execution of the procedure.
  • the cooking appliance is an oven, stove, microwave oven, steam cooker or any combination thereof, e.g. an oven with microwave and/or steam generation functionality.
  • the cooking appliance may be equipped with a communication module such as a WLAN module, Bluetooth module, and/or Ethernet module, etc., for this data network connection.
  • a communication module such as a WLAN module, Bluetooth module, and/or Ethernet module, etc.
  • the virtual images can be provided, viewed and/or selected on the cooking appliance and/or on a suitably designed (e.g. programmed) user terminal device.
  • the cooking appliances described above are primarily household appliances.
  • FIG. 1 shows a sketch of a cooking appliance system 1 with an oven 2 as the cooking appliance.
  • the oven 2 has a cooking chamber 3 in which food G (one or more items or dishes) can be cooked.
  • the oven 2 can, in addition to its conventional heating modes (top heat, bottom heat, grill, hot air, convection, etc.), also have a microwave function and/or a steam generation function for the cooking chamber 3.
  • the operation of the oven 2 can be controlled by a control unit 4, which is also connected to a camera 5 directed into the cooking chamber 3, a user interface 6, and at least one communication module 7.
  • the camera 5 can capture real images Br of the food G located in the cooking chamber 3.
  • the camera 5 is, in particular, a digital camera.
  • the camera 5 is, in particular, a color camera.
  • the real images Br are transmitted from the camera 5 to the control unit 4. In a further development, they can be forwarded from the control unit 4 to a screen 8 of the user interface 6, which is, in particular, touch-sensitive, for viewing.
  • the user interface 6 also serves to receive user settings and forward them to the control unit 4.
  • a user can also use the user interface 6 to set desired cooking parameters for a cooking process or section thereof and to enter the necessary assumptions or information to provide at least one virtual image Bv.
  • the at least one communication module 7 enables a data connection between the oven 2 and an external data processing device 9, e.g., via a data network 10.
  • the communication module 7 can, for example, be a WLAN module.
  • the data processing device 9 can be located in a server (not shown) or can be cloud-based, as indicated.
  • the owner of the data processing device 9 can be the manufacturer of the oven 2.
  • the at least one communication module 7 also enables a data connection between the oven 2 and a user device 11, in particular a mobile user device such as a smartphone.
  • This data connection can also be established via the data network 10, e.g., using the WLAN module.
  • the communication module 6 can be configured for direct data connection with the user device 11, e.g., as a Bluetooth module. This enables remote control of the oven 2 via the user device 11.
  • a user can also set the desired cooking parameters for a cooking process or phase thereof on the user device 11 and enter the necessary assumptions or information to provide at least one virtual image Bv.
  • the user terminal 11 can be connected to the data processing unit 9 via the data network 10, e.g. by running a corresponding application program on the user terminal 11.
  • the oven 2 is specifically designed to transmit or send the real images Br captured by the camera 5 to the data processing unit 9. It can also be designed to transmit the real images Br captured by the camera 5 to the user terminal 11.
  • the data processing unit 9 is designed to provide at least one virtual image Bv of the food G, which represents a cooking state of the previously recorded food G at a later cooking time than the time of recording the real image Br, and to transfer it to the oven 2 and/or the user terminal device 11.
  • Fig. 2 shows a possible sequence of steps for preparing food G on the household cooking appliance system 1.
  • step S1 a user loads the cooking chamber 3 with the food G, sets the cooking parameters on the oven 2, and then activates the process. They can activate the process via the touchscreen 8 of the user interface 6 and/or via the user terminal 11.
  • step S2 the user enters at least one fixed cooking parameter for the oven 2 and at least one variable cooking parameter on the touchscreen 8 of the user interface 6 or via the user device 11 (e.g., via a corresponding application program or "app").
  • the user can specify a cooking mode and a cooking chamber temperature for the oven 2 and set the cooking time as variable.
  • the user can set the fixed cooking parameters on the oven 2.
  • Another alternative is to select only the at least one variable cooking parameter.
  • step S3 the camera 5 takes a real image Br of the cooking chamber 3, in which the food G is depicted.
  • step S4 the real image Br from the oven 2 is transferred to the data processing unit 9.
  • step S5 the data processing unit 9 identifies the food G depicted in the real image Br, e.g. by means of object recognition.
  • step S6 the data processing unit generates nine virtual images Bv.
  • the food G has been digitally manipulated to represent or simulate the food G at different values of the cooking parameter being varied, for example, the cooking time.
  • a sequence of virtual images Bv of the food G can be created, simulating or representing the state of the food G as the cooking time progresses.
  • twelve virtual images Bv can be generated, each corresponding to a five-minute increment in the cooking time.
  • a user can, for example in step S2, enter a number of virtual images Bv, a time interval between successive virtual images Bv, and/or a maximum cooking time.
  • step S7 the virtual images Bv are transferred from the data processing unit 9 to the user terminal 11 and/or to the touch-sensitive screen 8 of the oven 2 for viewing by a user.
  • step S8 the user can now view the virtual images Bv and select the one (e.g., by touching it on the touchscreen 8) that most closely matches the desired cooking result, for example, in terms of browning level.
  • the virtual image Bv By selecting the virtual image Bv, at least one cooking parameter is provided for the oven, resulting in a cooking state that corresponds to the cooking state of the food G in the selected virtual image Bv.
  • a step S9a not pertaining to the invention upon selection of the virtual image Bv, the corresponding value of the variable cooking parameter (here: the cooking time) is automatically or user-initiated transferred to the oven 2, or adopted by the oven 2, and thus the oven 2 is set to this cooking time.
  • the oven 2 Upon reaching this cooking time, at least one action is triggered, e.g., the cooking process or a specific cooking phase is terminated.
  • a state value (here, for example, a degree of browning) of the food G depicted in the selected virtual image Bv is transferred to or received by the oven 2.
  • the oven 2 can then use the camera 5 to take real images Br of the food G in the cooking chamber 3 – particularly at regular intervals – and monitor the degree of browning of the food G. If the desired degree of browning is reached (at least within a range of similarity, i.e., not necessarily exactly), at least one action is triggered, e.g., the cooking process or a specific cooking phase is ended.
  • an image comparison between the real images Br and the selected virtual image Bv can be performed to determine the degree of browning. The image comparison can be carried out, for example, by the control unit 4 and/or by the data processing unit 9.
  • the image Br captured by camera 5 and the at least one virtual image Bv can show the food G from a different perspective.
  • the virtual images Bv in step S6 can be reference images stored in a database 12 that is coupled to or integrated into the data processing unit 9.
  • Fig. 3 The diagram shows a real image Br(t0) captured at time t0, a virtual image Bv(t1) of food G determined for a subsequent time t1 with t1 > t0, and a virtual image Bv(t2) determined for a subsequent time t2 with t2 > t1.
  • t2 t1 + 30 min
  • t1 t0 + 30 min.
  • the corresponding food G is shown here, for example, as a vegetable leaf.
  • the virtual images Bv(t1) and B(v2) were calculated from the real image Br(t0) using an algorithm.
  • the algorithm is designed to adjust the degree of browning, shape, and/or texture of the food G depicted in the real image Br(t0) under predefined cooking parameters such as cooking chamber temperature and cooking mode for times t1 and t2.
  • all the images shown may be retrieved from a database of 12 images showing Gargut G, which corresponds to a type of Gargut that has been identified in a previously recorded real image (not shown) or has been specified by a user.
  • Fig. 4 The diagram shows a sketch of another real image Bv(t0) and, based on this, virtual images Bv(T1, t1) and Bv(T1, t2) determined for a cooking chamber temperature T1, as well as virtual images Bv(T2, t1) and Bv(T2, t2) determined for a cooking chamber temperature T2.
  • the cooking chamber temperature and the cooking time are variable cooking parameters, which are specifically selected by the user for variation.
  • the virtual images Bv display different degrees of browning depending on the cooking chamber temperatures T1, T2 and cooking times t1, t2 selected by the user.
  • a user can select one of the virtual images Bv, and the degree of browning shown in it is adopted as the target or target value for the actual food being cooked in the oven 2.
  • the camera 5 can then be used as an optical browning sensor to, for example, end the cooking process or an associated browning phase when the degree of browning of the actual food G has reached the degree of browning depicted in the selected virtual image (particularly within a similarity band or range).

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Electric Ovens (AREA)
  • Electric Stoves And Ranges (AREA)

Description

  • Die Erfindung betrifft ein Verfahren zum Zubereiten von Gargut, bei dem mittels einer Kamera ein Bild eines Garguts aufgenommen wird. Die Erfindung betrifft auch ein Gargerät mit einem Garraum und einer in den Garraum gerichteten Kamera, wobei das Gargerät dazu eingerichtet ist, das Verfahren durchzuführen. Die Erfindung betrifft zudem ein Gargerätesystem, das dazu eingerichtet ist, das Verfahren durchzuführen, aufweisend ein Gargerät und mindestens eine Kamera zum Aufnehmen von durch das Gargerät zu garendem Gargut, wobei das Gargerät dazu eingerichtet ist, von der Kamera aufgenommene Bilder auf eine Datenverarbeitungseinrichtung zu übertragen. Die Erfindung ist insbesondere vorteilhaft anwendbar auf ein Zubereiten von Gargut in einem Ofen. Das Gargerät ist insbesondere ein Haushaltsgerät.
  • DE 10 2015 107 228 A1 offenbart ein Verfahren zum Steuern zumindest eines Teilprozesses wenigstens eines Garprozesses in einem Gargerät. Es werden relevante Daten für zumindest einen Teilprozess eines Garprozesses erfasst, insbesondere Details des zu garenden Garguts sowie Zielparameter. Die Daten werden an ein Simulationsmodul geschickt. Das Simulationsmodul simuliert den zumindest einen Teilprozess, mit dem ein vom Benutzer gewünschter Zustand des zu garenden Garguts erhalten wird. Die zum Ausführen des Garprozesses relevanten Prozessdaten werden an ein Gargerät geschickt.
  • EP 1 980 791 A2 offenbart ein Gargerät mit einer Bräunungssensorvorrichtung und einer Elektronikeinheit. Es wird vorgeschlagen, dass mittels der Elektronikeinheit wenigstens ein Bräunungsgrad eines Garguts einer Ausgabeeinheit zur Ausgabe an einen Bediener zuführbar ist. Hieraus kann beispielsweise die noch verbleibende Garzeit berechnet werden, wobei auch die Einschubhöhe des Garguts, also der Abstand zwischen Gargut und Heizelement berücksichtigt werden kann.
  • US 2017/0074522 A1 offenbart ein Kochgerät. Das Kochgerät kann ein oder mehrere Heizelemente enthalten; eine Kochkammer; und eine im Inneren der Kammer angebrachte Kamera. In einigen Ausführungsformen verhindert die Kochkammer, dass sichtbares Licht aus der Kammer entweicht (z.B. ist die Kochkammer fensterlos). In einigen Ausführungsformen werden die Heizelemente von einer Rechenvorrichtung in dem Kochgerät gesteuert. In einigen Ausführungsformen wird die Ausgabe der Kamera verwendet, um das Heizmuster der Heizelemente einzustellen. Insbesondere wird offenbart, dass mittels einer Kamera ein reales Bild oder mehrere reale Bilder eines Garraums aufgenommen werden können und entweder sofort oder zeitversetzt dargestellt werden können.
  • US 2013/0302483 A1 offenbart Kochgeräte mit Inspektionssystemen einschließlich: einem Abstandssensor und einem digitalen optischen Erkennungsgerät. Der Abstandssensor erfasst die Position des in das Gargerät eingebrachten Lebensmittelprodukts und die digitale optische Erkennungseinrichtung erfasst eine Reihe von Bildern zum Zweck der Lebensmittelprodukterkennung. Sobald das Lebensmittelprodukt erkannt ist, wird dem Bediener der richtige Kochzyklus/das richtige Programm für die Position und Art des in das Kochgerät platzierten Lebensmittelprodukts bereitgestellt. Die Inspektionssysteme stellen auch sicher, dass das Lebensmittelprodukt am Ende des Garzyklus/-programms richtig gegart wurde. Die Inspektionssysteme stellen sicher: (a) das Lebensmittelprodukt wird korrekt erkannt; (b) der Garzyklus/das Programm richtig ausgewählt ist; (c) der richtige Kochzyklus/das richtige Programm bis zum Ende befolgt wird und (d) die Qualität des gekochten Nahrungsmittelprodukts den erwarteten Standards entspricht. Insbesondere offenbart ist ein Bereitstellen eines realen Bilds eines Lebensmittels mit gespeicherten Bildern von zu garenden Lebensmitteln, um durch Auswahl eines gespeicherten Bilds das in dem realen Bild gezeigte Gargut zu identifizieren.
  • Es ist die Aufgabe der vorliegenden Erfindung, die Nachteile des Standes der Technik zumindest teilweise zu überwinden und insbesondere eine verbesserte Möglichkeit für einen Nutzer bereitzustellen, ein gewünschtes Garergebnis auszuwählen.
  • Diese Aufgabe wird gemäß den Merkmalen der unabhängigen Ansprüche gelöst. Vorteilhafte Ausführungsformen sind Gegenstand der abhängigen Ansprüche, der Beschreibung und der Zeichnungen.
  • Die Aufgabe wird gelöst durch ein Verfahren zum Zubereiten von Gargut, bei dem das Verfahren aktiviert wird, nachdem ein Garraum eines Gargeräts mit dem Gargut beschickt worden ist; nutzerseitig mindestens ein variierbarer Garparameter eingegeben wird; mittels einer Kamera mindestens ein reales Bild des Garraums aufgenommen wird, , in dem das Gargut abgebildet ist, das reale Bild an eine Datenverarbeitungseinrichtung übertragen wird; das Gargut bestimmt wird, von der Datenverarbeitungseinrichtung von dem mindestens einen realen Bild unterschiedliche virtuelle Bilder des Garguts bereitgestellt werden, wobei die virtuellen Bilder Garzustände des zuvor aufgenommenen Garguts zu einem späteren Garzeitpunkt als dem Zeitpunkt der Aufnahme des realen Bilds zu unterschiedlichen Werten des zu variierenden Garparameters darstellen, die virtuellen Bilder von der Datenverarbeitungseinrichtung auf einen berührempfindlichen Bildschirm zur Ansicht und Auswahl durch einen Nutzer übertragen werden, mit Auswahl des virtuellen Bilds ein Zustandswert des in dem ausgewählten virtuellen Bild abgebildeten Garguts des variablen Garparameters auf das Gargerät übertragen wird und dann mittels der Kamera weitere reale Bilder des Garguts aufgenommen werden und überwacht wird, ob der Zustandswert erreicht worden ist oder mit Auswahl des virtuellen Bilds mittels der Kamera weitere reale Bilder des Garguts aufgenommen werden und durch Bildvergleich zwischen diesen realen Bilder und dem ausgewählten virtuellen Bild überwacht wird, ob der Zustandswert erreicht worden ist, und mindestens eine Aktion ausgelöst wird, wenn eine Übereinstimmung eines mittels der Kamera aufgenommenen realen Bilds mit dem ausgewählten virtuellen Bild innerhalb eines vorgegebenen Ähnlichkeitsbereichs liegt, wobei die virtuellen Bilder aus dem mittels einer Kamera aufgenommenen realen Bild durch Bildverarbeitung auf Basis des identifizierten Garguts veränderte Bilder sind oder einem in einer Datenbank abgespeicherten Referenzbilder des identifizierten Garguts entsprechen.
  • Dadurch ergibt sich der Vorteil, dass ein Nutzer einen Zustand von Gargut zu zukünftigen Zeitpunkten durch Ansicht des mindestens einen virtuellen Bilds zumindest angenähert betrachten kann. Dies wiederum ermöglicht es ihm vorteilhafterweise, einen für ihn besten Zustand des Garguts optisch auszuwählen und einen Garablauf daran anzupassen. So wiederum wird eine besonders hohe Nutzerfreundlichkeit bei der Zubereitung von Gargut erreicht. Außerdem wird der Vorteil erreicht, dass die Kamera zusätzlich als optischer Zustandssensor genutzt werden kann.
  • Bei der Bildverarbeitung wird das mindestens eine virtuelle Bild aus dem mittels der Kamera aufgenommenen realen Bild berechnet. Dies ergibt den Vorteil, dass das in dem realen Bild aufgenommene Gargut in dem mindestens einen virtuellen Bild besonders ähnlich nachgebildet wird, z.B. im Hinblick auf eine konkrete Form, Farbe und/oder Anordnung des Garguts. Dadurch wiederum wird es einem Nutzer besonders leicht gemacht, einen Garfortschritt des Garguts in dem mindestens einen virtuellen Bild nachzuvollziehen. Die Berechnung kann mittels einer entsprechend eingerichteten (z.B. programmierten) Datenverarbeitungseinrichtung vorgenommen werden. Dies kann diejenige Datenverarbeitungseinrichtung sein, mittels der auch der Bildvergleich vorgenommen wird.
  • Unter einer Kamera kann jede Bildaufnahmeeinrichtung verstanden werden, welche dazu eingerichtet ist ein reales Bild des Garguts aufzunehmen. Die Kamera ist im für einen Menschen sichtbaren Spektralbereich empfindlich, insbesondere nur in dem sichtbaren Spektralbereich empfindlich (also z.B. keine oder keine reine IR-Kamera).
  • Unter einem "virtuellen" Bild wird also insbesondere ein Bild verstanden, das nicht dem von der Kamera aufgenommenen Bild als solchem entspricht. Das virtuelle Bild ist vielmehr ein aus dem aufgenommenen Bild durch Bildverarbeitung abgeleitetes oder verändertes Bild oder ein aus einer Datenbank abgerufenes Bild ("Referenzbild") eines Garguts (aber nicht genau des durch die Kamera aufgenommenen Garguts).
  • Das Bereitstellen des virtuelles Bilds umfasst insbesondere die Möglichkeit, das mindestens eine virtuelle Bild auf einem Bildschirm darzustellen. Der Bildschirm kann ein Bildschirm eines Gargeräts, insbesondere mittels dessen das Gargut zubereitet wird, und/oder ein Bildschirm eines Nutzerendgeräts wie eines Smartphones, Tablet-PCs, Laptop-PCs, Desktop-PCs usw. sein. Der Bildschirm ist insbesondere ein berührungsempfindlicher Bildschirm, so dass ein dargestelltes virtuelles Bild betätigt werden kann, um es auszuwählen, z.B. um mindestens eine mit diesem virtuellen Bild zusammenhängende Aktion auszulösen.
  • Dass einem Nutzer mehrere virtuelle Bilder zur Ansicht bereitgestellt werden, kann insbesondere umfassen, dass die virtuellen Bilder insbesondere unterschiedlichen Werten mindestens eines Garparameters entsprechen, z.B. einer Gardauer und/oder einer Gartemperatur. In anderen Worten kann einem Nutzer eine Mehrzahl von Bilder zur Ansicht bereitgestellt werden, die eine unterschiedliche Gargeschichte darstellen. Der Nutzer kann ein virtuelles Bild auswählen, um dessen Garparameter angezeigt zu bekommen und/oder um zumindest einen Teil der veränderlichen oder variablen Garparameter in ein Gargerät zu übernehmen, wie weiter unten genauer dargestellt wird.
  • Das obige Verfahren kann in einer Weiterbildung von einem Nutzer ausgelöst oder gestartet werden, z.B. durch Betätigen eines entsprechenden Betätigungsfelds an einem Gargerät oder an einem Nutzerendgerät (beispielsweise über ein entsprechendes Applikationsprogramm). Der Nutzer kann in einer Weiterbildung das Verfahren zu einem beliebigen Zeitpunkt, insbesondere vor oder während eines Garbetriebs oder Garablaufs starten. Das von der Kamera aufgenommene reale Bild kann folglich vor Beginn eines Garablaufs und/oder während eines Garablaufs aufgenommen werden. Es können auch mehrere reale Bilder zu unterschiedlichen Zeitpunkten aufgenommen werden.
  • Es ist eine Ausgestaltung, dass das mindestens eine virtuelle Bild einem Nutzer (z.B. eines das Gargut zubereitenden Gargeräts) zur Auswahl bereitgestellt wird und mit Auswahl eines virtuellen Bilds mindestens ein Garparameter für das Gargerät bereitgestellt wird, der zu einem Garzustand führt, welcher dem Garzustand des Garguts in dem ausgewählten virtuelle Bild entspricht. So wird der Vorteil erreicht, dass ein Nutzer einen gewünschten zukünftigen Zustand oder Endzustand des Garguts anhand eines virtuellen Bilds aussuchen oder auswählen kann und folgend durch die Auswahl zumindest teilautomatisch mindestens ein Garparameter an dem das Gargut behandelnden Gargeräts so eingestellt wird, dass der zu dem ausgewählten virtuellen Bild passende Garzustand zumindest annähernd erreicht wird. Insbesondere kann der zu dem ausgewählten virtuellen Bild passende Garzustand mit Beendigung eines Garablaufs oder mit Beendigung einer bestimmten Phase oder Abschnitt des Garablaufs erreicht werden. In anderen Worten kann der Garablauf oder ein Abschnitt davon beendet werden, wenn der zu dem ausgewählten virtuellen Bild passende Garzustand erreicht worden ist. Alternativ oder zusätzlich kann dann mindestens eine andere Aktion ausgelöst werden, z.B. ein Hinweis an einer Nutzer ausgegeben werden.
  • Es ist eine Ausgestaltung, dass der zu dem ausgewählten virtuellen Bild zugehörige mindestens eine Garparameter mit Auswahl des virtuellen Bilds automatisch von dem Gargerät übernommen wird. So wird eine besonders nutzerfreundliche Möglichkeit bereitgestellt, einen Garablauf zu steuern, insbesondere einen gewünschten Garzustand von Gargut zielgenau zu erreichen.
  • Es ist eine Ausgestaltung, dass der mindestens eine Garparameter mindestens einen Garparameter aus der Gruppe: Gardauer; Restgardauer; Gartemperatur; Garbetriebsart (z.B. Unterhitze, Oberhitze, Grillbetriebsart, Heißluft usw.); Feuchtigkeitsgrad; Drehzahl eines Umluftgebläses; Mikrowellenleistung; Kochstufe umfasst. Die Gartemperatur kann beispielsweise eine Garraumtemperatur eines Garraums, eine Kerntemperatur eines Garguts und/oder eine Temperatur eines Gargeschirrs (wie eines Topfs, einer Bratpfanne, eines Bräters usw.) umfassen.
  • Die an einem bestimmten Gargerät zu Verfügung stehenden Garparameter können sich unterscheiden. So können in dem einfachen Backofen nur die Garparameter Restgardauer; Garraumtemperatur und Garbetriebsart zu Verfügung stehen, bei einem Backofen mit Dampferzeugungsfunktion zusätzlich der Garparameter Feuchtigkeitsgrad, bei einem zur Zusammenarbeit mit einem Kerntemperaturfühler ausgebildeten Gargerät auch der Garparameter Kerntemperatur usw. Weist das Gargerät eine Mikrowellenfunktionalität auf (z.B. ein eigenständiger Mikrowellenofen oder ein Backofen mit Mikrowellenfunktionalität) kann der Garparameter Mikrowellenleistung zur Verfügung stehen, usw. Bei einem Kochfeld kann die einer Kochstelle zugehörige Leistungsstufe und/oder eine Temperatur eines Gargeschirrs und/oder eine Temperatur eines Garguts zur Verfügung stehen usw.
  • Dass mindestens ein Garparameter nutzerseitig vorgebbar ist, ergibt die Möglichkeit, solche Garparameter zur Bereitstellung des mindestens einen virtuellen Bilds nutzerseitig vorzugeben, die zur gelungenen und/oder schnellen Zubereitung von Gargut vorausgesetzt werden. Mittels der Auswahl des virtuellen Bilds kann dann insbesondere mindestens ein Garparameter einem Nutzer bereitgestellt oder automatisch übernommen werden, der noch frei wählbar oder variierbar ist.
  • In einem Beispiel kann ein Nutzer eines Backofens eine gewünschte Betriebsart und Gartemperatur fest vorgeben, aber eine Restgardauer über die Auswahl eines virtuellen Bilds auswählen. Die Kamera kann in den Backofen integriert sein und/oder außerhalb des Backofens angeordnet sein und dann z.B. durch ein Sichtfenster einer Garraumtür in den Garraum gerichtet sein.
  • In einem anderen Beispiel kann ein Nutzer eines Backofens eine gewünschte Betriebsart und Restgardauer fest vorgeben, aber eine Gartemperatur über die Auswahl eines virtuellen Bilds auswählen.
  • In noch einem anderen Beispiel kann ein Nutzer eines Backofens mit Dampfgarfunktion eine gewünschte Betriebsart, Gartemperatur und Garraumfeuchtigkeit vorgeben, aber eine Restgardauer über die Auswahl eines virtuellen Bilds auswählen.
  • In noch einem anderen Beispiel kann ein Nutzer eines Backofens eine gewünschte Betriebsart und Gartemperatur vorgeben, aber eine Ziel-Kerntemperatur über die Auswahl eines virtuellen Bilds auswählen.
  • In noch einem anderen Beispiel kann ein Nutzer eines Kochfelds eine gewünschte Leistungsstufe einer bestimmten Kochstelle vorgeben, aber eine Restgardauer über die Auswahl eines virtuellen Bilds auswählen. Die Kamera kann in diesem Fall z.B. in eine Esse oder Dunstabzugshaube integriert sein.
  • Es ist eine Weiterbildung, dass ein Nutzer vor Beginn der Bereitstellung des mindestens einen virtuellen Bilds eine Art des Garguts (z.B. umfassend einen Typ des mindestens einen Garguts, eine Zubereitungsart usw.) eingibt, z.B. über eine Nutzerschnittstelle eines Gargeräts oder eines Nutzerendgeräts. Dadurch wird es ermöglicht, virtuelle Bilder bereitzustellen, welche den Garzustand des Garguts besonders präzise angenähert darstellen.
  • Es kann also mittels des aufgenommenen realen Bilds eine Identifizierung des in dem aufgenommenen Bild abgebildeten Garguts vorgenommen werden, insbesondere automatisch vorgenommen werden, z.B. mittels Objekterkennung. Dies ist eine besonders nutzerfreundliche Möglichkeit, eine Art des zu behandelnden oder behandelten Garguts zu bestimmen. In einer Weiterbildung kann ein Nutzer die durch die automatische Identifizierung des Garguts erkannten Angaben zu dem Gargut überprüfen und ggf. ändern oder korrigieren.
  • Der Ähnlichkeitsbereich entspricht insbesondere einer Bandbreite oder einem Zielkorridor, der dem ausgewählten virtuellen Bild zugeordnet ist. Der Ähnlichkeitsbereich kann fest vorgegeben sein oder durch einen Nutzer änderbar oder einstellbar sein. Die mindestens eine Aktion kann ein Ausgeben eines z.B. akustischen und/oder optischen Hinweises an einen Nutzer umfassen (optional einschließlich einer Ausgabe einer Nachricht an den Nutzer) und/oder ein Beenden des Garablaufs oder einer Garphase oder eines Garabschnitts davon. Der Bildvergleich kann mittels einer Datenverarbeitungseinrichtung vorgenommen werden, die Teil des Gargeräts ist oder die durch eine geräteexterne Instanz bereitgestellt wird, welche mit der Kamera datentechnisch gekoppelt ist, z.B. mittels eines Netzwerk-Servers oder der sog. "Cloud" (cloud-basierte Datenverarbeitungseinrichtung).
  • Es ist eine Ausgestaltung, dass mindestens eine Aktion ausgelöst wird, wenn ein Bräunungsgrad des eines mittels der Kamera aufgenommenen Bilds mit einem Bräunungsgrad des ausgewählten virtuellen Bilds übereinstimmt, ggf. innerhalb eines vorgegebenen Ähnlichkeitsbereichs. Dadurch wird der Vorteil erreicht, dass die Kamera zusätzlich als optischer Bräunungssensor genutzt werden kann. Erreicht der Bräunungsgrad des realen Garguts also den Bräunungsgrad des in dem virtuellen Bild dargestellten Garguts bzw. einer Bandbreite des Bräunungsgrads des in dem virtuellen Bild dargestellten Garguts, kann die mindestens eine Aktion ausgelöst werden.
  • Zusätzlich oder alternativ zu dem Bräunungsgrad können auch noch andere Zustände oder Zustandsänderungen des Garguts überwacht werden, z.B. ein Volumen und/oder eine Form des Garguts (was z.B. zum Zubereiten von Soufflés, Brotteig usw. nützlich ist), dessen Textur, usw.
  • Es allgemein möglich, die Auswahl eines virtuellen Bilds zur Einstellung mindestens eines Garparameters und/oder zu Steuerung eines Garablaufs oder auch nur eines bestimmten Garabschnitts oder Garphase davon zu nutzen. Mögliche Garabschnitte oder Garphasen können beispielsweise ein Aufgehen von Teig (z.B. Brotteig), eine Trocknung des Garguts und/oder eine Bräunung betreffen.
  • Das virtuelle Bild kann beispielsweise dergestalt aus dem realen Bild berechnet oder abgeleitet werden, dass Farben des in dem realen Bild abgebildeten Garguts oder von in dem realen Bild abgebildeten verschiedenen Gargütern an einen Garfortschritt angepasst werden. So kann in dem virtuellen Bild ein Bräunungsgrad des Garguts bzw. der Gargüter an einen zukünftigen Garzeitpunkt angepasst werden. Alternativ oder zusätzlich kann das virtuelle Bild dergestalt aus dem realen Bild berechnet oder abgeleitet werden, dass eine Formänderung des Garguts berechnet wird.
  • Die Berechnung der virtuellen Bilder kann anhand geeigneter Algorithmen durchgeführt werden. Diese Algorithmen können in einer Weiterbildung auf gargutspezifische und garparameterabhängige Kennlinien zurückgreifen. Alternativ oder zusätzlich können die Algorithmen nach Art neuraler Netzwerke arbeiten oder ablaufen, insbesondere unter Nutzung des sog. "Deep Learning". Die Algorithmen können in einer Weiterbildung die realen Bilder nutzen, um sich für einen bestimmten Nutzer oder eine Nutzgruppe selbstlernend anzupassen oder zu ändern.
  • Das mindestens eine virtuelle Bild kann also aus einem in einer Datenbank abgespeicherten Bild bestimmt werden, insbesondere einem in einer Datenbank abgespeicherten Bild entsprechen. Dadurch kann vorteilhafterweise auf eine Objektbearbeitung eines in dem realen Bild erkannten Garguts verzichtet werden, was einen Rechenaufwand verringert. Die Referenzbilder können zuvor bzw. außerhalb des obigen Verfahrens mittels einer Kamera aufgenommen worden sein, z.B. durch einen Hersteller eines Gargeräts, ein Kochstudio, einen Nutzer usw. Wird beispielsweise in dem im Rahmen des Verfahrens aufgenommenen realen Bilds ein Backhähnchen identifiziert oder von einem Nutzer als Gargut angegeben, können die virtuellen Bilder Referenzbildern entsprechen, welche ein zu unterschiedlichen Garzeitpunkten aufgenommenes Referenz-Backhähnchen zeigen, das mit den gleichen oder ähnlichen vorgegebenen Garparametern gebacken worden ist.
  • Es ist eine Ausgestaltung, dass der spätere Garzeitpunkt nutzerseitig einstellbar ist. Dadurch wird der Vorteil erreicht, dass ein Nutzer ein virtuelles Bild des in dem realen Bild abgebildeten, insbesondere erkannten, Garguts zu einem von ihm bestimmten späteren Garzeitpunkt ansehen kann. Falls also beispielsweise ein Nutzer sehen möchte, wie das Gargut wahrscheinlich in fünf Minuten aussehen wird, kann er als späteren Garzeitpunkt "5 Minuten" vorgeben und erhält dann ein entsprechendes virtuelles Bild. Der Nutzer kann dann mindestens eine Aktion auslösen (z.B. die fünf Minuten als Restgardauer festlegen), braucht es aber nicht. Auch kann ein Nutzer bei mehreren virtuellen Bildern deren Zeitschritte einstellen.
  • Es ist eine Ausgestaltung, dass das von der Kamera aufgenommene Bild und das mindestens eine virtuelle Bild das Gargut aus dem gleichen Blickwinkel zeigen. Dies erleichtert vorteilhafterweise einen Bildvergleich.
  • Es ist eine alternative oder zusätzliche Ausgestaltung, dass das von der Kamera aufgenommene Bild und das mindestens eine virtuelle Bild das Gargut aus einem unterschiedlichen Blickwinkel zeigen. So wird der Vorteil erreicht, dass einem Nutzer verschiedene Ansichten des Garguts bereitstellbar sind. Die Ansichten unter unterschiedlichen Blickwinkeln können berechnet und/oder aus Referenzbildern bereitgestellt werden.
  • Die Aufgabe wird auch gelöst durch ein Gargerätesystem, aufweisend ein Gargerät mit einem Garraum und mindestens eine in den Garraum gerichtete Kamera zum Aufnehmen von durch das Gargerät zu garendem Gargut, wobei das Gargerätesystem dazu eingerichtet ist, das Verfahren wie oben beschrieben durchzuführen. Dazu ist das Gargerät dazu eingerichtet ist, die von der Kamera aufgenommenen realen Bilder auf eine Datenverarbeitungseinrichtung zu übertragen, und die Datenverarbeitungseinrichtung dazu eingerichtet, die virtuellen Bilder des Garguts, die Garzustände des zuvor aufgenommenen Garguts zu unterschiedlichen späteren Garzeitpunkt darstellen, bereitzustellen und auf das Gargerät zu übertragen. Das Gargerätesystem kann analog zu dem Verfahren ausgebildet werden und weist die gleichen Vorteile auf.
  • Dieses Gargerätesystem weist den Vorteil auf, dass es auch auf Gargeräte anwendbar ist, die keinen verschließbaren Garraum und ggf. auch selbst keine Kamera aufweisen, z.B. auf Kochfelder. Die Kamera kann also in das Gargerät integriert sein oder eine eigenständige Kamera sein. Ein mögliches Beispiel für ein solches Gargerätesystem umfasst ein Kochfeld und eine Esse oder Dunstabzugshaube, wobei die Kamera an der Dunstabzugshaube angeordnet sein kann. Die Kamera ist auf das Kochfeld gerichtet bzw. das Kochfeld befindet sich im Blickfeld der Kamera. Die Kamera kann dann ein reales Bild eines in einer Pfanne, einem Topf o.ä. garenden Garguts aufnehmen und entsprechende virtuelle Bilder bereitstellen.
  • Es ist eine Ausgestaltung, dass das Gargerätesystem die Datenverarbeitungseinrichtung aufweist. Dieses Gargerät ist insbesondere zur autonomen Durchführung des Verfahrens eingerichtet ist.
  • Es ist eine Ausgestaltung, dass das Gargerät ein Backofen, Herd, Mikrowellengerät, Dampfgarer oder eine beliebige Kombination davon ist, z.B. ein Backofen mit Mikrowellen- und/oder Dampferzeugungsfunktionalität.
  • Es ist eine Ausgestaltung, dass die Datenverarbeitungseinrichtung eine mit dem Gargerät über ein Datennetzwerk gekoppelte Datenverarbeitungseinrichtung ist. Das Gargerät kann zur datentechnischen Kopplung über das Datennetzwerk mit einem Kommunikationsmodul wie einem WLAN-Modul, Bluetooth-Modul und/oder Ethernet-Modul o.ä. ausgerüstet sein.
  • Allgemein können die virtuellen Bilder an dem Gargerät und/oder auf einem entsprechend ausgestalteten (z.B. programmierten) Nutzerendgerät bereitgestellt, angesehen und/oder ausgewählt werden.
  • Die oben beschriebenen Gargeräte sind insbesondere Haushaltsgeräte.
  • Die oben beschriebenen Eigenschaften, Merkmale und Vorteile dieser Erfindung sowie die Art und Weise, wie diese erreicht werden, werden klarer und deutlicher verständlich im Zusammenhang mit der folgenden schematischen Beschreibung eines Ausführungsbeispiels, das im Zusammenhang mit den Zeichnungen näher erläutert wird.
    • Fig.1
    zeigt eine Skizze eines Haushalts-Gargerätesystems; und
    Fig.2
    zeigt einen möglichen Ablauf des Verfahrens auf dem Haushalts-Gargerätesystem;
    Fig.3
    zeigt ein reales Bild und zwei daraus bestimmte virtuelle Bilder; und
    Fig.4
    zeigt eine Skizze eines weiteren realen Bilds und daraus bestimmte virtuelle Bilder.
  • Fig.1 zeigt eine Skizze eines Gargerätesystems 1 mit einem Backofen 2 als dem Gargerät. Der Backofen 2 weist einen Garraum 3 auf, in dem Gargut G (ein oder mehrere Gargüter oder Speisen) behandelbar ist. Der Backofen 2 kann in einer Weiterbildung außer seinen herkömmlichen Heizarten (Oberhitze, Unterhitze, Grill, Heißluft, Umluft usw.) für den Garraum 3 auch eine Mikrowellenfunktionalität und/oder eine Dampferzeugungsfunktionalität aufweisen. Der Betrieb des Backofens 2 ist mittels einer Steuereinrichtung 4 steuerbar, die auch mit einer in den Garraum 3 gerichteten Kamera 5, einer Nutzerschnittstelle 6 und mit mindestens einem Kommunikationsmodul 7 datentechnisch verbunden ist.
  • Mittels der Kamera 5 können reale Bilder Br von in dem Garraum 3 befindlichem Gargut G aufgenommen werden. Die Kamera 5 ist insbesondere eine Digitalkamera. Die Kamera 5 ist insbesondere eine Farbkamera. Die realen Bilder Br werden von der Kamera 5 an die Steuereinrichtung 4 übertragen. Sie können in einer Weiterbildung von der Steuereinrichtung 4 weiter auf einen insbesondere berührempfindlichen Bildschirm 8 der Nutzerschnittstelle 6 zur Ansicht weitergeleitet werden. Die Nutzerschnittstelle 6 dient ferner dazu, Nutzereinstellungen zu empfangen und an die Steuereinrichtung 4 weiterzuleiten. Insbesondere kann ein Nutzer über die Nutzerschnittstelle 6 auch für einen Garablauf oder Abschnitt davon gewünschte Garparameter einstellen und zur Bereitstellung mindestens eines virtuellen Bilds Bv nötige Annahmen oder Informationen eingeben.
  • Das mindestens eine Kommunikationsmodul 7 ermöglicht eine datentechnische Kopplung des Backofens 2 mit einer externen Datenverarbeitungseinrichtung 9, z.B. über ein Datennetzwerk 10. Das Kommunikationsmodul 7 kann z.B. ein WLAN-Modul sein. Die Datenverarbeitungseinrichtung 9 kann wie angedeutet in einem Server (o. Abb.) verortet sein oder kann cloud-basiert sein. Der Inhaber der Datenverarbeitungseinrichtung 9 kann der Hersteller des Backofens 2 sein.
  • Das mindestens eine Kommunikationsmodul 7 ermöglicht ferner eine datentechnische Kopplung des Backofens 2 mit einem Nutzerendgerät 11, insbesondere mit einem mobilen Nutzerendgerät wie einem Smartphone. Diese datentechnische Kopplung kann ebenfalls über das Datennetzwerk 10 erfolgen, z.B. mittels des WLAN-Moduls. Das Kommunikationsmodul 6 kann aber zur direkten datentechnischen Kopplung mit dem Nutzerendgerät 11 eingerichtet sein, z.B. als Bluetooth-Modul. Dies ermöglicht eine Fernsteuerung des Backofens 2 über das Nutzerendgerät 11. Insbesondere kann ein Nutzer auch an dem Nutzerendgerät 11 die für einen Garablauf oder Abschnitt davon gewünschten Garparameter einstellen und zur Bereitstellung mindestens eines virtuellen Bilds Bv nötige Annahmen oder Informationen eingeben.
  • Das Nutzerendgerät 11 kann über das Datennetzwerk 10 mit der Datenverarbeitungseinrichtung 9 verbunden sein, z.B. durch Ablaufenlassen eines entsprechenden Applikationsprogramms auf dem Nutzerendgerät 11.
  • Der Backofen 2 ist insbesondere dazu eingerichtet, die von der Kamera 5 aufgenommenen realen Bilder Br an die Datenverarbeitungseinrichtung 9 zu übertragen oder zu senden. Er kann auch dazu eingerichtet sein, die von der Kamera 5 aufgenommenen realen Bilder Br an das Nutzerendgerät 11 zu übertragen.
  • Die Datenverarbeitungseinrichtung 9 ist dazu eingerichtet, mindestens ein virtuelles Bild Bv des Garguts G, das einen Garzustand des zuvor aufgenommenen Garguts G zu einem späteren Garzeitpunkt als dem Zeitpunkt der Aufnahme des realen Bilds Br darstellt, bereitzustellen und auf den Backofen 2 und/oder das Nutzerendgerät 11 zu übertragen.
  • Fig.2 zeigt einen möglichen Ablauf des Verfahrens zum Zubereiten von Gargut G auf dem Haushalts-Gargerätesystem 1.
  • In einem Schritt S1 hat ein Nutzer den Garraum 3 mit dem Gargut G beschickt, an dem Backofen 2 Garparameter eingestellt und aktiviert dann das Verfahren. Er kann das Verfahren über den berührempfindlichen Bildschirm 8 der Nutzerschnittstelle 6 und/oder über das Nutzerendgerät 11 aktivieren.
  • In einem Schritt S2 gibt der Nutzer an dem berührempfindlichen Bildschirm 8 der Nutzerschnittstelle 6 oder über das Nutzerendgerät 11 (z.B. über ein entsprechendes Applikationsprogramm oder "App") mindestens einen fest vorgegebenen Garparameter des Backofens 2 und mindestens einen zu variierenden Garparameter ein. Beispielhaft kann der Nutzer eine Garbetriebsart und eine Garraumtemperatur des Backofens 2 vorgeben und die Gardauer als variabel festlegen. Alternativ kann der Nutzer die fest vorgegebenen Garparameter an dem Backofen 2 einstellen. In noch einer Alternative wählt der Nutzer nur den mindestens einen zu variierenden Garparameter aus.
  • In einem Schritt S3 nimmt die Kamera 5 ein reales Bild Br des Garraums 3 auf, in dem das Gargut G abgebildet ist, auf.
  • In einem Schritt S4 wird das reale Bild Br von dem Backofen 2 an die Datenverarbeitungseinrichtung 9 übertragen.
  • In einem Schritt S5 identifiziert die Datenverarbeitungseinrichtung 9 das in dem realen Bild Br abgebildete Gargut G, z.B. mittels Objekterkennung.
  • In einem Schritt S6 erzeugt die Datenverarbeitungseinrichtung 9 virtuelle Bilder Bv. In den virtuellen Bildern Bv ist das Gargut G so bildbearbeitet worden ist, das es das Gargut G zu unterschiedlichen Werten des zu variierenden Garparameters nachbildet oder simuliert, hier beispielhaft in Bezug auf die Gardauer. Praktisch kann insbesondere eine Bildfolge von virtuellen Bildern Bv des Garguts G erstellt werden, welche den Zustand des Garguts G zu fortschreitenden Gardauern simulieren oder nachbilden. Beispielsweise können zwölf virtuelle Bilder Bv erzeugt werden, die einem jeweiligen Fortschritt der Gardauer von fünf Minuten entsprechen. Ein Nutzer kann, z.B. in Schritt S2, eine Zahl der virtuellen Bilder Bv, einen zeitlichen Abstand zwischen aufeinanderfolgenden virtuellen Bildern Bv und/oder einen Höchstwert der Gardauer eingeben.
  • In einem Schritt S7 werden die virtuellen Bilder Bv von der Datenverarbeitungseinrichtung 9 auf das Nutzerendgerät 11 und/oder auf den berührempfindlichen Bildschirm 8 des Backofens 2 zur Ansicht durch einen Nutzer übertragen.
  • In einem Schritt S8 kann der Nutzer nun die virtuellen Bilder Bv betrachten und dasjenige virtuelle Bild Bv auswählen (z.B. durch Berühren auf dem berührungsempfindlichen Bildschirm 8), das dem gewünschten Garergebnis am nächsten kommt, z.B. in Bezug auf einen Bräunungsgrad. Mit Auswahl des virtuellen Bilds Bv wird somit mindestens ein Garparameter für den Backofen bereitgestellt wird, der zu einem Garzustand führt, welcher dem Garzustand des Garguts G in dem ausgewählten virtuellen Bild Bv entspricht.
  • In einem nicht zur Erfindung gehörigen Schritt S9a wird mit Auswahl des virtuellen Bilds Bv der zugehörige Wert des variablen Garparameters (hier: der Gardauer) auf den Backofen 2 automatisch oder durch einen Nutzer ausgelöst übertragen bzw. von dem Backofen 2 übernommen und damit der Backofen 2 auf diese Gardauer eingestellt. Mit Erreichen dieser Gardauer wird mindestens eine Aktion ausgelöst, z.B. der Garablauf oder eine bestimmte Garphase beendet.
  • In einem zur Erfindung gehörigen Schritt S9b wird mit Auswahl des virtuellen Bilds Bv ein Zustandswert (hier z.B. ein Bräunungsgrad) des in dem ausgewählten virtuellen Bild Bv abgebildeten Garguts G des variablen Garparameters auf den Backofen 2 übertragen bzw. von dem Backofen 2 übernommen. Der Backofen 2 kann dann mittels der Kamera 5 - insbesondere in regelmäßigen Abständen - reale Bilder Br des Garguts G in dem Garraum 3 aufnehmen und das Gargut G auf dessen Bräunungsgrad hin überwachen. Ist der gewünschte Bräunungsgrad (zumindest innerhalb eines Ähnlichkeitsbereichs, also nicht zwangsweise genau) erreicht, wird mindestens eine Aktion ausgelöst, z.B. der Garablauf oder eine bestimmte Garphase beendet. Alternativ kann ein Bildvergleich zwischen den realen Bilder Br und dem ausgewählten virtuellen Bild Bv durchgeführt werden, um den Bräunungsgrad zu bestimmen. Der Bildvergleich kann z.B. durch die Steuereinheit 4 und/oder durch die Datenverarbeitungseinrichtung 9 vorgenommen werden.
  • Allgemein können das von der Kamera 5 aufgenommene Bild Br und das mindestens eine virtuelle Bild Bv das Gargut G aus einem unterschiedlichen Blickwinkel zeigen.
  • Alternativ oder zusätzlich können die virtuellen Bilder Bv in Schritt S6 in einer mit der Datenverarbeitungseinrichtung 9 gekoppelten oder in der Datenverarbeitungseinrichtung 9 integrierten Datenbank 12 abgespeicherte Referenzbilder sein.
  • Fig.3 zeigt ein zu einem Zeitpunkt t0 aufgenommenes reales Bild Br (t0), ein für einen folgenden Zeitpunkt t1 mit t1 > t0 bestimmtes virtuelles Bild Bv (t1) von Gargut G und ein für einen folgenden Zeitpunkt t2 mit t2 > t1 bestimmtes virtuelles Bild Bv (t2). Beispielsweise kann t2 = t1 + 30 min und t1 = t0+ 30 min betragen. Das zugehörige Gargut G ist hier z.B. als ein Gemüseblatt gezeigt.
  • Die virtuellen Bilder Bv (t1) und B(v2) sind z.B. aus dem realen Bild Br (t0) mittels eines Algorithmus berechnet worden. Der Algorithmus ist dazu ausgestaltet, einen Bräunungsgrad, eine Form und/oder eine Textur des in dem realen Bild Br (t0) abgebildeten Garguts G unter vorgegebenen Garparametern wie Garraumtemperatur und Garbetriebsart für die Zeitpunkte t1 und t2 anzupassen.
  • Alternativ können die dargestellten Bilder sämtlich aus einer Datenbank 12 abgerufene Bilder sein, die Gargut G zeigen, das einem Typ von Gargut entspricht, das in einem zuvor aufgenommenen realen Bild (nicht dargestellt) identifiziert worden ist oder von einem Nutzer angegeben worden ist.
  • Fig.4 zeigt eine Skizze eines weiteren realen Bilds Bv (t0) und daraus für eine Garraumtemperatur T1 bestimmte virtuelle Bilder Bv (T1, t1) und Bv (T1, t2) sowie für eine Garraumtemperatur T2 bestimmte virtuelle Bilder Bv (T2, t1) und Bv (T2, t2). Hier sind somit die Garraumtemperatur und die Gardauer variable Garparameter, die insbesondere durch den Nutzer zur Variation ausgewählt worden sind. Es gilt wiederum t0 < t1 < t2. Ferner gilt T1 < T2, z.B. mit T1 = 100°C und T2 = 180°C.
  • Die virtuelle Bilder Bv zeigen abhängig von der durch den Nutzer gewählten Garraumtemperaturen T1, T2 und Gardauern t1, t2 unterschiedliche Bräunungsgrade. Ein Nutzer kann aus den virtuellen Bildern Bv ein Bild Bv auswählen, und der darin gezeigte Bräunungsgrad wird als Ziel oder Zielwert für das reale Gargut für den Backofen 2 übernommen. Die Kamera 5 kann dann als optischer Bräunungssensor verwendet werden, um z.B. den Garablauf oder eine zugehörige Bräunungsphase zu beenden, wenn der Bräunungsgrad des realen Garguts G den in dem ausgewählten virtuellen Bild abgebildeten Bräunungsgrad (insbesondere innerhalb eines Ähnlichkeitsbands oder -bereichs) erreicht hat.
  • Selbstverständlich ist die vorliegende Erfindung nicht auf das gezeigte Ausführungsbeispiel beschränkt.
  • Allgemein kann unter "ein", "eine" usw. eine Einzahl oder eine Mehrzahl verstanden werden, insbesondere im Sinne von "mindestens ein" oder "ein oder mehrere" usw., solange dies nicht explizit ausgeschlossen ist, z.B. durch den Ausdruck "genau ein" usw.
    • Bezugszeichenliste
    • 1
    Gargerätesystem
    2
    Backofen
    3
    Garraum
    4
    Steuereinrichtung
    5
    Kamera
    6
    Nutzerschnittstelle
    7
    Kommunikationsmodul
    8
    Berührempfindlicher Bildschirm
    9
    Datenverarbeitungseinrichtung
    10
    Datennetzwerk
    11
    Nutzerendgerät
    12
    Datenbank
    Br
    Reales Bild
    Bv
    Virtuelles Bild
    G
    Gargut
    t0, t1, t2
    Zeitpunkt
    S1-S8,S9a, S9b
    Verfahrensschritt
    T1, T2
    Garraumtemperatur

Claims (11)

  1. Verfahren (S1-S8, S9a, S9b) zum Zubereiten von Gargut (G), bei dem
    - das Verfahren (S1-S8, S9a, S9b) aktiviert wird, nachdem ein Garraum (3) eines Gargeräts (2) mit dem Gargut (G) beschickt worden ist (S1);
    - nutzerseitig mindestens ein variierbarer Garparameter eingegeben wird (S2);
    - mittels einer Kamera (5), welche im für einen Menschen sichtbaren Spektralbereich empfindlich ist, mindestens ein reales Bild (Br) des Garraums (3) aufgenommen wird, in dem das Gargut (G) abgebildet ist (S3),
    - das reale Bild (Br) an eine Datenverarbeitungseinrichtung (9) übertragen wird (S4);
    - das Gargut (G) bestimmt wird, insbesondere von der Datenverarbeitungseinrichtung (9) das in dem realen Bild (Br) abgebildete Gargut (G) identifiziert wird (S5);
    - von der Datenverarbeitungseinrichtung (9) von dem mindestens einen realen Bild (Br) mehrere unterschiedliche virtuelle Bilder (Bv) des Garguts (G) bereitgestellt werden, wobei die virtuellen Bilder (Bv) Garzustände des zuvor aufgenommenen Garguts (G) zu einem späteren Garzeitpunkt als dem Zeitpunkt der Aufnahme des realen Bilds (Br) zu unterschiedlichen Werten des zu variierenden Garparameters darstellen (S6),
    - die virtuellen Bilder (Bv) von der Datenverarbeitungseinrichtung (9) auf einen berührempfindlichen Bildschirm (8) zur Ansicht und Auswahl durch einen Nutzer übertragen werden (S7, S8);
    - mit Auswahl des virtuellen Bilds (Bv) ein Zustandswert des in dem ausgewählten virtuellen Bild (Bv) abgebildeten Garguts (G) des variablen Garparameters auf das Gargerät (2) übertragen wird und dann mittels der Kamera (5) weitere reale Bilder (Br) des Garguts (G) aufgenommen werden und überwacht wird, ob der Zustandswert erreicht worden ist (S9b)
    oder
    mit Auswahl des virtuellen Bilds (Bv) mittels der Kamera (5) weitere reale Bilder (Br) des Garguts (G) aufgenommen werden und durch Bildvergleich zwischen diesen realen Bilder (Br) und dem ausgewählten virtuellen Bild (Bv) überwacht wird, ob der Zustandswert erreicht worden ist, und
    - mindestens eine Aktion ausgelöst wird, wenn eine Übereinstimmung eines mittels der Kamera (5) aufgenommenen realen Bilds (Br) mit dem ausgewählten virtuellen Bild (Bv) innerhalb eines vorgegebenen Ähnlichkeitsbereichs liegt (S9b),
    wobei die virtuellen Bilder (Bv)
    - aus dem mittels einer Kamera (5) aufgenommenen realen Bild (Br) durch Bildverarbeitung auf Basis des identifizierten Garguts (G) veränderte Bilder sind oder
    - in einer Datenbank abgespeicherten Referenzbildern des identifizierten Garguts (G) entsprechen.
  2. Verfahren nach Anspruch 1 (S1-S8, S9a), bei dem der zu dem ausgewählten virtuellen Bild (Bv) zugehörige mindestens eine Garparameter mit Auswahl des virtuellen Bilds (Bv) automatisch von dem Gargerät (2) übernommen wird (S9a).
  3. Verfahren (S1-S8, S9a, S9b) nach einem der vorhergehenden Ansprüche, bei dem der mindestens eine Garparameter mindestens einen Garparameter aus der Gruppe
    - Gardauer;
    - Restgardauer;
    - Gartemperatur;
    - Garbetriebsart (z.B. Unterhitze, Oberhitze, Grillbetriebsart, Heißluft usw.);
    - Feuchtigkeit;
    - Drehzahl eines Umluftgebläses;
    - Mikrowellenleistung;
    - Kochstufe
    umfasst (S2).
  4. Verfahren (S1-S8, S9b) nach einem der vorhergehenden Ansprüche, bei mindestens eine Aktion ausgelöst wird, wenn ein Bräunungsgrad des eines mittels der Kamera (5) aufgenommenen Bilds (Br) mit einem Bräunungsgrad des ausgewählten virtuellen Bilds (Bv) innerhalb eines vorgegebenen Ähnlichkeitsbereichs liegt (S9b).
  5. Verfahren (S1-S8, S9a, S9b) nach einem der vorhergehenden Ansprüche, bei dem der spätere Garzeitpunkt nutzerseitig einstellbar ist.
  6. Verfahren (S1-S8, S9a, S9b) nach einem der vorhergehenden Ansprüche, bei dem das von der Kamera (5) aufgenommene Bild (Br) und das mindestens eine virtuelle Bild (Bv) das Gargut (G) aus einem unterschiedlichen Blickwinkel zeigen.
  7. Verfahren nach einem der vorhergehenden Ansprüche, bei dem nutzerseitig mindestens ein fest vorgegebener Garparameter und mindestens ein zu variierender Garparameter eingegeben wird (S2).
  8. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die virtuellen Bilder (Bv) aus dem mittels einer Kamera (5) aufgenommenen realen Bild (Br) durch Bildverarbeitung veränderte Bilder sind und die Datenverarbeitungseinrichtung (9) dazu virtuelle Bilder (Bv) erzeugt, in denen das Gargut (G) so bildbearbeitet worden ist, das es das Gargut (G) zu unterschiedlichen Werten des zu variierenden Garparameters nachbildet oder simuliert (S6).
  9. Gargerätesystem, aufweisend ein Gargerät (2) mit einem Garraum (3) und mindestens eine in den Garraum (3) gerichtete Kamera (5) zum Aufnehmen von durch das Gargerät (2) zu garendem Gargut (G), wobei das Gargerätesystem (1) dazu eingerichtet ist, das Verfahren (S1-S8, S9a, S9b) nach einem der vorhergehenden Ansprüche durchzuführen, und wobei
    - das Gargerät dazu eingerichtet ist, die von der Kamera (5) aufgenommenen realen Bilder (Br) auf eine Datenverarbeitungseinrichtung (9) zu übertragen, und
    - die Datenverarbeitungseinrichtung (9) dazu eingerichtet, die virtuellen Bild (Bv) des Garguts (G), die Garzustände des zuvor aufgenommenen Garguts (G) zu unterschiedlichen späteren Garzeitpunkten darstellen, bereitzustellen und auf das Gargerät zu übertragen.
  10. Gargerätesystem nach Anspruch 9, wobei das Gargerät die Datenverarbeitungseinrichtung aufweist.
  11. Gargerätesystem nach Anspruch 9, wobei die Datenverarbeitungseinrichtung (9) eine mit dem Gargerät (2) über ein Datennetzwerk (10) gekoppelte Datenverarbeitungseinrichtung (9) ist.
EP19780263.0A 2018-10-10 2019-10-08 Verfahren zum zubereiten von gargut, gargerät und gargeräte-system Active EP3864346B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP18290117 2018-10-10
PCT/EP2019/077164 WO2020074478A1 (de) 2018-10-10 2019-10-08 Verfahren zum zubereiten von gargut, gargerät und gargeräte-system

Publications (2)

Publication Number Publication Date
EP3864346A1 EP3864346A1 (de) 2021-08-18
EP3864346B1 true EP3864346B1 (de) 2025-12-10

Family

ID=63914974

Family Applications (1)

Application Number Title Priority Date Filing Date
EP19780263.0A Active EP3864346B1 (de) 2018-10-10 2019-10-08 Verfahren zum zubereiten von gargut, gargerät und gargeräte-system

Country Status (4)

Country Link
US (1) US12066193B2 (de)
EP (1) EP3864346B1 (de)
CN (1) CN112789447A (de)
WO (1) WO2020074478A1 (de)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12050662B2 (en) 2021-09-07 2024-07-30 Whirlpool Corporation Generative food doneness prediction
DE102022203107A1 (de) * 2022-03-30 2023-10-05 BSH Hausgeräte GmbH Lebensmittel, Gargerät zur Zubereitung des Lebensmittels und Verfahren zur Steuerung des Gargeräts
US12449774B2 (en) 2022-05-06 2025-10-21 Bsh Home Appliances Corporation Oven having an imaging system for food preparation
US12560334B2 (en) 2022-08-24 2026-02-24 Haier Us Appliance Solutions, Inc. Oven appliances and methods of monitoring cooking utensils therein
KR102901577B1 (ko) * 2023-05-11 2025-12-22 엘지전자 주식회사 조리 기기 및 그의 동작 방법
DE102024205132A1 (de) * 2024-06-04 2025-12-04 BSH Hausgeräte GmbH Einstellen von Betriebsparametern eines Lebensmittelbehandlungsablaufs und Durchführen desselben

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1145297A (ja) * 1997-07-28 1999-02-16 Sharp Corp 料理支援装置
EP1505349A2 (de) * 2003-08-06 2005-02-09 BSH Bosch und Siemens Hausgeräte GmbH Gargerät mit einer Bräunungssensorvorrichtung
US20130302483A1 (en) * 2012-05-09 2013-11-14 Convotherm Elektrogeraete Gmbh Optical quality control system
WO2014086487A1 (en) * 2012-12-04 2014-06-12 Ingo Stork Genannt Wersborg Heat treatment device with monitoring system
US20140208957A1 (en) * 2012-02-14 2014-07-31 Panasonic Corporation Electronic device
WO2015185211A2 (en) * 2014-06-05 2015-12-10 Ingo Stork Genannt Wersborg Heat treatment monitoring system
DE102015107228A1 (de) * 2015-05-08 2016-11-10 Lechmetall Gmbh Verfahren zum Steuern zumindest eines Teilprozesses wenigstens eines Garprozesses sowie System zum Garen von Nahrungsmitteln
US20170074522A1 (en) * 2015-09-10 2017-03-16 Brava Home, Inc. In-oven camera
EP3309459A1 (de) * 2015-06-12 2018-04-18 Panasonic Intellectual Property Management Co., Ltd. Heizungsherd
EP3348909A1 (de) * 2015-11-12 2018-07-18 Samsung Electronics Co., Ltd. Ofen und öffnungs- und schliessverfahren für ofentür
DE102017101183A1 (de) * 2017-01-23 2018-07-26 Miele & Cie. Kg Verfahren zum Betreiben eines Gargerätes und Gargerät

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101504158A (zh) * 2008-07-30 2009-08-12 郭恒勋 一种没有微波辐射的微波炉及其操作和控制方法
US20100147823A1 (en) * 2008-12-17 2010-06-17 Whirlpool Corporation Oven control system with graphical display
EP2930433B1 (de) * 2014-04-07 2022-01-12 Whirlpool EMEA S.p.A. Ofen mit scan-vorrichtung
DE102014210668A1 (de) * 2014-06-05 2015-12-17 BSH Hausgeräte GmbH Haushaltsgerät mit Speisenbehandlungsraum und Kamera
CN104251501A (zh) * 2014-09-10 2014-12-31 广东美的厨房电器制造有限公司 微波炉的控制方法和微波炉
US10739013B2 (en) * 2015-05-05 2020-08-11 June Life, Inc. Tailored food preparation with an oven
US9644847B2 (en) * 2015-05-05 2017-05-09 June Life, Inc. Connected food preparation system and method of use
CN107909605A (zh) * 2017-10-23 2018-04-13 广东美的厨房电器制造有限公司 烹饪设备的控制方法、装置、存储介质和服务器
US10605463B2 (en) * 2017-10-27 2020-03-31 Whirlpool Corporation Cooking appliance with a user interface

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1145297A (ja) * 1997-07-28 1999-02-16 Sharp Corp 料理支援装置
EP1505349A2 (de) * 2003-08-06 2005-02-09 BSH Bosch und Siemens Hausgeräte GmbH Gargerät mit einer Bräunungssensorvorrichtung
US20140208957A1 (en) * 2012-02-14 2014-07-31 Panasonic Corporation Electronic device
US20130302483A1 (en) * 2012-05-09 2013-11-14 Convotherm Elektrogeraete Gmbh Optical quality control system
WO2014086487A1 (en) * 2012-12-04 2014-06-12 Ingo Stork Genannt Wersborg Heat treatment device with monitoring system
WO2015185211A2 (en) * 2014-06-05 2015-12-10 Ingo Stork Genannt Wersborg Heat treatment monitoring system
DE102015107228A1 (de) * 2015-05-08 2016-11-10 Lechmetall Gmbh Verfahren zum Steuern zumindest eines Teilprozesses wenigstens eines Garprozesses sowie System zum Garen von Nahrungsmitteln
EP3309459A1 (de) * 2015-06-12 2018-04-18 Panasonic Intellectual Property Management Co., Ltd. Heizungsherd
US20170074522A1 (en) * 2015-09-10 2017-03-16 Brava Home, Inc. In-oven camera
EP3348909A1 (de) * 2015-11-12 2018-07-18 Samsung Electronics Co., Ltd. Ofen und öffnungs- und schliessverfahren für ofentür
DE102017101183A1 (de) * 2017-01-23 2018-07-26 Miele & Cie. Kg Verfahren zum Betreiben eines Gargerätes und Gargerät

Also Published As

Publication number Publication date
US20210207811A1 (en) 2021-07-08
CN112789447A (zh) 2021-05-11
EP3864346A1 (de) 2021-08-18
WO2020074478A1 (de) 2020-04-16
US12066193B2 (en) 2024-08-20

Similar Documents

Publication Publication Date Title
EP3864346B1 (de) Verfahren zum zubereiten von gargut, gargerät und gargeräte-system
EP3864936B1 (de) Verfahren zum behandeln von gargut und haushalts-gargerät
EP3415061B1 (de) Haushaltsgerät
DE102019216682A1 (de) Bestimmen eines Ziel-Verarbeitungszustands eines zu behandelnden Garguts
EP2910856B1 (de) Verfahren zum Betreiben eines Gargeräts und Gargerät
DE102018221749A1 (de) Backofen und Steuerverfahren
EP2042809A2 (de) Verfahren zur vereinfachten Programmierung von Programmen eines Gargeräts und Gargerät zum Durchführen solch eines Verfahrens
EP4274997A1 (de) Verfahren zum bestimmen eines garzeiteindes von gargut sowie haushaltsgargerät
DE102010054382B4 (de) Verfahren zur Steuerung eines Gargerätes und Gargerät mit Gerätesteuerung
EP3857128A1 (de) Haushaltsgerät, haushaltsgerätesystem und verfahren zum betreiben eines haushaltsgeräts
EP4118382A1 (de) Einstellen eines ziel-bräunungsgrads an einem haushalts-gargerät
DE102019107828B4 (de) Verfahren zum Betreiben eines Gargeräts und Gargerät
DE102014103457A1 (de) Verfahren zum Auswählen eines Garprogramms und Gargerät
DE102019206239A1 (de) Verfahren zum Betreiben eines Kochfeldes und Kochvorrichtung mit Kochfeld
DE102023212175A1 (de) System zur nachbildung von koch-sessions
DE102020213213A1 (de) Lebensmittelzubereitungssystem
DE102020206834A1 (de) Bestimmung einer verbleibenden Gardauer
DE102018115538A1 (de) Kalibrierungssystem, Küchensystem sowie Verfahren zum Betreiben eines Kalibrierungssystems
DE102023126048A1 (de) Verfahren zum Betreiben eines Gargeräts
EP4501069A1 (de) Garsystem, gargerät und verfahren zum betrieb eines garsystems
EP4599189A1 (de) Betreiben eines haushaltsgargeräts mit mindestens einer behandlungsraumkamera
DE102024205207A1 (de) Leitung eines Kochvorgangs
WO2024068363A1 (de) Bestimmen eines gargrads von gargut
DE102014107895A1 (de) Verfahren zum Steuern eines Gargeräts
CH708499A2 (de) System und Verfahren zur Bedienung von Haushaltsgeräten anhand eines externen Geräts.

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20210510

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20220204

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

INTG Intention to grant announced

Effective date: 20250701

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: CH

Ref legal event code: F10

Free format text: ST27 STATUS EVENT CODE: U-0-0-F10-F00 (AS PROVIDED BY THE NATIONAL OFFICE)

Effective date: 20251210

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502019014174

Country of ref document: DE

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20251210

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG9D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20260310

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20251210

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20251210

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20251210

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20260310

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20251210