WO2023242147A1 - Schweissschulungsanordnung zur durchführung eines virtuellen handschweissvorganges - Google Patents

Schweissschulungsanordnung zur durchführung eines virtuellen handschweissvorganges Download PDF

Info

Publication number
WO2023242147A1
WO2023242147A1 PCT/EP2023/065706 EP2023065706W WO2023242147A1 WO 2023242147 A1 WO2023242147 A1 WO 2023242147A1 EP 2023065706 W EP2023065706 W EP 2023065706W WO 2023242147 A1 WO2023242147 A1 WO 2023242147A1
Authority
WO
WIPO (PCT)
Prior art keywords
training
welding
virtual
mixed reality
workpiece
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/EP2023/065706
Other languages
English (en)
French (fr)
Inventor
Almedin BECIROVIC
Nikolaus Zauner
Christian Pointner
Philipp Schlor
Gernot Korak
Victor Klamert
Matthias Nagl
Christoph Mehofer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fronius International GmbH
Original Assignee
Fronius International GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fronius International GmbH filed Critical Fronius International GmbH
Priority to CN202380046907.9A priority Critical patent/CN119365912A/zh
Priority to DE112023001944.4T priority patent/DE112023001944A5/de
Priority to ATA9142/2023A priority patent/AT527978B1/de
Priority to US18/874,770 priority patent/US20250371993A1/en
Publication of WO2023242147A1 publication Critical patent/WO2023242147A1/de
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/24—Use of tools
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes

Definitions

  • the present invention relates to a welding training arrangement and a method for carrying out a virtual manual welding process.
  • Welding is the most important joining process in modern production technology and plays an essential role in a variety of modern production and manufacturing processes.
  • An example is the production of modern means of transport, such as motor vehicles, railways or aircraft, which is unthinkable without modern and high-precision welding technology.
  • robot welding at least partially automated welding processes (“robot welding”) are increasingly being used in welding technology, which can save time and resources in many cases.
  • manual welding a hand welder carries out the required welding work by manually moving a hand welding torch.
  • manual welding is divided into different manual welding processes depending on the type of materials used, such as E-manual welding (electrode welding), TIG welding (tungsten inert gas welding), MIG welding (metal inert gas welding) or MAG -Welding (metal active gas welding).
  • Welding training arrangements and the so-called “virtual welding” that can be carried out with them make it possible to realistically simulate complex welding tasks and difficult situations safely and cost-effectively and to practice them again and again.
  • a welding training arrangement for virtual welding trainee manual welders can learn and train basic welding skills/hand skills on common training workpieces.
  • virtual welding can save expensive consumables such as training components made of different metals/steels/alloys (and their sometimes complex preparation), wire and/or shielding gas and energy.
  • the basic components of a welding training arrangement are a training handheld welding torch, a training workpiece, a welding simulator and an electronic display (electronic screen).
  • the training hand welding torch is moved along the training workpiece.
  • the welding simulator determines a so-called virtual weld seam, which is shown on the display.
  • the specific design in particular regarding the recording of the movement data of the training hand welding torch or the representation of the virtual weld seam on the display, can be done in different ways. The state of the art offers a variety of approaches to this.
  • US 2020/0265750 A1 describes a welding training system in which markers are attached to the training workpiece and the training hand welding torch.
  • markers are recorded using RGB cameras, i.e. optical cameras.
  • EP 2863376 A1 describes approaches to simulating different welding processes (MIG, MAG), with the results of these simulations being shown on the display of video glasses as part of an augmented reality (“AR”) approach. This will be the case The outside world is captured by one or more cameras and a so-called mixed reality (real and virtual images are superimposed on each other) is displayed to the hand welder.
  • MIG welding processes
  • AR augmented reality
  • WO 2020/167812 A1 describes a welding helmet that can be used in virtual manual welding processes.
  • the welding helmet includes an electronic screen, i.e. an electronic display, and several cameras (RGB (optical), thermal image, infrared).
  • RGB optical
  • WO 2020/167812 A1 also teaches markings that are attached to the training workpiece and the training hand welding torch. The markings are captured by an optical camera for object recognition and object tracking.
  • the US 2021/0158724 A1 describes camera sensors, each with several adjustable lenses, filters and other optical components for carrying out a welding training simulation.
  • An analysis of the sensor data recorded with the camera sensors which can describe, among other things, markers for identifying objects, is disclosed in order to determine the position, orientation and movement of the training workpieces and the training hand welding torches from these sensor data.
  • Welding training arrangements known from the prior art preferably use RGB cameras (optical cameras) for object recognition and object tracking, and usually the same RGB camera that is also used to record the field of view (partly also referred to as the field of view) of the manual welder.
  • RGB cameras optical cameras
  • RGB camera optical cameras
  • This circumstance results in several disadvantages.
  • only components that are in the field of view of the manual welder i.e. in the field of view of the RGB camera
  • the tracking area is therefore limited by the gaze of the manual welder. This can cause problems if the manual welder wants to view a training workpiece from different angles.
  • a manual welder In state-of-the-art welding training arrangements, a manual welder must also maintain a minimum distance from the given training workpieces during virtual welding. In the case of tracking carried out with RGB cameras, maintaining a minimum distance is necessary in order to always be able to capture a sufficiently large area of the objects to be tracked. This requirement can sometimes significantly limit the applicability of a welding training arrangement.
  • RGB camera which simultaneously tracks objects and captures the field of view of a manual welder, cannot be expanded arbitrarily. Attempts to this end, for example using wide-angle lenses such as Fisheye lenses have shown that the use of such lenses can cause dizziness and discomfort in manual welders. Tracking based on RGB cameras is also often dependent on the given lighting conditions, which can sometimes result in significant malfunctions when lighting conditions change.
  • the independent claims describe a welding training arrangement and a method for carrying out a virtual welding process on the welding training arrangement according to the invention.
  • the welding training arrangement has a training workpiece and a movable training hand welding torch.
  • a first plurality of IR-reflecting reference markers are provided on the training workpiece, which are arranged on the training workpiece in a first reference pattern that individualizes the training workpiece.
  • a second plurality of IR-reflecting reference markers are provided, which are arranged in a second reference pattern on the training hand welding torch that individualizes the training hand welding torch.
  • the welding training arrangement according to the invention has a mixed reality headset on which a mixed reality display, an RGB camera and an IR camera are provided.
  • the IR camera has a spatial IR field of view for capturing IR images of IR-reflecting reference markers located in the IR field of view, which is larger than the RGB field of view of the RGB camera.
  • object recognition and object tracking can be improved compared to welding training arrangements known from the prior art.
  • a hand welder can move much closer to a training workpiece, can perform significantly faster movements with the training hand welding torch, and precise and accurate object detection and object tracking, especially of the training hand welding torch, can still be guaranteed even in such scenarios.
  • the welding training arrangement according to the invention makes it possible to track, i.e. object recognition and object tracking, in particular of training workpieces and training hand-held welding torches, even in dynamic phases in which, for example Training hand welding torch is moved quickly, ensuring precision and reliability.
  • the welding training arrangement has a simulation unit which is designed to produce a geometry and/or a shape and/or a type of the training manual welding torch from the IR images of the first and second reference patterns captured by the IR camera, such as MIG hand welding torches or MAG hand welding torches or TIG hand welding torches or E hand welding torches, as well as the training workpiece and a time course of the spatial positions of the training hand welding torch and the training workpiece relative to the headset reference point.
  • a simulation unit which is designed to produce a geometry and/or a shape and/or a type of the training manual welding torch from the IR images of the first and second reference patterns captured by the IR camera, such as MIG hand welding torches or MAG hand welding torches or TIG hand welding torches or E hand welding torches, as well as the training workpiece and a time course of the spatial positions of the training hand welding torch and the training workpiece relative to the headset reference point.
  • the simulation unit allows a time course of the position of a virtual welding electrode to be determined and, from this, a virtual weld seam on the training workpiece, with which mixed reality images of the virtual manual welding process are generated, which are ultimately also arranged on a mixed reality headset Mixed reality display.
  • welding electrodes are used, the type and design of which are known to depend on the type of welding process.
  • a welding electrode for which wire or strip electrodes that melt under protective gas or melting rod electrodes or non-melting welding electrodes (e.g. tungsten-based welding electrodes) can be provided.
  • the welding electrode required for a simulated welding process for example a wire or strip electrode that melts under protective gas or a melting rod electrode or a non-melting welding electrode, is taken into account in the simulation in the form of a virtual welding electrode.
  • the type of virtual welding electrode can be identified with the type of training manual welding torch, with the temporal position progression and also the spatial position of the virtual welding electrode advantageously being able to be determined from the determined time course of the spatial position of the training hand welding torch.
  • the RGB camera is used as a so-called “live view” of the environment; tracking is implemented via the IR camera. What is crucial here is that the IR camera can be equipped with a larger field of view, which has the advantage of a much larger trackable area, but avoids the disadvantages mentioned for a manual welder.
  • An important advantage of the welding training arrangement according to the invention is that, due to the use of the IR camera for tracking, moving components in particular can be equipped with smaller, passive and therefore more cost-effective markers compared to the prior art and can still be identified reliably and precisely.
  • the movable components to be tracked also sometimes require significantly less hardware compared to components known from the prior art, especially since the markers are passive and therefore do not require a power supply.
  • FIGS. 1 to 12 show advantageous embodiments of the invention by way of example, schematically and non-restrictively. This shows
  • FIG. 2 is a schematic block diagram of a simulation model in a simulation unit according to the invention
  • FIG. 5 shows a mixed reality headset in front view and an adapter for fixing an IR camera at a specified spatial distance from an RGB camera on the mixed reality headset
  • FIG. 6 shows the fields of view of an RGB camera and an IR camera arranged according to the invention on a mixed reality headset; 7 training hand welding torches designed according to the invention with IR-reflecting reference markers,
  • Fig. 8 design options for a first reference pattern for individualizing a training workpiece
  • FIG. 9 shows an embodiment of a first reference pattern for individualizing a training workpiece with a trough for arranging an IR-reflecting reference marker in a side view
  • 11a, 11b, 11c show the activation of a menu or interaction menu on the mixed reality display of a mixed reality headset according to the invention when a mixed reality target object is detected
  • Fig.12a, Fig.12b a weld seam and a weld root.
  • Fig. 1 shows a possible embodiment of a welding training arrangement 1 according to the invention for carrying out a virtual manual welding process.
  • the basic components of the welding training arrangement 1 are a training workpiece 4, a manually movable training hand welding torch 6, a mixed reality headset 800 and a simulation unit 9 with a schematically shown torch holder 17.
  • mixed reality or “mixed reality” is understood to mean the mixing of the natural perception of a manual welder 2 with an artificially generated (“computer-generated”) perception.
  • the natural perception of a hand welder 2 is recorded within the scope of the present invention using an RGB camera 803 and represented by RGB images generated by the RGB camera 803.
  • the simulation unit 9 functions as a CPU or computing unit of the welding training arrangement 1 shown. How a CPU and thus a simulation unit 9 of a welding training arrangement 1 can be constructed can be found in several prior art documents. Specifically, for example, EP 2 863 376 A1, US 202/0265750 A1 or WO 2020/167812 A1 provide relevant explanations.
  • a simulation unit 9 can also be integrated into a real welding machine (also referred to in specialist circles as a “welding power source” or “power source”), to which a training manual welding torch 6 can be connected like a conventional, real welding torch.
  • a real welding machine also referred to in specialist circles as a “welding power source” or “power source”
  • a training manual welding torch 6 can be connected like a conventional, real welding torch.
  • those provided on a real welding machine or on its housing can be used Interfaces, e.g. connections for connecting a real hand welding torch, can also be used unchanged when carrying out a virtual welding process. If a virtual welding process is carried out using a simulation unit 9 integrated in a real welding machine, the power supply from the real welding machine, for example to the training manual welding torch 6, is deactivated.
  • a training hand welding torch 6 can in particular be a real hand welding torch, which can be adapted to carry out virtual hand welding processes, but can still also be suitable for carrying out real welding processes, such as carrying out a real TIG welding process .
  • a workpiece holder 5 is provided in the embodiment shown in FIG. 1, on which the training workpiece 4 can be mounted.
  • a workpiece holder 5 With the help of a workpiece holder 5, a wide variety of so-called welding positions can be simulated. As is known, welding positions describe the position and/or orientation and/or arrangement of the workpieces, the torch and the welding electrode and thus the position and/or orientation and/or arrangement of a weld seam in the course of a welding process.
  • the standard DIN EN ISO 6947 or the ASME code Section IX defines a number of possible welding positions, such as PA (horizontal welding of butt and fillet welds), PB (horizontal welding of fillet welds, horizontal-vertical position) or PC (Transverse position or transverse seam, horizontal welding on a vertical wall).
  • PA horizontal welding of butt and fillet welds
  • PB horizontal welding of fillet welds, horizontal-vertical position
  • PC Transverse position or transverse seam, horizontal welding on a vertical wall
  • the training workpiece 4 can be magnetically mounted on the workpiece holder 5, or screwed or clamped or glued or cast or wedged on the workpiece holder 5 or simply placed on it. Furthermore, assembly of the workpiece 4 can generally take place in a form-fitting, non-positive and/or material-locking manner.
  • the training workpiece 4 can be equipped with at least one metallic component and the workpiece holder 5 can be equipped with at least one magnet in order to provide a magnetic holding force. Realizations with magnets in the training workpiece 4 and/or metallic components in the workpiece holder 5 are also conceivable.
  • the room in which, in a welding training arrangement 1, the training workpiece 4, and if necessary the workpiece holder 5, and if necessary the Training manual welding torch 6 and the torch holder 17 are arranged, is often referred to as 3D welding environment 3.
  • a workpiece holder 5 does not represent a mandatory part of a welding training arrangement 1 according to the invention.
  • a training workpiece 4 can also be placed freely and loosely. The functionality of the welding training arrangement 1 according to the invention is not influenced by the type of arrangement of the training workpiece 4.
  • the use of only a single training workpiece 4 is purely an example. Likewise, a further, second training workpiece 4 or a plurality of further training workpieces 4 can be provided.
  • the training workpieces 4 can have the same shape or different shapes.
  • the use of several training workpieces 4 can be provided in cases in which welding processes are recreated on the welding training arrangement 1 that aim to connect several workpieces. The basic functionality of the welding training arrangement 1 remains unchanged, which is why only one training workpiece 4 is assumed for the description of the invention without restricting the generality.
  • the principle for training hand welders 2, implemented using the basic components training workpiece 4, training hand welding torch 6, mixed reality headset 800 and simulation unit 9, provides for a virtual weld seam 13 on the training workpiece 4 by manually moving the training hand welding torch 6 to generate and display the virtual weld seam 13 together with the training workpiece 4 to the manual welder 2.
  • the virtual weld seam 13 does not actually exist, but is determined by simulating a real welding process by specifying movement data from the hand welding torch 6 and the training workpiece 4.
  • the virtual weld seam 13 is displayed as part of a sequence of mixed reality images 12 of the virtual manual welding process on a mixed reality display 801, which is arranged on the mixed reality headset 800.
  • Possible embodiment variants of a mixed reality display 801 are well known from the prior art; liquid crystal displays or liquid crystal screens can preferably be used for this.
  • welding training arrangement 1 By using a welding training arrangement 1 as shown in FIG. 1, various welding processes, such as MIG, MAG, TIG, plasma or electric manual welding processes, can be learned without any safety risk.
  • welding gloves and/or protective equipment can also be worn by the hand welder 2 during the virtual welding, which also ensures a high degree of correspondence between real ones with regard to the clothing to be worn by the hand welder 2 and virtual welding is achieved.
  • an RGB camera 803 is provided in the welding training arrangement 1 (FIG. 4), which optically records the components used in virtual manual welding, in particular the training manual welding torch 6 and the training workpiece 4 , provided they are in the field of view of the RGB camera 803.
  • the RGB camera 803 can be designed as a conventional digital camera, i.e. as an optical instrument or photographic apparatus for recording moving images.
  • the RGB camera 803 can be equipped with suitable or required lenses, apertures, optical filters, etc. for this purpose.
  • RGB camera 803 used in the context of the present invention that it is able to detect “visible light”, that is, light from the visible part of the electromagnetic spectrum.
  • visible light includes electromagnetic waves with wavelengths ranging from 400 nm to 780 nm.
  • the RGB camera 803 is arranged on the mixed reality headset 800 and allows RGB images of objects located in the field of view of the RGB camera 803, hereinafter referred to as “RGB field of view” 809, to be captured.
  • the term “field of view” is understood to mean that area in the image angle of an optical device within which objects or events or changes can be perceived by the optical device and thus recorded by the RGB camera 803.
  • the terms “field of view” and “angle of view” are well known to those skilled in the field of camera technology.
  • At least part of the training workpiece 4 and at least part of the training hand welding torch 6 are in the RGB field of view 809 of the RGB camera at least at one point in time during the manual welding process 803 are located.
  • at least three, preferably at least four or particularly preferably at least five IR reference markers 71, 73 are located in the RGB field of view 809 of the RGB camera 803.
  • this condition does not rule out that the Manual welder 2 briefly turns away from the training workpiece 4 while carrying out the virtual manual welding process and, for example, temporarily turns his gaze to the floor.
  • the manual welder 2 works facing the training workpiece 4, which is why the above requirement is consistently met in the usual cases.
  • the simulation unit 9 of the welding training arrangement 1 shown in FIG. 1 is designed to determine a geometry and/or a shape and/or a type of the training hand-held welding torch 6 and the training workpiece 4 and in particular a time course of the spatial positions of the training hand-held welding torch 6 and the training workpiece 4 to be determined while carrying out the virtual welding.
  • a first plurality of infrared-reflecting reference markers 71 hereinafter “IR- “reflective” reference markers 71, as well as a second plurality of IR-reflecting reference markers 73 are provided.
  • the IR-reflecting reference markers 71, 73 according to the invention can sometimes be made significantly smaller compared to approaches known from the prior art, with preferred diameters or largest dimensions or largest distances between two points on the edge of a reference marker 71, 73 in the range of just a few millimeters.
  • infrared is understood to mean infrared radiation, also known as IR radiation, which is known to correspond to electromagnetic radiation in the spectral range between visible light and longer-wave terahertz radiation. Specifically, this refers to light with a wavelength between 780 nm and 1 mm, which corresponds to a frequency range of 300 GHz to 400 THz or a wave number range of 10 cm -1 to 12,800 cm -1 .
  • the IR-reflecting reference markers in question are characterized in that they reflect preferably more than 70% or very preferably more than 80% or particularly preferably more than 90% or most preferably more than 99% of IR radiation striking them.
  • the first plurality of IR-reflecting reference markers 71 are arranged in a first reference pattern 72 on the training workpiece 4 that individualizes the training workpiece 4.
  • the second plurality of IR-reflecting reference markers 73 are arranged in a second reference pattern 74 on the training hand-held welding torch 6 that individualizes the training hand-held welding torch 6.
  • a “reference pattern” is a specific, geometric arrangement of a plurality of IR-reflecting reference markers. “Individualizing” means that a Reference pattern is unique and therefore one reference pattern can be distinguished from another reference pattern. The reference pattern is preferably individualizing from different viewing directions, with only a part of the reference pattern being visible from different viewing directions.
  • the present invention provides an IR camera 804 specifically intended for this purpose.
  • An IR camera 804 is understood to mean an optical device similar to a conventional camera, which is capable of receiving and processing infrared radiation and further reproducing the IR radiation as an image. Light in a spectral range other than the IR range is not recorded by the IR camera 804.
  • the IR camera 804 can also be equipped with appropriate optical filters.
  • the IR camera 804 is arranged on the mixed reality headset 800 at a fixed spatial distance from the RGB camera 803 (FIG. 4). Like the RGB camera 803, the IR camera 804 has its own field of view, which is referred to below as the “IR field of view” 810.
  • the IR camera 804 allows IR images of IR-reflecting reference markers 71, 73 located in the IR field of view 810 to be captured.
  • the detection of the IR-reflecting reference markers 71, 73 is accompanied by the detection of at least parts of the reference patterns 72, 74 that individualize the training workpiece 4 and the training hand welding torch 6.
  • An essential property of the IR camera 804 used according to the invention is that its IR field of view 810 is larger than the RGB field of view 809 of the RGB camera 803, preferably larger in at least one solid angle. According to the invention, the IR field of view 810 and the RGB field of view 809 overlap.
  • a database or a database entry or a list can be stored in the simulation unit 9, which contains different reference patterns 72, 74 with descriptions of training workpieces 4 or training Hand welding torches 6 linked. If a reference pattern 72, 74 or a part of the reference pattern 72, 74, which allows a conclusion to be drawn about the entire reference pattern 72, 74, is now captured by the IR camera 804, the underlying training workpiece 4 can be identified by comparing it with the intended database entries and its properties are identified.
  • the database entries can contain a description of the geometry, dimensions, material, etc. of the training workpiece 4. The same applies to training hand welding torches 6, whose identification can also be done by comparing recorded reference patterns 74 with corresponding database entries.
  • the acquisition of IR images and RGB images takes place continuously at discrete times k. “Continuous” is to be understood here as a repeated recording of IR images and RGB images at the discrete times mentioned. It should be noted that the RGB camera 803 and the IR camera 804 can also be clocked differently within the scope of the invention and can therefore have different sampling times.
  • continuously captured IR images lead to continuously captured parts of the first and second reference patterns 72, 74, from which a continuous description of the spatial positions of the training workpiece 4 and the training hand welding torch 6 can be derived in the simulation unit 9.
  • the captured RGB images and the captured IR images are fed to the simulation unit 9.
  • the RGB camera 803 and the IR camera 804 can be connected to the simulation unit 9, for example by cabling, in order to transmit the recorded image data.
  • a wireless connection of the RGB camera 803 and the IR camera 804 with the simulation unit 9 is also conceivable.
  • Known concepts such as Bluetooth, WLAN or ZigBee can be used to wirelessly connect the RGB camera 803 and the IR camera 804 to the simulation unit 9.
  • the relative movement between the training hand welding torch 6 and the training workpiece 4 required for the implementation of the virtual welding process can ultimately be determined in a known manner.
  • their acceleration and speed can also be determined from the position profiles of the training workpiece 4 and training hand welding torch 6, which can also be taken into account in the determination of the virtual weld seam 13.
  • the determination of the spatial positions and the resulting position progressions of the training hand welding torch 6 and the training workpiece 4 are carried out relative to a headset reference point 802, which is set as a fixed point on the mixed reality headset 800.
  • the headset reference point 802 moves with the mixed reality headset 800, which allows great flexibility in the position description. The specific design of this position description based on the headset reference point 802 will be discussed in detail later.
  • spatial positions and the resulting position progressions of the training hand welding torch 6 or the training workpiece 4 can not only be determined, but also evaluated.
  • instructions can be issued on the mixed reality display 801 or information can be issued on the mixed reality display 801, for example that the manual welder 2 has positioned the training workpiece 4 incorrectly, which can then be followed by instructions or instructions for correcting the Positioning can be given.
  • geometric reference points on the training workpiece 4 and on the training hand-held welding torch 6 can first be determined.
  • the geometric reference points on the training workpiece 4 and on the training hand-held welding torch 6 can be determined, for example, from the reference patterns 72, 74 attached to the training workpiece 4 and on the training hand-held welding torch 6.
  • three-dimensional position vectors can be determined which describe the relative positions of the geometric reference points on the training workpiece 4 and on the training hand welding torch 6 in relation to the predetermined geometric headset reference point 802. These position vectors can be determined from the image data captured by the IR camera 804.
  • a time course of image data from the IR camera 804 can determine a time course of these position vectors, from which the position courses of the training workpiece 4 and the training hand welding torch 6 can be derived as a direct consequence.
  • Position progressions can therefore be understood as a temporal sequence of position vectors which describe the relative positions of the training workpiece 4 and the training hand welding torch 6 in relation to the headset reference point 802.
  • the orientations of the training workpiece 4 and the training hand welding torch 6 relative to the headset reference point 802 can preferably also be determined from the reference patterns 72, 74.
  • further sensors can also be provided which provide further sensor data that can be used for this purpose . These sensors, with the help of which, for example, the welding positions mentioned at the beginning (PA, PB, ...) can be determined, will be discussed separately later.
  • the temporal progressions of the corresponding spatial positions are determined.
  • the virtual weld seam 13 is preferably determined by simulating a real hand welding process, under the boundary condition that a real hand welding torch, which is preferably equipped with a corresponding welding electrode, corresponds to the determined time course of the position of the training hand welding torch 6 relative to the training workpiece 4 is moved, with a corresponding welding electrode being represented in the simulation by a virtual welding electrode.
  • a variable length of the virtual welding electrode can also be taken into account.
  • a suitable welding simulation model 91 can be implemented on the simulation unit 9, which creates a virtual one from the position profiles of the training manual welding torch 6 and the training workpiece 4 and, associated with this, from the temporal position profile of a virtual welding electrode, taking into account at least one predetermined training welding parameter ps Weld seam 13 determined.
  • the state of the art offers a number of approaches, for example in RU 2694147 C1, WO 2020/056388 A1 or US 2015/0352794 A1.
  • the simulation unit 9 is designed as a computer or computer-based hardware.
  • a simulation model 91 can be implemented as software that runs on the simulation unit 9. How a simulation model 91 can be constructed is shown schematically in FIG. 2 using a block diagram.
  • the simulation model 91 is arranged in the simulation unit 9 and receives image data BRGB from the RGB camera 803, image data BIR from the IR camera 804 and training welding parameters ps as input signals. From this, the simulation model 91 determines the virtual weld seam 13. According to the invention, the virtual weld seam 13 is subsequently displayed on the mixed reality display 801 of the mixed reality headset 800.
  • the simulation model 91 can advantageously be designed to also take into account the introduction of additional materials that is common in welding technology.
  • additional sub-simulation models can be used, which model the introduction of additional materials.
  • the at least one predetermined training welding parameter ps can correspond to a welding current strength or a welding voltage or a welding speed or a workpiece geometry or a waiting time or a preheating temperature or a wire feed speed or an arc length or a type of welding or a protective gas setting, in particular a flow rate of a protective gas.
  • another choice for the training welding parameter ps is also conceivable within the scope of the present invention.
  • not just a single training welding parameter ps is specified, but a large number of training welding parameters ps, since welding is a complex physical process in which a large number of variables usually have to be specified.
  • the training welding parameters ps mentioned can also be changed in an advantageous manner during a virtual manual welding process, for which purpose a suitable, preferably haptic, control element can be provided on the simulation unit 9, for example a rotary potentiometer.
  • a simulated protective gas can be controlled as a training welding parameter ps using a haptic control element, preferably exclusively, and other training welding parameters ps can be set elsewhere, for example on a tablet as a portable display element 14, which will be discussed separately later is received.
  • the determined virtual weld seam 13 and the associated welding progress must be graphically prepared and displayed in a final step.
  • a mixed reality display 801 is provided on the mixed reality headset 800.
  • the graphic display pay attention to the current time cycle during the virtual manual welding process.
  • at least that part of the virtual weld seam 13 determined up to a current time cycle of the virtual manual welding process, which lies within the RGB field of view 809 present at the current time cycle, is superimposed on the RGB image present at the current time cycle in order to achieve a Mixed reality image 12 of the virtual manual welding process at the current time to generate a cycle.
  • the virtual weld seam 13 is of course superimposed in the correct spatial orientation and position relative to the training workpiece 4 in order to correctly display the virtual weld seam 13 on the training workpiece 4.
  • a mixed reality image 12 determined in accordance with the above statements is subsequently transmitted to the mixed reality display 801 provided on the mixed reality headset 800 in order to form it as part of the sequence of mixed reality images 12 of the virtual hand welding process on the mixed reality display 801.
  • the mixed reality image 12 can also be displayed on an additional display element 14. This enables a trainer, for example, to observe virtual welding.
  • the display element 14 can show the trainer a mixed reality image 12 of the virtual welding process, also from the trainer's perspective.
  • the trainer it is also possible for the trainer to give the manual welder 2 visual information or tips, which can be transferred from the display element 14 to the mixed reality display 801 in real time.
  • the described steps of determining the position profiles of the training hand welding torch 6 and the training workpiece 4, determining the virtual weld seam 13 and creating the mixed reality image 12 preferably take place in the simulation unit 9, i.e. the CPU or computing unit of the one under consideration Welding training arrangement 1.
  • Possible implementations of a simulation unit 9 include microprocessor-based hardware, for example microcontrollers and integrated circuits (ASIC, FPGA). However, other approaches to designing the simulation unit 9 are also conceivable.
  • Several simulation units 9 can also be provided, or the simulation unit 9 can be connected to a large number of other simulation units 9 via a computing cloud.
  • the simulation unit 9 can be designed to carry out further complex calculations in addition to the calculation of the virtual weld seam 13. For example, in the simulation unit 9, starting from the determined virtual weld seam 13, in subsequent mechanical simulations a virtual metallurgical structure and/or a virtual stress-induced distortion and/or a virtual grain structure of the metallurgical structure, which arises as a result of the virtual weld seam 13 in the training workpiece 4 can be set, determined and, if necessary, displayed.
  • the simulation unit 9 can also be designed to determine so-called welding quality parameters based on subsequent mechanical simulations, which describe a quality and/or a quality of the virtual weld seam 13.
  • Welding quality parameters can describe a seam thickness, a vibration resistance, a weld seam transition or an edge offset, which is described, for example, in the DIN EN ISO 581 standard.
  • it can be provided to display determined welding quality parameters on the mixed reality display 801 alongside the virtual manual welding process.
  • the simulation unit 9 can also be designed to superimpose a predetermined virtual ideal weld seam 131 (shown in dashed lines in Fig. 1 and Fig. 11a-c) on the existing RGB images, which is to be generated by the virtual manual welding process.
  • the mixed reality display 801 can of course be designed to accommodate the Virtual ideal weld seam 131 superimposed RGB images to display.
  • the simulation unit 9 can also be designed to determine one or more seam quality parameters, which can, for example, describe a deviation between the determined virtual weld seam 13 and the predetermined ideal weld seam 131. In this way, an objective and comprehensible assessment of the virtual weld seam 13 created by a manual welder is made possible.
  • a deviation threshold can be specified in an advantageous manner. If there is a deviation between the determined virtual weld seam 13 and the predetermined ideal weld seam 131, which exceeds a predetermined deviation threshold, the simulation unit 9 or another element of the welding training arrangement 1 can be designed to detect the manual welder 2 using acoustic and/or optical signals to draw attention to this deviation and thus to the associated welding errors. These acoustic and/or optical signals are preferably output via the mixed reality headset 800, for which purpose the mixed reality headset 800 can be equipped with suitable speakers.
  • the simulation unit 9 can be designed to enable data backup and/or recording of welds, which makes it possible for a learning manual welder 2 to view a virtual manual welding process again, analyze errors and document learning progress.
  • the simulation unit 9 can also be arranged on the mixed reality headset 800.
  • the simulation unit 9 can therefore be part of the mixed reality headset 800 or be an integral, i.e. inextricably connected, part of the mixed reality headset 800.
  • a free-standing simulation unit 9 can be dispensed with.
  • a virtual manual welding process usually does not require any preparation or follow-up of the training workpiece.
  • the welding result often depends to a significant extent on the seam preparation.
  • One of the most important requirements for good welds is the cleanliness of the weld seam edges. These must not only be bright metal, ie free of oxides and/or scale, but must also not contain any contamination from fats, oils or other organic substances that can lead to carburization and inclusions in the weld seams. Preparation and follow-up work are not required for training workpieces 4.
  • the present invention allows inadequate preparation of a manual welding process in one according to the invention
  • Simulation unit 9 must be consciously specified and taken into account in a simulation for calculating the virtual weld seam 13, in particular in order to show a trainee manual welder 2 the effects associated with inadequate preparation of a manual welding process.
  • the embodiment of the welding training arrangement 1 shown in FIG. 1 also has an optional, further display element 14.
  • the further display element 14 is not a mandatory part of the welding training arrangement 1 according to the invention, but rather serves only to display the virtual manual welding process for other people in addition to the manual welder 2, such as a trainer or other training personnel.
  • the further display element 14 can preferably be designed to be detachable from the simulation unit 9, for example in the form of a tablet, which can be removed from the simulation unit 9 and reattached to it, for example by means of a plug connection.
  • a further display element 14 is of course not a necessary prerequisite for the welding training arrangement 1 according to the invention.
  • a front end of the display element 14 can be adapted to a real welding machine modeled in the simulation or to corresponding operating units of a real welding machine modeled in the simulation, so that the operating units of various real welding machines can be simulated realistically.
  • the possibility of changing the front end in a 3D view can also be provided for the mixed reality display 801 of the mixed reality headset 800, among other things in order to adapt it to a real welding machine modeled in the simulation.
  • a front end can preferably be synchronized and coordinated with training welding parameters ps, which are taken into account in a virtual manual welding process, since not every front end necessarily has the same training welding parameters ps.
  • a virtual manual welding process via a display element 14, preferably via a portable tablet.
  • provision can also be made to control a virtual manual welding process exclusively via a portable tablet.
  • a removable display element 14 is provided, there are preferably no further display elements on the remaining part of the simulation unit 9, apart from a few status LEDs for signaling and/or displaying a state of the simulation unit 9.
  • 3 shows a welding training arrangement according to the prior art in comparison to the previously discussed welding training arrangement 1 according to the invention. It is obvious that to identify the welding torch 21 and the workpiece 22, large-area markers (e.g. so-called “image markers”, such as the Arllco markers, which are well known in the field of image processing and whose diameter is typically larger than 1 cm) are used. which are captured with an RGB camera 23.
  • Fig. 3 has the obvious disadvantage that only components that are in the RGB field of view of the RGB camera 23 can be tracked, i.e. identified and followed.
  • the so-called tracking area, indicated in Fig. 3 by the circle 24, is therefore limited by the visual guidance of the hand welder 2 and the field of view of the RGB camera.
  • RGB camera which simultaneously tracks objects and captures the field of view of a hand welder 2
  • RGB camera which simultaneously tracks objects and captures the field of view of a hand welder 2
  • wide-angle lenses such as fisheye lenses
  • Tracking based on RGB cameras is also often dependent on the given lighting conditions, which can sometimes result in significant malfunctions when lighting conditions change.
  • the problems mentioned in the prior art are solved using the welding training arrangement 1 according to the invention, with the mixed reality headset 800 in particular being decisive for solving these problems.
  • a possible embodiment of a mixed reality headset 800 according to the invention is shown in Fig.4.
  • the mixed reality headset 800 shown has a mixed reality display 801 for displaying the sequence of mixed reality images 12 of the virtual hand welding process.
  • the mixed reality display 801 on the mixed reality headset 800 is of course arranged so that a person wearing the mixed reality headset 800 can see the mixed reality display 801 in the has field of vision.
  • a predetermined geometric headset reference point 802 is assigned to the mixed reality headset 800 shown. This does not result in a static coordinate system that cannot be changed during the virtual manual welding process, which is used to describe the spatial positions of the training workpiece 4 and the training manual welding torch 6. Rather, the aforementioned headset reference point 802 can be used as the origin of a movable coordinate system, which corresponds to the movement of the hand welder 2 and thus to the movement of the mixed reality headset 800 moved along. In approaches known from the prior art, in which, for example, RGB cameras are arranged stationary on tripods in the space of the welding training arrangement, only the use of static coordinate systems is possible. Through the reference point 802 on the mixed reality headset 800, tracking, as the identification and tracking of objects such as the training hand-held welding torch, can sometimes be made significantly more dynamic and better adapted to a specific welding situation in a specific individual case.
  • a mixed reality headset 800 can also have a weight compensation element 807, as described with reference to the embodiment of FIG. 4.
  • the weight compensation element 807 acts with a torque TK that is formed and normal due to the weight or the weight distribution of the RGB camera 803 and/or the weight of the IR camera 804 and/or the weight of the mixed reality display 801 Line of sight 10 of the mixed reality headset 800 counteracts the torque T g .
  • a mixed reality headset 800 especially when it is connected to the simulation unit 9 using cables, as shown in FIG. 4, can assume a sometimes considerable total weight of the mixed reality headset 800.
  • a high weight distributed asymmetrically over the head of a manual welder 2 can lead to strain on the back and neck of the manual welder 2.
  • the weight compensation element 807 does not reduce the overall weight of the mixed reality headset 800, its distribution over the head of a manual welder 2 is made more symmetrical. In this way, the duration of training units can be extended considerably, which means that the intensity of welding training can be increased and better training effects and progress can be achieved.
  • Line of sight 10 is to be understood as a line along which the hand welder 2 would look at the training workpiece 4 if the hand welder 2 were not wearing the mixed reality headset 800.
  • the line of sight 10 can correspond to an optical axis of the RGB camera 803.
  • the RGB camera 803 has at least one RGB lens 831, the optical axis 806 of which intersects the display surface 805 facing the hand welder 2 at a display cutting angle y in a display intersection 808.
  • An optical axis 806 and the line of sight 10 can coincide, particularly in cases where the display intersection angle y is 90 degrees.
  • the mixed reality headset 800 is preferably designed such that the line of sight 10 and the optical axis 806 have a common intersection and at an angle of less than 10 degrees, or at one Angle less than 5 degrees, or spread apart at an angle less than 1 degree.
  • the weight compensation element 807 can additionally ensure a predetermined cable routing for the cables used to connect the simulation unit 9 and the mixed reality headset 800. In particular, it can be ensured in this way that the cables do not touch the manual welder 2 and therefore do not interfere with virtual manual welding.
  • the weight compensation element 807 can be changed in shape and/or its position on the mixed reality headset 800 can be adjusted.
  • the weight compensation element 807 can be designed to be foldable and/or removable.
  • loudspeakers can also be arranged in the mixed reality headset 800, which simulate the sound noise to be expected in a real hand welding process.
  • acoustics are an essential element in welding.
  • sound noises can be related to the properties of the arc, such as the power transported by the arc or the so-called angle of attack of the welding torch, which can determine the angle between the arc and the workpiece.
  • an acoustic model can be provided in the simulation unit 9 in addition to the simulation model 91 for simulating the welding process.
  • the loudspeakers can be arranged in such a way that they are able to deliver a spatial stereo sound, which can often offer the hand welder 2 a particularly realistic representation (“immersion”) of the virtual hand welding process.
  • Fig.5 shows a mixed reality headset 800 in front view and an adapter 30 for fixing an IR camera 804 in a predetermined relative position to an RGB camera 803.
  • RGB camera 803 and the IR camera 804 on the mixed - Reality Headset 800 found that these should preferably be attached in the most rigid arrangement possible to each other.
  • the RGB camera 803 and the IR camera 804 are vertically offset from one another.
  • This vertical offset must be taken into account when superimposing the virtual weld seam, which is determined from IR images, on the RGB images obtained with the RGB camera. It has been shown here that Although temporal changes in this vertical offset can be taken into account, this requires the determination of the vertical offset and the use of significantly higher computing capacities.
  • both the RGB camera 803 and the IR camera 804 each include two optical lenses.
  • the use of two optical lenses in the RGB camera 803 makes it possible to capture so-called stereoscopic images or images of the RGB field of view 809.
  • Stereoscopic images are known to mean the reproduction of images with an impression of spatial depth.
  • Stereoscopic images can be used to provide the manual welder 2 with a stereoscopic representation of the virtual manual welding process.
  • two stereoscopically offset mixed reality images 12 can always be displayed simultaneously in real time on the mixed reality display 801 of the mixed reality headset 800.
  • sensors can be provided on the RGB camera 803 and/or on the mixed reality headset 800 in order to ensure the previously mentioned orientation of the training workpiece 4, the training hand-held welding torch 6, and the mixed reality target object T in the 3D welding environment 3 or generally in three-dimensional space.
  • These sensors can be, for example, gyroscopes, acceleration sensors and/or proximity sensors.
  • the sensor data recorded by such sensors can be forwarded in an advantageous manner to the simulation unit 9, in which the orientation mentioned in three-dimensional space can be determined from the transmitted sensor data.
  • the adapter 30 thus serves to advantageously ensure a vertical offset between the RGB camera 803 and the IR camera 804 that is always (as possible) constant.
  • the embodiment of the adapter 30 shown in FIG. 5 has a rigid mounting frame 33 on which two mounting elements 31, 32 are arranged in a defined spatial position.
  • the RGB camera 803 is fixed using the first mounting element 31 and the IR camera 804 is fixed using the second mounting element 32.
  • the IR field of view 810 is designed to be significantly larger than the RGB field of view 809.
  • the invention is based on IR images captured using the IR camera 804
  • the fields of view 809, 810 of the Karners i.e. the RGB field of view 809 and the IR field of view 810, overlap at least to some extent. “Overlap” is to be understood here as one at least partially mutually covering the RGB field of view and the IR field of view.
  • the IR field of view 810 completely encloses the RGB field of view 809, so that the RGB field of view 809 is completely contained in the IR field of view 810.
  • this does not represent a mandatory requirement within the scope of the invention.
  • the reference pattern 72 intended for individualizing the training workpiece 4 is located outside the RGB field of view 809 of the RGB camera 803. In this case, there would be no identification and tracking, i.e. no tracking of the training workpiece, based solely on RGB images. Workpiece 4 possible. Thanks to the larger IR field of view, the reference pattern 72 can still be captured and a virtual manual welding process can also be carried out in this case without any problems.
  • IR-reflecting reference markers that are essential for the present invention are discussed in more detail with reference to FIG. 7. 7 show various versions of a training hand welding torch 6 but also of training additional materials 7, as they can be used to simulate electrode hand welding processes and TIG welding processes. The following statements are also valid for reference samples 72 for training workpieces 4.
  • the individualizing reference patterns 72, 74 are designed according to the invention in such a way that the detection of only a part of the respective reference pattern 72, 74 is sufficient to identify the object to which a corresponding reference pattern 72, 74 is attached.
  • the type of virtual welding electrode can preferably be identified with the type of training hand welding torch 6.
  • various checks can also be provided, which are preferably carried out in the Simulation unit 9 can be made.
  • a check of connections of a training hand welding torch 6, such as a ground connection and/or a torch connection can be provided, or a check as to whether the correct training hand welding torch 6 is being used, which is particularly relevant in the context of MIG/MAG welding.
  • it can be checked whether a training hand welding torch 6 is connected to the correct electrical polarity, or whether a ground connection is correctly connected to a training workpiece 4, or whether a ground connection is generally connected correctly and/or whether a welding circuit is closed.
  • the mentioned checks or the results of these checks can be displayed graphically on the mixed reality display 801, whereby in particular faulty or missing connections can be pointed out, and in the event of a faulty or missing connection, information can also be provided for a suitable correction can.
  • a first distance between the IR-reflecting reference markers 71 can be provided in the first reference pattern 72 for individualizing the training workpiece 4, by which the IR-reflecting reference markers 71 are spaced from the respective neighboring IR-reflecting reference markers 71, and in the second reference pattern 72 for individualizing the training workpiece 4 a second distance, which is different from the first distance.
  • the IR-reflecting reference markers 71, 73 can also form fractals that are different from one another. Fractals that differ from one another can be created, for example, based on different Mandelbrot sets. However, reference patterns can also be generated using random generators or determined empirically as part of the design of the welding training arrangement 1.
  • IR-reflecting reference markers An important advantage of the use of IR-reflecting reference markers according to the invention is that significantly smaller reference markers can be used compared to the prior art.
  • the diameters of the IR-reflecting reference markers 71, 73 can be selected in a range between 0.1 mm and 5 mm or in a range between 0.1 mm and 3 mm or in a range between 0.1 mm and 1 mm.
  • the diameters of the IR-reflecting reference markers 71, 73 can also be used to distinguish between different reference patterns 72, 74.
  • IR-reflecting reference markers 71 with a first diameter can be used, for example of 0.5 mm or 1.5 mm or 2.5 mm or 3.5 mm
  • IR-reflecting reference markers 74 with a second diameter are used, for example of 0.1 mm or 1.1 mm or 2.1 mm or 3.1 mm.
  • the reflection properties of the reference markers and the surfaces of the training workpiece 4 and the training hand welding torch 6 can also be designed inversely to the previously described embodiments. Accordingly, the surfaces of the training workpiece 4 and the training hand welding torch 6 can be designed to be more reflective than the reference markers. In this way, too, reference patterns detectable by the IR camera can be created on the training workpiece 4 and the training hand welding torch 6.
  • the training hand welding torch 6 can be designed as a real hand welding torch, for example as a real MIG hand welding torch or as a real MAG hand welding torch or real TIG hand welding torch or real E hand welding torch.
  • a real hand welding torch from a real welding arrangement for real welding, to equip it with an IR-reflecting reference marker 73 with a reference pattern 74 that individualizes the hand welding torch, and thus to use the real hand welding torch when carrying out the virtual hand welding process to be used as a training hand welding torch 6.
  • operating elements S1, S2 such as switches, buttons, slide controls, etc.
  • control elements S1, S2 are used to control a welding process, for example to start it, for example to ignite an arc, or to vary a welding current intensity, or to change a wire feed speed.
  • a training Hand welding torch 6 have the same controls S1, S2 and, for example, pass on control signals generated by these controls S1, S2 to the simulation unit 9 using a cable connection.
  • the effect of these control signals can subsequently be taken into account in the simulation of the manual welding process, i.e. the simulated welding can be started or interrupted, a simulated wire feed can be accelerated or braked, or a simulated welding current can be increased or reduced.
  • FIG. 8 shows several possible design options for a first reference pattern 72 for individualizing different training workpieces 4. It can be seen that the IR reference markers 71 can also be attached to the end faces and side surfaces of the training workpieces 4 due to their small size. The statements made in FIG. 7 regarding the design of the IR-reflecting reference markers 71 also apply without restriction to the IR-reflecting reference markers 71 on training workpieces 4 as in FIG. 8.
  • the IR-reflecting reference markers 71, 73 can, for example, be applied in the form of an adhesive film to the surface of the training workpiece 4 or can also be painted, printed, embossed onto the surface of the training workpiece 4 or can also be applied by a coating process. Furthermore, it would also be possible to provide such IR-reflecting reference markers 71, 73 on a surface of a training workpiece 4 by applying energy to the surface, for example in the form of an engraving laser.
  • FIG. 9 shows a further possible embodiment of a first reference pattern 72 for individualizing a training workpiece 4.
  • the troughs 16 represent depressions, i.e. depressions the surface of the training workpiece 4.
  • IR-reflecting reference markers 71 are arranged in these recesses, but due to the recess they can only be detected by the IR camera 804 from certain viewing angles.
  • Fig. 10 shows a trough 16 for arranging an IR-reflecting reference marker 71 in a detailed view. Due to the fact that IR-reflecting reference markers 71 arranged in a trough 16 can only be detected by the IR camera 804 from certain viewing angles, the spatial orientation of the training workpiece 4 can be inferred from their detection, for example. 9, both IR-reflecting reference markers 71 arranged in the troughs 16 can be seen, which suggests an orientation of the training workpiece 4 in which one long side of the training workpiece 4 faces the IR camera 804 is. However, if only one IR-reflecting reference marker 71 arranged in a trough 16 can be seen, it can be assumed that the training workpiece 4 is oriented in such a way that a transverse side faces the IR camera 804.
  • 11a to 11c further show the activation of a menu M on the mixed reality display of the mixed reality headset 800 when a mixed reality target object T is detected by the IR camera 804.
  • a third plurality of IR-reflecting reference markers 75 are arranged on the mixed reality target object T in a third reference pattern 76 that individualizes the mixed reality target object T. If at least part of the third reference pattern 76 is captured by the IR camera 804, the display of the menu M on the mixed reality display 801 is triggered.
  • the mixed reality target object T can be arranged in the desired position in the 3D welding environment 3.
  • the orientation of the menu M can be dependent on the spatial orientation of the mixed reality target object T, so that the spatial orientation of the menu M changes when the spatial orientation of the mixed reality target object T changes.
  • a further reference pattern 77 can also be arranged on a training workpiece 4, which can also display a menu M.
  • the orientation of the displayed menu M in this case can be made dependent on the spatial orientation of the training workpiece 4.
  • the menu M can thus be designed to modify the at least one training welding parameter ps, whereby the entire virtual manual welding process can ultimately be modified and changed.
  • the display of a menu M described above can also take place on a further display element 14, which is detachably connected to the simulation unit 9, for example in the form of a tablet.
  • the simulation unit 9 for example in the form of a tablet.
  • other people can also follow the menu and, if necessary, operate it.
  • it can be provided to synchronize a smartphone with the welding training arrangement 1 and to use the display of the smartphone to display the menu.
  • the training hand welding torch 6 can be equipped with a further control element which allows the displayed menu M to be operated.
  • the orientation of the training hand welding torch 6 can first be determined in the manner already described. Based on this, a menu element in menu M identified by the orientation of the training hand welding torch 6 can be determined, for example by determining a menu element which is intersected by a straight line emanating from the training hand welding torch 6, determined in the course of the identification. If a menu element is identified, it can be activated and/or deactivated by activating the additional control element.
  • the actuation/confirmation of menu elements of the menu M can be done on the one hand by aiming at a virtual straight line of the menu starting from a menu element, whereby the virtual straight line can also be displayed, and by subsequently pressing a key on a control element S1, S2, as shown in Figures 11a and 11b.
  • the method of “dwell-based pointing” (“aiming and loading”) which is established in the field of human-computer interaction, can also be used to select a menu element, and a menu element can also be selected by virtually touching it the training hand welding torch 6.
  • Fig. 12a and Fig. 12b show a so-called welding root 15 as the subject of a further advantageous embodiment of the invention.
  • Fig. 12a the underside I of a training workpiece 4 is shown
  • Fig. 12b the opposite top side II.
  • a virtual weld seam 13 can be seen, which forms a so-called weld root on the underside I 15 leads.
  • the simulation unit 9 can be designed in an advantageous manner to first determine a virtual weld root 15 generated by the virtual manual welding process on the training workpiece 4 or a virtual penetration weld or a virtual longitudinal crack or a virtual transverse crack through the weld seam 13. Based on such a determination, the simulation unit 9 can advantageously be designed to superimpose the determined virtual weld root 15 or the determined virtual penetration weld or the determined virtual longitudinal crack or the determined virtual transverse crack on the RGB image present at the current time.
  • the representation of a weld root 15 or a transverse crack or a longitudinal crack is of particular interest in cases in which the training workpiece 4 is analyzed during the virtual manual welding process, for example by interrupting the welding and viewing the training workpiece 4 from all sides, for example from the bottom, or by rotating the training workpiece 4.
  • the possibility of viewing a weld root 15 in such cases or examining whether the workpiece has been welded through sometimes makes the virtual welding process significantly more realistic.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Arc Welding In General (AREA)
  • Resistance Welding (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

Um eine im Vergleich zum Stand der Technik hinsichtlich Objekterkennung und Objektverfolgung verbesserte Schweißschulungsanordnung (1) anzugeben, wird in der erfindungsgemäßen Schweißschulungsanordnung (1) ein Mixed-Reality-Headset (800) mit einer RGB-Kamera (803) und einer IR-Kamera (804) vorgesehen, wobei das IR-Sichtfeld (810) größer ist als das RGB-Sichtfeld (809), und es werden an einem Schulungs-Werkstück (4) sowie an einem Schulungs-Handschweißbrenner (6) IR-reflektierende Referenzmarker (71, 73) in einem das Schulungs-Werkstück (4) und den Schulungs-Handschweißbrenner (6) individualisierenden Referenzmuster (72, 74) angeordnet und von der IR-Kamera (804) zur Objekterkennung und Objektverfolgung erfasst.

Description

Schweißschulungsanordnung zur Durchführung eines virtuellen Handschweißvorganges
Die gegenständliche Erfindung betrifft eine Schweißschulungsanordnung sowie ein Verfahren zur Durchführung eines virtuellen Handschweißvorganges.
Schweißen, egal ob Gasschmelzschweißen, Autogenschweißen, Lichtbogenhandschweißen, Schutzgasschweißen, Plasmaschweißen oder Laserschweißen, spielt als wichtigstes Fügeverfahren der modernen Produktionstechnik eine wesentliche Rolle in einer Vielzahl von modernen Produktions- und Herstellungsprozessen. Beispielgebend sei auf die Herstellung moderner Fortbewegungsmittel verwiesen, wie von Kraftfahrzeugen (Kfz), Eisenbahnen oder Flugzeugen, was ohne moderne und hochpräzise Schweißtechnik nicht denkbar ist. Wie generell in der modernen Produktionstechnik kommt es auch in der Schweißtechnik vermehrt zum Einsatz zumindest teilautomatisierter Schweißprozesse („Roboterschweißen“), wodurch in vielen Fällen Zeit und Ressourcen gespart werden können.
Trotz des zunehmenden Einsatzes automatisierter Schweißprozesse ist die klassische Form des Schweißens, das sogenannten „Handschweißen“, jedoch nach wie vor wichtiger Bestandteil der unterschiedlichsten technischen Prozesse. Beim Handschweißen führt ein Handschweißer die geforderten Schweißarbeiten durch manuelles Bewegen eines Handschweißbrenners durch. Bekanntermaßen wird Handschweißen je nach Art der eingesetzten Materialien in verschiedene Handschweißverfahren unterteilt, wie beispielsweise das E-Handschweißen (Elektrodenschweißen), das WIG-Schweißen (Wolfram-Inertgas-Schweißen), das MIG-Schweißen (Metall-Inertgas-Schweißen) oder das MAG-Schweißen (Metall-Aktivgas-Schweißen).
Die Motive und Gründe, um anstelle von automatisiertem Roboterschweißen auf Handschweißen zurückzugreifen, sind vielfältig. Oft sind Schweißaufgaben höchst komplex, individuell und einzigartig, sodass eine Automatisierung eines zugehörigen Schweißvorganges nicht mit vertretbarem Aufwand möglich ist. Auch bei Schweißaufgaben im Außenbereich ist eine Automatisierung vielfach ausgeschlossen. In anderen Fällen kann die Automatisierung eines Schweißvorganges aufgrund eines großen Anfangsaufwandes, der sich unter anderem durch die Programmierung einer Schweißsteuerung ergeben kann, aus wirtschaftlichen Gründen nicht vertretbar sein.
Da sich die Tätigkeiten eines Handschweißers entsprechend den obigen Ausführungen zunehmend auf komplexe und individuelle Schweißaufgaben konzentrieren, und da die stets gestellten Forderungen nach schnelleren, präziseren und günstigeren Schweißvorgängen auch auf den ausführenden Handschweißer durschlagen, ist unschwer zu erkennen, dass die Ausbildung zum Handschweißer ein fordernder und aufwendiger Prozess ist, der viel Übungszeit, umfangreiche Betreuung durch erfahrenes Fachpersonal, und insbesondere Verbrauchs- bzw. Übungsmaterial fordert.
Um den Prozess der Ausbildung zum Handschweißer zu unterstützen und zu vereinfachen, um darüber hinaus die Ausbildung für Anfänger möglichst sicher zu gestalten, und auch um Verbrauchs- bzw. Übungsmaterialien zu sparen, wurden sogenannte Schweißschulungsanordnungen zum virtuellen Schweißen entwickelt.
Schweißschulungsanordnungen und das damit ausführbare, sogenannte „virtuelle Schweißen“ erlauben es, komplexe Schweißaufgaben und schwierige Situationen gefahrlos und kostengünstig realitätsnah zu simulieren und immer wieder zu üben. Das Sicherheitsrisiko für Anfänger, das beim Schweißen insbesondere durch heiße und helle Lichtbögen hoch sein kann, verschwindet an der Schweißschulungsanordnungen bzw. am „Schweißsimulator“ zur Gänze. Mithilfe einer Schweißschulungsanordnung zum virtuellen Schweißen können auszubildende Handschweißer an gängigen Schulungs-Werkstücken grundlegende Schweißfertigkeiten/Handfertigkeiten erlernen und trainieren. Darüber hinaus lassen sich durch virtuelles Schweißen teure Verbrauchsmaterialien wie Übungsbauteile aus unterschiedlichen Metallen/Stählen/Legierungen (und deren teils aufwändige Vorbereitung), Draht und/oder Schutzgas und Energie einsparen.
Die Grundbestandteile einer Schweißschulungsanordnung sind ein Schulungs- Handschweißbrenner, ein Schulungs-Werkstück, ein Schweißsimulator und ein elektronisches Display (elektronischer Bildschirm). Im Zuge des virtuellen Schweißvorganges wird der Schulungs-Handschweißbrenner entlang des Schulungs- Werkstücks bewegt. Aus den Bewegungsdaten des Schulungs-Handschweißbrenners und aus eingestellten Schweißparametern, wie Schweißstrom, Drahtvorschubgeschwindigkeit usw., ermittelt der Schweißsimulator eine sogenannte virtuelle Schweißnaht, die am Display dargestellt wird. Die konkrete Ausgestaltung, insbesondere betreffend die Erfassung der Bewegungsdaten des Schulungs-Handschweißbrenners oder die Darstellung der virtuellen Schweißnaht am Display, kann auf unterschiedliche Weise erfolgen. Der Stand der Technik bietet hierzu eine Vielzahl von Ansätzen.
So beschreibt die US 2020/0265750 A1 ein Schweißtrainingssystem, bei welchem am Schulungs-Werkstück und am Schulungs-Handschweißbrenner Marker angebracht sind. Zum Zweck der Objekterkennung und Objektverfolgung, also der Erfassung der Bewegungsdaten, werden die Marker mithilfe von RGB-Kameras, also optischen Kameras, erfasst.
Die EP 2863376 A1 beschreibt Ansätze zur Simulation unterschiedlicher Schweißverfahren (MIG, MAG), wobei die Ergebnisse dieser Simulationen im Rahmen eines Augmented- Reality-Ansatzes („AR“) auf dem Display einer Videobrille dargestellt werden. Dazu wird die Außenwelt von einer oder mehreren Kameras erfasst, und dem Handschweißer eine sogenannte gemischte Realität (reale und virtuelle Bilder werden einander überlagert) angezeigt.
Die WO 2020/167812 A1 beschreibt einen Schweißhelm, der bei virtuellen Handschweißvorgängen eingesetzt werden kann. Der Schweißhelm umfasst einen elektronischen Bildschirm, also ein elektronisches Display, und mehrere Kameras (RGB (optisch), Wärmebild, Infrarot). Die WO 2020/167812 A1 lehrt überdies Markierungen, die am Schulungs-Werkstück und dem Schulungs-Handschweißbrenner angebracht sind. Die Markierungen werden durch eine optische Kamera Zweck der Objekterkennung und Objektverfolgung erfasst.
Die US 2021/0158724 A1 beschreibt Kamerasensoren mit jeweils mehreren einstellbaren Linsen, Filtern und anderen optischen Komponenten zur Durchführung einer Schweißtrainingssimulation. Es wird eine Analyse der mit den Kamerasensoren erfassten Sensordaten, die unter anderem Marker zur Identifikation von Objekten beschreiben können, offenbart, um aus diesen Sensordaten Position, Orientierung und Bewegung der Schulungs- Werkstücke und der Schulungs-Handschweißbrenner zu bestimmen.
Aus dem Stand der Technik bekannte Schweißschulungsanordnungen, insbesondere wie die in den zitierten Schriften offenbarten Schweißschulungsanordnungen, verwenden zur Objekterkennung und Objektverfolgung bevorzugt RGB-Kameras (optische Kameras), und dabei üblicherweise die gleiche RGB-Kamera, die auch zur Erfassung des Sichtfeldes (teilweise auch als Blickfeld bezeichnet) des Handschweißers herangezogen wird. Aus diesem Umstand ergeben sich mehrere Nachteile. Einerseits können nur Komponenten getrackt werden, also identifiziert und verfolgt werden, die sich im Sichtfeld des Handschweißers (d.h. im Sichtfeld der RGB-Kamera) befinden. Der Trackingbereich ist damit durch die Blickführung des Handschweißers eingeschränkt. Dadurch kann es zu Problemen kommen, wenn der Handschweißer eine Betrachtung eines Schulungswerkstücks aus unterschiedlichen Blickwinkeln vornehmen möchte.
Bei Schweißschulungsanordnungen nach Stand der Technik muss ein Handschweißer während des virtuellen Schweißens überdies einen Mindestabstand zu den gegebenen Schulungswerkstücken einhalten. Die Einhaltung eines Mindestabstandes ist im Fall eines mit RGB-Kameras durchgeführten Trackings erforderlich, um stets einen ausreichend großen Bereich der zu trackenden Objekte erfassen zu können. Diese Vorgabe kann die Anwendbarkeit einer Schweißschulungsanordnung mitunter merklich einschränken.
Auch kann das Sichtfeld einer RGB-Kamera, welche gleichzeitig Objekte trackt und das Sichtfeld eines Handschweißers erfasst, nicht beliebig ausgedehnt werden. Dahingehende Versuche, beispielsweise unter Verwendung von Weitwinkelobjektiven wie Fischaugenobjektiven, haben gezeigt, dass die Verwendung derartiger Objektive zu Schwindel und Unwohlsein beim Handschweißer führen kann. Auch ist das auf RGB- Kameras basierende Tracking vielfach von den gegebenen Lichtverhältnissen abhängig, wodurch sich bei geänderten Lichtverhältnissen mitunter erhebliche Funktionsstörungen ergeben können.
Es ist demnach eine Aufgabe der gegenständlichen Erfindung, eine Schweißschulungsanordnung mit einer verbesserten Objekterkennung und Objektverfolgung anzugeben.
Diese Aufgabe wird durch die Merkmale der unabhängigen Ansprüche gelöst. Die unabhängigen Ansprüche beschreiben hierbei eine Schweißschulungsanordnung sowie ein Verfahren zur Durchführung eines virtuellen Schweißvorganges auf der erfindungsgemäßen Schweißschulungsanordnung.
Die erfindungsgemäße Schweißschulungsanordnung weist ein Schulungs-Werkstück sowie einen bewegbaren Schulungs-Handschweißbrenner auf. Erfindungsgemäß ist am Schulungs- Werkstück eine erste Mehrzahl von IR-reflektierenden Referenzmarkern vorgesehen, welche in einem das Schulungs-Werkstück individualisierenden ersten Referenzmuster am Schulungs-Werkstück angeordnet sind. Weiters ist eine zweite Mehrzahl von IR-reflektierenden Referenzmarkern vorgesehen, welche in einem den Schulungs- Handschweißbrenner individualisierenden zweiten Referenzmuster am Schulungs- Handschweißbrenner angeordnet sind.
Darüber hinaus weist die erfindungsgemäße Schweißschulungsanordnung ein Mixed- Reality-Headset auf, auf welchem ein Mixed-Reality-Display, eine RGB-Kamera und eine IR- Kamera vorgesehen sind. Hierbei ist entscheidend, dass die IR-Kamera über ein räumliches I R-Sichtfeld zur Erfassung von I R-Bildern von sich im I R-Sichtfeld befindenden IR- reflektierenden Referenzmarkern verfügt, welches größer ist als das RGB-Sichtfeld der RGB- Kamera. In Kombination mit der Verwendung der erfindungsgemäßen IR-reflektierenden Referenzmarker kann dadurch die Objekterkennung und Objektverfolgung im Vergleich zu aus dem Stand der Technik bekannten Schweißschulungsanordnungen verbessert werden. Ein Handschweißer kann wesentlich näher an ein Schulungs-Werkstück herantreten, kann bedeutend schnellere Bewegungen mit dem Schulungs-Handschweißbrenner ausführen, und es kann dennoch auch in solchen Szenarien eine präzise und akkurate Objekterkennung und Objektverfolgung insbesondere des Schulungs-Handschweißbrenners gewährleistet werden.
Durch die erfindungsgemäße Schweißschulungsanordnung ist es möglich, das Tracking, also die Objekterkennung und Objektverfolgung insbesondere von Schulungs-Werkstück und Schulungs-Handschweißbrenner, auch in dynamischen Phasen, in denen beispielsweise der Schulungs-Handschweißbrenner schnell bewegt wird, präzise und zuverlässig sicherzustellen.
Mithilfe der erfindungsgemäßen IR-Kameras können im Vergleich zum Stand der Technik teils merklich größere Trackingbereiche erfasst werden. Auch die Orientierung der zu trackenden Komponenten unterliegt im Rahmen der Erfindung beinahe keinen Einschränkungen mehr, und auch ein Mindestabstand zum Schulungs-Werkstück muss nicht mehr eingehalten werden.
Weiters weist die erfindungsgemäße Schweißschulungsanordnung eine Simulationseinheit auf, welche ausgestaltet ist, aus den mit den durch die IR-Kamera erfassten I R-Bildern des ersten sowie des zweiten Referenzmusters eine Geometrie und/oder eine Form und/oder eine Type des Schulungs-Handschweißbrenners, wie MIG-Handschweißbrenner oder MAG- Handschweißbrenner oder TIG-Handschweißbrenner oder E-Handschweißbrenner, sowie des Schulungs-Werkstücks und einen zeitlichen Verlauf der Raumlagen des Schulungs- Handschweißbrenners sowie des Schulungs-Werkstücks relativ zum Headset-Bezugspunkt zu ermitteln. Darauf aufbauend erlaubt es die Simulationseinheit, einen zeitlichen Positionsverlaufs einer virtuellen Schweißelektrode und daraus eine virtuelle Schweißnaht am Schulungs-Werkstück zu ermitteln, mit welcher Mixed-Reality-Bilder des virtuellen Handschweißvorganges erzeugt werden, die letztlich auf einem ebenfalls am Mixed-Reality- Headset angeordneten Mixed-Reality-Display dargestellt werden.
Bei realen Schweißvorgängen kommen Schweißelektroden zum Einsatz, deren Art und Ausführung bekanntermaßen von der Art des Schweißvorganges abhängen. Beispielsweise brennt beim Lichtbogenschweißen ein Lichtbogen zwischen dem Werkstück und einer Schweißelektrode, wofür unter Schutzgas abschmelzende Draht- oder Bandelektroden oder abschmelzende Stabelektroden oder auch nicht abschmelzende Schweißelektroden (z.B. Wolfram-basierte Schweißelektroden) vorgesehen sein können. Im Rahmen der gegenständlichen Erfindung wird die für einen simulierten Schweißvorgang erforderliche Schweißelektrode, also beispielsweise eine unter Schutzgas abschmelzende Draht- oder Bandelektrode oder eine abschmelzende Stabelektrode oder auch eine nicht abschmelzende Schweißelektrode, in der Simulation in Form einer virtuellen Schweißelektrode berücksichtigt. Bevorzugt kann die Type der virtuellen Schweißelektrode dabei mit der Type des Schulungs-Handschweißbrenners mitidentifiziert werden, wobei vorteilhafterweise aus dem ermittelten zeitlichen Verlauf der Raumlage des Schulungs-Handschweißbrenners der zeitliche Positionsverlauf und auch die räumliche Lage der virtuellen Schweißelektrode ermittelbar ist.
Durch den Umstand, dass im Rahmen der Erfindung wesentlich akkuratere Informationen über die räumlichen Lagen der für den virtuellen Handschweißvorgang wichtigen Komponenten, insbesondere des Schulungs-Handschweißbrenners und des Schulungs- Werkstücks, zur Verfügung stehen, welche in der Simulationseinheit auch für die simulatorische Ermittlung der virtuellen Schweißnaht eingesetzt werden, können virtuelle Handschweißvorgänge wesentlich realitätsgetreuer gestaltet werden. Die größere Realitätstreue erhöht den Schulungseffekt für den Handschweißer, was einen weiteren Parameter darstellt, bezüglich dessen durch die gegenständliche Erfindung eine Verbesserung im Vergleich zum bekannten Stand der Technik erreicht wird. Die RGB- Kamera wird im Rahmen der Erfindung als sogenanntes „Live-View“ der Umgebung verwendet, das Tracking wird über die IR-Kamera realisiert. Hierbei ist entscheidend, dass die IR-Kamera mit einem größeren Sichtbereich ausgestattet werden kann, was den Vorteil eines wesentlich größeren trackbaren Bereichs mit sich bringt, die genannten Nachteile für einen ausführenden Handschweißer jedoch vermeidet.
Ein wichtiger Vorteil der erfindungsgemäßen Schweißschulungsanordnung ist, dass aufgrund der Verwendung der IR-Kamera zum Tracking insbesondere bewegliche Komponenten mit im Vergleich zum Stand der Technik kleineren, passiven und damit kostengünstigeren Markern ausgestattet werden können und dennoch zuverlässig und präzise identifiziert werden können.
Auch benötigen die beweglichen, zu trackenden Komponenten im Vergleich zu aus dem Stand der Technik bekannten Komponenten mitunter wesentlich weniger Hardware, insbesondere da die Marker passiv sind und folglich keine Spannungsversorgung erfordern.
Die gegenständliche Erfindung wird nachfolgend unter Bezugnahme auf die Figuren 1 bis 12 näher erläutert, die beispielhaft, schematisch und nicht einschränkend vorteilhafte Ausgestaltungen der Erfindung zeigen. Dabei zeigt
Fig.1 eine mögliche Ausgestaltung einer erfindungsgemäßen Schweißschulungsanordnung,
Fig.2 ein schematisches Blockschaltbild eines Simulationsmodells in einer erfindungsgemäßen Simulationseinheit,
Fig.3 eine Schweißschulungsanordnung nach Stand der Technik,
Fig.4 ein erfindungsgemäßes Mixed-Reality-Headset,
Fig.5 ein Mixed-Reality-Headset in Frontansicht und einen Adapter zur Fixierung einer IR-Kamera in vorgegebener räumlicher Distanz zu einer RGB-Kamera am Mixed- Reality-Headset,
Fig. 6 die Sichtfelder einer RGB-Kamera und einer IR-Kamera in erfindungsgemäßer Anordnung auf einem Mixed-Reality-Headset; Fig.7 erfindungsgemäß ausgestaltete Schulungs-Handschweißbrenner mit IR- reflektierenden Referenzmarkern,
Fig.8 Ausgestaltungsmöglichkeiten eines ersten Referenzmusters zur Individualisierung eines Schulungs-Werkstücks,
Fig.9 eine Ausgestaltung eines ersten Referenzmusters zur Individualisierung eines Schulungs-Werkstücks mit einer Mulde zur Anordnung eines IR-reflektierenden Referenzmarkers in Seitenansicht,
Fig.10 eine Mulde zur Anordnung eines IR-reflektierenden Referenzmarkers in Detaildarstellung,
Fig.11a, Fig. 11b, Fig. 11c die Aktivierung eines Menüs bzw. Interaktions-Menüs auf dem Mixed-Reality-Display eines erfindungsgemäßen Mixed-Reality-Headsets bei Erfassung eines Mixed-Reality-Zielobjekts,
Fig.12a, Fig.12b eine Schweißnaht und eine Schweißwurzel.
Fig.1 zeigt eine mögliche Ausgestaltung einer erfindungsgemäßen Schweißschulungsanordnung 1 zur Durchführung eines virtuellen Handschweißvorganges. Die Grundbestandteile der Schweißschulungsanordnung 1 sind ein Schulungs-Werkstück 4, ein manuell bewegbarer Schulungs-Handschweißbrenner 6, ein Mixed-Reality-Headset 800 und eine Simulationseinheit 9 mit einer schematisch dargestellten Brennerhalterung 17.
Unter Mixed-Reality („vermischte Realität“ oder „gemischte Realität“) wird im gegenständlichen Zusammenhang die Vermischung der natürlichen Wahrnehmung eines Handschweißers 2 mit einer künstlich erzeugten („computererzeugten“) Wahrnehmung verstanden. Die natürliche Wahrnehmung eines Handschweißers 2 wird im Rahmen der gegenständlichen Erfindung anhand einer RGB-Kamera 803 erfasst und durch von der RGB- Kamera 803 erzeugte RGB-Bilder repräsentiert.
Wie an späterer Stelle im Detail ausgeführt, fungiert die Simulationseinheit 9 als CPU bzw. Recheneinheit der gezeigten Schweißschulungsanordnung 1. Wie eine CPU und damit eine Simulationseinheit 9 einer Schweißschulungsanordnung 1 aufgebaut werden kann, kann mehreren Dokumenten des Stands der Technik entnommen werden. Konkret bieten beispielsweise die EP 2 863 376 A1, die US 202/0265750 A1 oder auch die WO 2020/167812 A1 dahingehende Erläuterungen.
Im Rahmen der gegenständlichen Erfindung kann eine Simulationseinheit 9 auch in einem realen Schweißgerät (in Fachkreisen auch als „Schweißstromquelle“ oder „Stromquelle“ bezeichnet) integriert sein, an welches ein Schulungs-Handschweißbrenner 6 wie ein herkömmlicher, realer Schweißbrenner angeschlossen werden kann. Hierbei können insbesondere die an einem realen Schweißgerät bzw. an dessen Gehäuse vorgesehenen Schnittstellen, z.B. Anschlüsse zum Anschließen eines realen Handschweißbrenners, auch bei der Durchführung eines virtuellen Schweißvorganges unverändert eingesetzt werden. Im Fall einer Durchführung eines virtuellen Schweißvorganges mittels einer in einem realen Schweißgerät integrierten Simulationseinheit 9 wird die Leistungsversorgung durch das reale Schweißgerät, z.B. an den Schulungs-Handschweißbrenner 6, deaktiviert.
Bei einem Schulungs-Handschweißbrenner 6 kann es sich insbesondere um einen realen Handschweißbrenner handeln, der zwar für die Durchführung von virtuellen Handschweißvorgängen adaptiert sein kann, aber nach wie vor auch zur Durchführung realer Schweißvorgänge, wie zur Durchführung eines realen WIG-Schweißvorgangs, geeignet sein kann.
Zur Anordnung des Schulungs-Werkstücks 4 ist in der in Fig.1 gezeigten Ausführungsform eine Werkstückhalterung 5 vorgesehen, an der das Schulungs-Werkstück 4 montierbar ist. Mithilfe einer Werkstückhalterung 5 können insbesondere verschiedenste sogenannte Schweißpositionen simuliert werden. Bekanntermaßen beschreiben Schweißpositionen die Lage und/oder Ausrichtung und/oder Anordnung der Werkstücke, des Brenners und der Schweißelektrode und damit die Lage und/oder Ausrichtung und/oder Anordnung einer Schweißnaht im Zuge eines Schweißvorgangs. Diesbezüglich definiert die Norm DIN EN ISO 6947 oder der ASME code Section IX (QW-120) eine Reihe von möglichen Schweißpositionen, wie PA (Waagerechtes Schweißen von Stumpf- und Kehlnähten), PB (Horizontales Schweißen von Kehlnähten, Horizontal-Vertikalposition) oder PC (Querposition bzw. Quernaht, waagrechtes Schweißen an senkrechter Wand). Vor allem beim Schweißen senkrechter Schweißnähte können hierbei erschwerende Effekte eintreten, wie das Nach- Unten-Fließen von Schmelze, was im Rahmen der gegenständlichen Erfindung ebenso berücksichtigt und als Teil des virtuellen Handschweißvorganges dargestellt werden kann.
Um das Schulungs-Werkstück 4 an der Werkstückhalterung 5 anzuordnen, sind verschiedene Montagemethoden denkbar. So kann das Schulungs-Werkstück 4 an der Werkstückhalterung 5 magnetisch montiert werden, oder an der Werkstückhalterung 5 festgeschraubt oder festgeklemmt oder festgeklebt oder vergossen oder gekeilt werden oder einfach darauf abgelegt werden. Ferner kann eine Montage des Werkstücks 4 ganz allgemein formschlüssig, kraftschlüssig und/oder stoffschlüssig erfolgen. Im Fall einer magnetischen Montage kann das Schulungs-Werkstück 4 mit zumindest einer metallischen Komponente und die Werkstückhalterung 5 mit zumindest einem Magneten ausgestattet werden, um eine magnetische Haltekraft bereitzustellen. Auch Realisierungen mit Magneten im Schulungs-Werkstück 4 und/oder metallischen Komponenten in der Werkstückhalterung 5 sind denkbar. Der Raum, in dem bei einer Schweißschulungsanordnung 1 das Schulungs- Werkstück 4, und gegebenenfalls die Werkstückhalterung 5, und gegebenenfalls der Schulungs-Handschweißbrenner 6 und die Brennerhalterung 17 angeordnet sind, wird hierbei vielfach als 3D-Schweißumgebung 3 bezeichnet.
Eine Werkstückhalterung 5 stellt allerdings keinen zwingenden Bestandteil einer erfindungsgemäßen Schweißschulungsanordnung 1 dar. Eine Brennerhalterung 17 stellt allerdings keinen zwingenden Bestandteil einer erfindungsgemäßen Schweißschulungsanordnung 1 dar. So kann ein Schulungs-Werkstück 4 auch frei und lose abgestellt sein. Die Funktionsweise der erfindungsgemäßen Schweißschulungsanordnung 1 wird durch die Art der Anordnung des Schulungs-Werkstück 4 nicht beeinflusst.
Auch die Verwendung nur eines einzelnen Schulungs-Werkstücks 4 ist rein beispielhaft. Genauso können ein weiteres, zweites Schulungs-Werkstück 4 oder auch eine Mehrzahl von weiteren Schulungs-Werkstücken 4 vorgesehen sein. Die Schulungs-Werkstücke 4 können dabei eine gleiche Form oder unterschiedliche Formen aufweisen. Die Verwendung mehrerer Schulungs-Werkstücke 4 kann in Fällen vorgesehen sein, in denen an der Schweißschulungsanordnung 1 Schweißvorgänge nachgestellt werden, die eine Verbindung mehrerer Werkstücke zum Ziel haben. Die grundsätzliche Funktionsweise der Schweißschulungsanordnung 1 bleibt dabei unverändert, weswegen nachfolgend für die Beschreibung der Erfindung ohne Einschränkung der Allgemeinheit von lediglich einem Schulungs- Werkstücks 4 ausgegangen wird.
Das anhand der Grundbestandteile Schulungs-Werkstück 4, Schulungs- Handschweißbrenner 6, Mixed-Reality-Headset 800 und Simulationseinheit 9 umgesetzte Prinzip zur Schulung von Handschweißern 2 sieht vor, durch manuelle Bewegung des Schulungs-Handschweißbrenners 6 eine virtuelle Schweißnaht 13 am Schulungs-Werkstück 4 zu erzeugen und die virtuelle Schweißnaht 13 gemeinsam mit dem Schulungs-Werkstück 4 dem Handschweißer 2 anzuzeigen. Die virtuelle Schweißnaht 13 existiert dabei nicht real, sondern wird durch Simulation eines realen Schweißvorganges unter Vorgabe von Bewegungsdaten des Handschweißbrenners 6 und des Schulungs-Werkstücks 4 ermittelt. Zur Visualisierung wird die virtuelle Schweißnaht 13 als Teil einer Sequenz von Mixed- Reality-Bildern 12 des virtuellen Handschweißvorganges an einem Mixed-Reality-Display 801 , welches am Mixed-Reality-Headset 800 angeordnet ist, angezeigt. Mögliche Ausführungsvarianten eines Mixed-Reality-Displays 801 sind aus dem Stand der Technik hinlänglich bekannt, bevorzugt können dafür Flüssigkristallanzeigen oder Flüssigkristallbildschirme eingesetzt werden.
Durch den Einsatz einer wie in Fig.1 gezeigten Schweißschulungsanordnung 1 können verschiedene Schweißprozesse, wie MIG-, MAG-, WIG-, Plasma- oder E- Handschweißprozesse ohne Sicherheitsrisiko erlernt werden. llm die an einer Schweißschulungsanordnung 1 erzielten Eindrücke einer realen Schweißsituation möglichst ähnlich zu gestalten, können während des virtuellen Schweißens vom Handschweißer 2 auch Schweiß-Handschuhe und/oder Schutzausrüstung getragen werden, wodurch auch hinsichtlich der vom Handschweißer 2 zu tragenden Kleidung ein hoher Übereinstimmungsgrad zwischen realem und virtuellem Schweißen erreicht wird. Im Rahmen der Erfindung ist zu diesem Zweck ebenso denkbar, das Mixed-Reality-Headset 800 in einen realen Schweißhelm zu integrieren.
Um das oben beschriebene Grundprinzip des virtuellen Schweißens umzusetzen, ist in der Schweißschulungsanordnung 1 eine RGB-Kamera 803 vorgesehen (Fig.4), welche die beim virtuellen Handschweißen eingesetzten Komponenten, insbesondere den Schulungs- Handschweißbrenner 6 und das Schulungs-Werkstück 4, optisch erfasst, sofern diese im Sichtfeld der RGB-Kamera 803 sind. Die RGB-Kamera 803 kann hierbei als herkömmliche Digitalkamera ausgeführt sein, also als optisches Instrument oder fototechnische Apparatur zur Aufnahme bewegter Bilder. Die RGB-Kamera 803 kann hierzu mit geeigneten oder benötigten Objektiven, Blenden, optischen Filtern usw. ausgestattet sein.
Dem Stand der Technik kann eine Vielzahl von Ansätzen zur Ausführung einer Digitalkamera entnommen werden, beispielgebend sei dazu auf die DE 102005 053276 A1 oder die US 10,877,266 B2 verwiesen. Für die im Rahmen der gegenständlichen Erfindung verwendete RGB-Kamera 803 ist wesentlich, dass diese in der Lage ist, "sichtbares Licht", also Licht des sichtbaren Teils des elektromagnetischen Spektrums zu erfassen. Bekanntermaßen umfasst sichtbares Licht elektromagnetische Wellen mit Wellenlängen im Bereich von 400 nm bis 780 nm.
Die RGB-Kamera 803 ist am Mixed-Reality-Headset 800 angeordnet und erlaubt es, RGB- Bilder von sich im Sichtfeld der RGB-Kamera 803, nachfolgend „RGB-Sichtfeld“ 809, befindenden Objekten zu erfassen. Unter dem Begriff „Sichtfeld“ wird dabei jener Bereich im Bildwinkel einer optischen Einrichtung verstanden, innerhalb dessen Objekte oder Ereignisse oder Veränderungen von der optischen Einrichtung wahrgenommen und damit von der RGB- Kamera 803 aufgezeichnet werden können. Die Begriffe „Sichtfeld“ und „Bildwinkel“ sind dem Fachmann auf dem Gebiet der Kameratechnik hinlänglich bekannt.
Für die Durchführung des gegenständlichen virtuellen Handschweißvorganges sowie für dessen Visualisierung ist es erforderlich, dass sich zu zumindest einem Zeitpunkt während des Handschweißvorganges zumindest ein Teil des Schulungs-Werkstücks 4 und zumindest ein Teil des Schulungs-Handschweißbrenners 6 im RGB-Sichtfeld 809 der RGB-Kamera 803 befinden. Vorteilhafterweise liegen hierbei zumindest drei, bevorzugt zumindest vier oder besonders bevorzugt zumindest fünf IR-Referenzmarker 71 , 73 im RGB-Sichtfeld 809 der RGB-Kamera 803. Diese Bedingung schließt allerdings nicht aus, dass sich der Handschweißer 2 während der Durchführung des virtuellen Handschweißvorganges kurz vom Schulungs-Werkstücks 4 abwendet, und seinen Blick z.B. vorübergehend dem Boden zuwendet. Typischerweise arbeitet der Handschweißer 2 aber dem Schulungs-Werkstücks 4 zugewandt, weswegen obige Forderung in den üblichen Fällen durchgehend erfüllt ist.
Die Simulationseinheit 9 der in Fig.1 gezeigten Schweißschulungsanordnung 1 ist hierbei ausgestaltet, um eine Geometrie und/oder eine Form und/oder eine Type des Schulungs- Handschweißbrenners 6 und des Schulungs-Werkstücks 4 sowie insbesondere einen zeitlichen Verlauf der Raumlagen des Schulungs-Handschweißbrenners 6 und des Schulungs-Werkstücks 4 während der Durchführung des virtuellen Schweißens zu bestimmen. Zur Umsetzung dieses im Stand der Technik auch als „Tracking“ bezeichneten Identifizierens und Verfolgens der Raumlagen des Schulungs-Handschweißbrenners 6 und des Schulungs-Werkstücks 4 ist im Rahmen der erfindungsgemäßen Schweißschulungsanordnung 1 eine erste Mehrzahl von Infrarot-reflektierenden Referenzmarkern 71, nachfolgend „IR-reflektierende“ Referenzmarker 71 , sowie eine zweite Mehrzahl von IR-reflektierenden Referenzmarkern 73 vorgesehen. Wie nachfolgend im Detail erläutert, können die erfindungsgemäßen IR-reflektierenden Referenzmarkern 71 , 73 im Vergleich zu aus dem Stand der Technik bekannten Ansätzen mitunter entscheidend kleiner gestaltet werden, mit bevorzugten Durchmessern oder größten Ausdehnungen oder größten Abständen zwischen zwei Punkte des Randes eines Referenzmarkers 71, 73 im Bereich von nur wenigen Millimetern.
Unter „Infrarot“ wird im gegenständlichen Zusammenhang Infrarotstrahlung, auch IR- Strahlung, verstanden, welche bekanntermaßen elektromagnetischer Strahlung im Spektralbereich zwischen sichtbarem Licht und der längerwelligen Terahertzstrahlung entspricht. Konkret ist damit Licht mit einer Wellenlänge zwischen 780 nm und 1 mm gemeint, was einem Frequenzbereich von 300 GHz bis 400 THz bzw. einem Wellenzahlbereich von 10 cm-1 bis 12.800 cm-1 entspricht. Die gegenständlichen IR- reflektierenden Referenzmarker zeichnen sich dadurch aus, dass sie bevorzugt mehr als 70% oder ganz bevorzugt mehr als 80% oder besonders bevorzugt mehr als 90% oder höchst bevorzugt mehr als 99% einer auf sie auftreffenden IR-Strahlung wieder reflektieren.
Die erste Mehrzahl von IR-reflektierenden Referenzmarkern 71 ist hierbei in einem das Schulungs-Werkstück 4 individualisierenden ersten Referenzmuster 72 am Schulungs- Werkstück 4 angeordnet. Die zweite Mehrzahl von IR-reflektierenden Referenzmarkern 73 ist demgegenüber in einem den Schulungs-Handschweißbrenner 6 individualisierenden zweiten Referenzmuster 74 am Schulungs-Handschweißbrenner 6 angeordnet.
Ein „Referenzmuster“ ist eine bestimmte, geometrische Anordnung einer Mehrzahl von IR- reflektierenden Referenzmarkern. „Individualisierend“ bedeutet hierbei, dass ein Referenzm uster eindeutig ist und daher ein Referenzmuster von einem anderen Referenzmuster unterscheidbar ist. Das Referenzmuster ist vorzugsweise aus unterschiedlichen Blickrichtungen, wobei aus verschiedenen Blickrichtungen jeweils nur ein Teil des Referenzmusters sichtbar sein kann, individualisierend.
Um die IR-reflektierenden Referenzmarkern 71, 73 zu erfassen, sieht die gegenständliche Erfindung eine eigens zu diesem Zweck vorgesehene IR-Kamera 804 vor.
Unter einer IR-Kamera 804 wird gegenständlich eine optische Vorrichtung ähnlich einer herkömmlichen Kamera verstanden, welche in der Lage ist, Infrarotstrahlung zu empfangen und zu verarbeiten und die IR-Strahlung weiters als Bild wiederzugeben. Licht in einem anderen Spektralbereich als im IR-Bereich wird von der IR-Kamera 804 nicht aufgezeichnet. Dazu kann die IR-Kamera 804 auch mit entsprechenden optischen Filtern ausgestattet sein.
Die IR-Kamera 804 ist erfindungsgemäß in einer zur RGB-Kamera 803 vorgegebenen, fixen räumlichen Distanz am Mixed-Reality-Headset 800 angeordnet (Fig.4). Die IR-Kamera 804 weist dabei wie die RGB-Kamera 803 ein eigenes Sichtfeld auf, welches nachfolgend als „IR- Sichtfeld“ 810 bezeichnet wird. Die IR-Kamera 804 erlaubt es, IR-Bilder von sich im IR- Sichtfeld 810 befindenden IR-reflektierenden Referenzmarkern 71, 73 zu erfassen. Mit der Erfassung der IR-reflektierenden Referenzmarker 71, 73 geht die Erfassung zumindest von Teilen der genannten, das Schulungs-Werkstück 4 und den Schulungs-Handschweißbrenner 6 individualisierenden Referenzmusters 72, 74 einher.
Eine wesentliche Eigenschaft der erfindungsgemäß verwendeten IR-Kamera 804 ist, dass deren I R-Sichtfeld 810 größer ist als das RGB-Sichtfeld 809 der RGB-Kamera 803, vorzugsweise in zumindest einem Raumwinkel größer. Erfindungsgemäß überlappen sich das I R-Sichtfeld 810 und das RGB-Sichtfeld 809.
Während der Durchführung des virtuellen Handschweißvorganges befindet sich zumindest ein Teil des ersten Referenzmusters 72 und zumindest ein Teil des zweiten Referenzmusters 74 im I R-Sichtfeld 810. Auf diesen Umstand wird an späterer Stelle gesondert eingegangen.
Zur Zuordnung von Referenzmustern 72, 74 zu bestimmten Schulungs-Werkstücken 4 oder Schulungs-Handschweißbrennern 6 kann in der Simulationseinheit 9 eine Datenbank oder ein Datenbankeintrag oder eine Liste hinterlegt sein, welche unterschiedliche Referenzmuster 72, 74 mit Beschreibungen von Schulungs-Werkstücken 4 oder Schulungs- Handschweißbrennern 6 verknüpft. Wird nun ein Referenzmuster 72, 74 oder ein Teil des Referenzmusters 72, 74, welcher einen Rückschluss auf das gesamte Referenzmuster 72, 74 zulässt, von der IR-Kamera 804 erfasst, können durch Abgleich mit den vorgesehenen Datenbankeinträgen das zugrunde liegende Schulungs-Werkstück 4 und dessen Eigenschaften identifiziert werden. Die Datenbankeinträge können dabei eine Beschreibung der Geometrie, der Maße, des Materials usw. des Schulungs-Werkstücks 4 enthalten. Selbiges gilt für Schulungs-Handschweißbrenner 6, deren Identifikation ebenfalls durch Abgleich von erfassten Referenzmustern 74 mit entsprechenden Datenbankeinträgen erfolgen kann.
Bevorzugterweise, und so auch im Rahmen der in Fig.1 gezeigten Ausgestaltung der Erfindung, erfolgt die Erfassung von I R-Bildern und von RGB-Bildern fortlaufend zu diskreten Zeitpunkten k. „Fortlaufend“ ist hierbei zu verstehen als eine wiederholte Aufnahme von IR- Bildern und von RGB-Bildern zu den genannten diskreten Zeitpunkten. Es sei angemerkt, dass die RGB-Kamera 803 und die IR-Kamera 804 im Rahmen der Erfindung auch unterschiedlich getaktet sein können, und damit unterschiedliche Abtastzeiten aufweisen können.
Fortlaufend erfasste IR-Bilder führen gemäß den obigen Ausführungen zu fortlaufend erfassten Teilen des ersten sowie des zweiten Referenzmusters 72, 74, woraus in der Simulationseinheit 9 eine fortlaufende Beschreibung der Raumlagen des Schulungs- Werkstücks 4 und des Schulungs-Handschweißbrenners 6 abgeleitet werden kann. Der Simulationseinheit 9 werden zu diesem Zweck die erfassten RGB-Bilder und die erfassten IR-Bilder zugeführt. Dazu kann die RGB-Kamera 803 und die IR-Kamera 804 beispielsweise durch Verkabelung mit der Simulationseinheit 9 verbunden sein, um die aufgenommenen Bilddaten zu übertragen. Im Rahmen der gegenständlichen Erfindung ist allerdings auch eine kabellose Verbindung („wireless“) der RGB-Kamera 803 und der IR-Kamera 804 mit der Simulationseinheit 9 denkbar. Zur kabellosen Verbindung der RGB-Kamera 803 und der IR- Kamera 804 mit der Simulationseinheit 9 können bekannte Konzepte wie Bluetooth, WLAN oder ZigBee verwendet werden.
Aus der fortlaufenden Beschreibung der Raumlagen des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 kann letztlich in bekannter Weise die für die Umsetzung des virtuellen Schweißvorganges erforderliche Relativbewegung zwischen Schulungs- Handschweißbrenners 6 und Schulungs-Werkstücks 4 ermittelt werden. In einer vorteilhaften Weise können aus den Positionsverläufen von Schulungs-Werkstücks 4 und Schulungs- Handschweißbrenners 6 auch deren Beschleunigung und Geschwindigkeit ermittelt werden, was ebenso in der Ermittlung der virtuellen Schweißnaht 13 berücksichtigt werden kann.
Es sei angemerkt, dass die Ermittlung der Raumlagen und die daraus resultierenden Positionsverläufe des Schulungs-Handschweißbrenners 6 sowie des Schulungs- Werkstücks 4 relativ zu einem Headset-Bezugspunkt 802 erfolgt, welcher als fixer Punkt am Mixed- Reality-Headset 800 festgelegt ist. Allerdings bewegt sich der Headset-Bezugspunkt 802 mit dem Mixed-Reality-Headset 800 mit, was eine große Flexibilität in der Positionsbeschreibung erlaubt. Auf die konkrete Ausgestaltung dieser auf dem Headset-Bezugspunkt 802 aufbauenden Positionsbeschreibung wird an späterer Stelle im Detail eingegangen. Ferner können Raumlagen und daraus resultierende Positionsverläufe des Schulungs- Handschweißbrenners 6 oder des Schulungs-Werkstücks 4 nicht nur ermittelt, sondern auch bewertet werden. Darauf aufbauend können eine am Mixed-Reality-Display 801 ausgegebene Anleitung oder am Mixed-Reality-Display 801 ausgegebene Hinweise erfolgen, beispielsweise dass der Handschweißer 2 das Schulungs-Werkstück 4 falsch positioniert hat, worauf in weiterer Folge Hinweise oder eine Anleitung zur Korrektur der Positionierung gegeben werden können.
Zur Ermittlung einer fortlaufenden Beschreibung der Raumlagen des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 können zunächst geometrische Bezugspunkte am Schulungs-Werkstück 4 und am Schulungs-Handschweißbrenner 6 ermittelt werden. Die geometrischen Bezugspunkte am Schulungs-Werkstück 4 und am Schulungs-Handschweißbrenner 6 können beispielsweise aus den am Schulungs-Werkstück 4 und am Schulungs-Handschweißbrenner 6 angebrachten Referenzmustern 72, 74 ermittelt werden. Darauf aufbauend können, z.B. dreidimensionale, Positionsvektoren ermittelt werden, welche die Relativpositionen der geometrischen Bezugspunkte am Schulungs- Werkstück 4 und am Schulungs-Handschweißbrenner 6 in Bezug zum vorgegebenen geometrischen Headset-Bezugspunkt 802 beschreiben. Diese Positionsvektoren können aus den erfassten Bilddaten der IR-Kamera 804 ermittelt werden.
Ein zeitlicher Verlauf von Bilddaten der IR-Kamera 804 kann einen zeitlichen Verlauf dieser Positionsvektoren festlegen, woraus sich in direkter Konsequenz die Positionsverläufe des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 ableiten lassen. Positionsverläufe können demnach verstanden werden als eine zeitliche Abfolge von Positionsvektoren, welche die Relativpositionen des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 in Bezug zum Headset-Bezugspunkt 802 beschreiben.
Die Orientierungen des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 relativ zum Headset-Bezugspunkt 802 können in bevorzugter Weise ebenfalls aus den Referenzmustern 72, 74 ermittelt werden. Um darüber hinaus auch die Orientierung des Schulungs- Werkstücks 4 und/oder des Schulungs-Handschweißbrenners 6 in der 3D- Schweißumgebung 3 oder allgemein im dreidimensionalen Raum zu ermitteln, können ferner noch weitere Sensoren vorgesehen sein, die weitere, zu diesem Zweck heranziehbare Sensordaten liefern. Auf diese Sensoren, mit deren Hilfe beispielsweise auch die eingangs genannten Schweißpositionen (PA, PB, ...) ermittelt werden können, wird an späterer stelle gesondert eingegangen.
In Zusammenschau mit den ermittelten Positionsverläufen können, bei bekannter Geometrie des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6, aus der Orientierung von Schulungs-Werkstück 4 und Schulungs-Handschweißbrenner 6 die zeitlichen Verläufe der entsprechenden Raumlagen bestimmt werden.
Im Rahmen der in Fig.1 gezeigten Schweißschulungsanordnung 1 ist weiters vorgesehen, ausgehend von den Positionsverläufen des Schulungs-Handschweißbrenners 6 sowie des Schulungs-Werkstücks 4, unter Berücksichtigung zumindest eines vorgegebenen Schulungs- Schweißparameters ps eine virtuelle Schweißnaht 13 zu ermitteln, welche der Handschweißer im Zuge des virtuellen Handschweißvorganges am Schulungs-Werkstück 4 erzeugt hat. Die Ermittlung der virtuellen Schweißnaht 13 erfolgt in bevorzugter Weise durch Simulation eines realen Handschweißvorganges, unter der Randbedingung, dass ein realer Handschweißbrenner, der bevorzugt mit einer entsprechenden Schweißelektrode ausgestattet ist, entsprechend dem ermittelten zeitlichen Positionsverlauf des Schulungs- Handschweißbrenners 6 relativ zum Schulungs-Werkstück 4 bewegt wird, wobei eine entsprechende Schweißelektrode in der Simulation durch eine virtuelle Schweißelektrode repräsentiert wird. Insbesondere beim MIG/MAG-Schweißen kann dabei auch eine veränderliche Länge der virtuellen Schweißelektrode berücksichtigt werden. Hierfür kann an der Simulationseinheit 9 ein geeignetes Schweißsimulationsmodell 91 implementiert sein, das aus den Positionsverläufen des Schulungs-Handschweißbrenners 6 sowie des Schulungs-Werkstücks 4 und damit einhergehend aus dem zeitlichen Positionsverlauf einer virtuellen Schweißelektrode, unter Berücksichtigung zumindest eines vorgegebenen Schulungs-Schweißparameters ps eine virtuelle Schweißnaht 13 ermittelt. Zur Simulation eines realen Handschweißvorganges bietet der Stand der Technik eine Reihe von Ansätzen, beispielsweise in der RU 2694147 C1 , der WO 2020/056388 A1 oder der US 2015/0352794 A1.
Die Simulationseinheit 9 ist als Computer oder computerbasierte Hardware ausgeführt. Ein Simulationsmodell 91 kann als Software implementiert sein, das auf der Simulationseinheit 9 abläuft. Wie ein Simulationsmodell 91 aufgebaut sein kann, ist in Fig.2 anhand eines Blockschaltbildes schematisch gezeigt. Das Simulationsmodell 91 ist in der Simulationseinheit 9 angeordnet und erhält als Eingangssignale Bilddaten BRGB der RGB- Kamera 803, Bilddaten BIR der IR-Kamera 804 sowie Schulungs-Schweißparameter ps. Daraus ermittelt das Simulationsmodell 91 die virtuelle Schweißnaht 13. Erfindungsgemäß wird die virtuelle Schweißnaht 13 in weiterer Folge am Mixed-Reality-Display 801 des Mixed- Reality-Headsets 800 angezeigt.
Das Simulationsmodell 91 kann vorteilhafterweise ausgestaltet sein, auch die in der Schweißtechnik übliche Einbringung von Zusatzwerkstoffen zu berücksichtigen. Zu diesem Zweck kann in Abhängigkeit der gewählten Schweißart auf weitere Sub-Simulationsmodelle zurückgegriffen werden, welche die Einbringung von Zusatzwerkstoffen modellhaft beschreiben. Der zumindest eine vorgegebene Schulungs-Schweißparameter ps kann hierbei einer Schweißstromstärke oder einer Schweißspannung oder einer Schweißgeschwindigkeit oder einer Werkstückgeometrie oder einer Wartezeit oder einer Vorheiztemperatur oder einer Drahtvorschubgeschwindigkeit oder einer Lichtbogenlänge oder einer Schweißart oder einer Schutzgaseinstellung, insbesondere einer Durchflussmenge eines Schutzgases, entsprechen. Auch eine andere Wahl für den Schulungs-Schweißparameter ps ist im Rahmen der gegenständlichen Erfindung jedoch denkbar. Typischerweise wird nicht nur ein einzelner Schulungs-Schweißparameter ps vorgegeben, sondern eine Vielzahl von Schulungs-Schweißparametern ps, da Schweißen ein komplexer physikalischer Prozess ist, bei dem üblicherweise eine Vielzahl von Größen festzulegen sind.
Die genannten Schulungs-Schweißparameter ps können in einer vorteilhaften Weise auch während eines virtuellen Handschweißvorganges veränderbar sein, wozu an der Simulationseinheit 9 ein geeignetes, vorzugsweise haptisches, Bedienelement vorgesehen sein kann, beispielsweise ein Drehpotentiometer. Beispielsweise kann mit einem haptischen Bedienelement, vorzugsweise ausschließlich, ein simuliertes Schutzgas als Schulungs- Schweißparameter ps geregelt werden, und andere Schulungs-Schweißparameter ps können z.B. an anderer Stelle eingestellt werden, wie z.B. auf einem Tablet als portablem Anzeigeelement 14, worauf an späterer Stelle gesondert eingegangen wird.
Die ermittelte virtuelle Schweißnaht 13 und der damit einhergehende Schweißfortschritt müssen in einem abschließenden Schritt graphisch aufbereitet und angezeigt werden. Zu diesem Zweck ist am Mixed-Reality-Headset 800 ein Mixed-Reality-Display 801 vorgesehen. Bei der graphischen Anzeige ist auf den jeweils aktuellen Zeitpunkt Takt während des virtuellen Handschweißvorganges zu achten. Erfindungsgemäß ist vorgesehen, zumindest jenen Teil der bis zu einem aktuellen Zeitpunkt Takt des virtuellen Handschweißvorganges ermittelten virtuellen Schweißnaht 13, welcher innerhalb des zum aktuellen Zeitpunkt Takt vorliegenden RGB-Sichtfeldes 809 liegt, dem zum aktuellen Zeitpunkt Takt vorliegenden RGB-Bild zu überlagern, um ein Mixed-Reality-Bild 12 des virtuellen Handschweißvorganges zum aktuellen Zeitpunkt Takt zu erzeugen. Die Überlagerung der virtuellen Schweißnaht 13 erfolgt natürlich in der richtigen räumlichen Ausrichtung und Position bezogen auf das Schulungs- Werkstücks 4, um die virtuelle Schweißnaht 13 am Schulungs- Werkstück 4 richtig anzuzeigen.
Ein entsprechend den obigen Ausführungen ermitteltes Mixed-Reality-Bild 12 wird in weiterer Folge an das am Mixed-Reality-Headset 800 vorgesehene Mixed-Reality-Display 801 übermittelt, um es als Teil der Sequenz von Mixed-Reality-Bildern 12 des virtuellen Handschweißvorganges am Mixed-Reality-Display 801 anzuzeigen. Wie in Fig.1 dargestellt, kann das Mixed-Reality-Bild 12 auch an einem zusätzlichen Anzeigeelement 14 dargestellt werden. Das ermöglicht es beispielsweise einem Ausbildner, die virtuelle Schweißung zu beobachten. Hierbei kann das Anzeigeelement 14 dem Ausbildner ein Mixed-Reality-Bild 12 des virtuellen Schweißvorganges auch aus dem Blickwinkel des Ausbildners darstellen. Ferner ist es ebenso möglich, dass der Ausbildner dem Handschweißer 2 optische Hinweise bzw. Tipps gibt, welche vom Anzeigeelement 14 auf das Mixed-Reality-Display 801 in Echtzeit übertragbar sind.
Die beschriebenen Schritte des Ermittelns der Positionsverläufe des Schulungs- Handschweißbrenners 6 sowie des Schulungs-Werkstücks 4, des Ermittelns der virtuellen Schweißnaht 13 und der Erstellung des Mixed-Reality-Bildes 12 erfolgen vorzugsweise in der Simulationseinheit 9, also der CPU bzw. Recheneinheit der betrachteten Schweißschulungsanordnung 1. Mögliche Realisierungen einer Simulationseinheit 9 sind unter anderem durch mikroprozessorbasierte Hardware gegeben, beispielsweise durch Mikrocontroller und integrierte Schaltungen (ASIC, FPGA). Auch andere Ansätze zur Ausgestaltung der Simulationseinheit 9 sind jedoch denkbar. So können auch mehrere Simulationseinheiten 9 vorgesehen sein, oder die Simulationseinheit 9 kann über eine Rechen-Cloud mit einer Vielzahl weiterer Simulationseinheiten 9 verbunden sein.
Die Simulationseinheit 9 kann ausgestaltet sein, um neben der Berechnung der virtuellen Schweißnaht 13 noch weitere, komplexe Berechnungen auszuführen. Beispielsweise können in der Simulationseinheit 9 ausgehend von der ermittelten virtuellen Schweißnaht 13 in nachfolgenden mechanischen Simulationen ein virtuelles metallurgisches Gefüge und/oder einen virtuellen spannungsinduzierten Verzug und/oder eine virtuelle Kornstruktur des metallurgischen Gefüges, welche sich als Folge der virtuellen Schweißnaht 13 im Schulungs- Werkstück 4 einstellen können, ermittelt und bedarfsweise auch dargestellt werden.
Die Simulationseinheit 9 kann überdies ausgestaltet sein, um aufbauend auf nachfolgenden mechanischen Simulationen sogenannte Schweiß-Qualitätsparameter zu ermitteln, welche eine Qualität und/oder eine Güte der virtuellen Schweißnaht 13 beschreiben. Schweiß- Qualitätsparameter können eine Nahtdicke, eine Schwingfestigkeit, einen Schweißnahtübergang oder einen Kantenversatz beschreiben, was beispielsweise in der Norm DIN EN ISO 581 beschrieben ist. Vorteilhafterweise kann vorgesehen sein, ermittelte Schweiß-Qualitätsparameter am Mixed-Reality-Display 801 neben dem virtuellen Handschweißvorgang anzuzeigen.
Auch kann die Simulationseinheit 9 ausgestaltet sein, um den vorliegenden RGB-Bildern eine vorgegebene, durch den virtuellen Handschweißvorgang zu erzeugende, virtuelle IdealSchweißnaht 131 (in Fig.1 und Fig.11a-c strichliert dargestellt) zu überlagern. Daran anknüpfend kann das Mixed-Reality-Display 801 natürlich ausgestaltet sein, um die mit der virtuellen Ideal-Schweißnaht 131 überlagerten RGB-Bilder anzuzeigen. Auch bezüglich einer virtuellen Ideal-Schweißnaht 131 kann die Simulationseinheit 9 ausgestaltet sein, einen oder mehrere Naht-Qualitätsparameter zu ermitteln, welcher beispielsweise eine Abweichung zwischen der ermittelten virtuellen Schweißnaht 13 und der vorgegebenen IdealSchweißnaht 131 beschreiben können. Auf diese Weise wird eine objektive und nachvollziehbare Beurteilung der von einem Handschweißer erzeugten virtuellen Schweißnaht 13 ermöglicht.
Zur Beurteilung der erzeugten virtuellen Schweißnaht 13 kann in einer vorteilhaften Weise eine Abweichungs-Schwelle vorgegeben werden. Kommt es zu einer Abweichung zwischen der ermittelten virtuellen Schweißnaht 13 und der vorgegebenen Ideal-Schweißnaht 131, die eine vorgegebene Abweichungs-Schwelle überschreitet, kann die Simulationseinheit 9 oder auch ein anderes Element der Schweißschulungsanordnung 1 ausgestaltet sein, den Handschweißer 2 anhand akustischer und/oder optischer Signale auf diese Abweichung und damit auf damit verknüpfte Schweißfehler aufmerksam zu machen. Bevorzugt werden diese akustischen und/oder optischen Signale über das Mixed-Reality-Headsets 800 ausgegeben, wozu das Mixed-Reality-Headsets 800 mit geeigneten Lautsprechern ausgestattet sein kann.
Darüber hinaus kann die Simulationseinheit 9 ausgestaltet sein, um eine Datensicherung und/oder eine Aufzeichnung von Schweißungen zu ermöglichen, wodurch es einem lernenden Handschweißer 2 möglich ist, einen virtuellen Handschweißvorgang erneut anzusehen, Fehler zu analysieren und Lernfortschritte zu dokumentieren.
In einer besonders bevorzugten Weise kann auch die Simulationseinheit 9 am Mixed-Reality- Headset 800 angeordnet sein. Die Simulationseinheit 9 kann damit Bestandteil des Mixed- Reality-Headsets 800 sein oder integraler, also unlösbar verbundener, Bestandteil des Mixed-Reality-Headsets 800 sein. So kann beispielsweise auf eine freistehende Simulationseinheit 9 verzichtet werden.
Im Unterschied zu einem realen Handschweißvorgang benötigt ein virtueller Handschweißvorgang üblicherweise keine Vorbereitung oder Nachbereitung des Schulungs- Werkstücks. Gerade beim Schweißen von Stahl ist das Schweißergebnis oft in einem entscheidenden Maß von der Nahtvorbereitung abhängig. Eine der wichtigsten Voraussetzungen für gute Schweißungen ist die Sauberkeit der Schweißnahtkanten. Diese müssen nicht nur metallisch blank, d.h. frei von Oxiden und/oder Zunder sein, sondern dürfen auch keine Verunreinigungen durch Fette, Öle oder andere organische Stoffe aufweisen, die zu Aufkohlungen und Einschlüssen in den Schweißnähten führen können. Vor- und Nachbereitungen sind an Schulungs-Werkstücken 4 nicht erforderlich. In einer vorteilhaften Ausführungsform erlaubt es die gegenständliche Erfindung allerdings, eine mangelhafte Vorbereitung eines Handschweißvorganges in einer erfindungsgemäßen Simulationseinheit 9 bewusst vorzugeben und in einer Simulation zur Berechnung der virtuellen Schweißnaht 13 zu berücksichtigen, insbesondere um einem auszubildenden Handschweißer 2 die mit einer mangelhaften Vorbereitung eines Handschweißvorganges verknüpften Auswirkungen darzustellen.
Die in Fig.1 gezeigte Ausgestaltung der Schweißschulungsanordnung 1 weist überdies ein optionales, weiteres Anzeigeelement 14 auf. Das weitere Anzeigeelement 14 ist jedoch kein zwingender Bestandteil der erfindungsgemäßen Schweißschulungsanordnung 1 , sondern dient lediglich der Darstellung des virtuellen Handschweißvorganges für neben dem Handschweißer 2 weitere Personen, wie einem Ausbildner oder weiterem Schulungspersonal. Zu diesem Zweck kann das weitere Anzeigeelement 14 vorzugsweise von der Simulationseinheit 9 lösbares gestaltet sein, beispielsweise in Form eines Tablets, welches von der Simulationseinheit 9 entnommen werden kann und beispielsweise mittels einer Steckverbindung wieder an dieses angebracht werden kann. Ein weiteres Anzeigeelement 14 stellt aber natürlich keine erforderliche Voraussetzung für die erfindungsgemäße Schweißschulungsanordnung 1 dar.
Bei einem Anzeigeelement 14, vorzugsweise bei einem als Tablet umgesetzten Anzeigeelement 14, kann die Möglichkeit vorgesehen sein, unterschiedliche Frontends, also unterschiedliche graphische Benutzeroberflächen, einzustellen. Ein Frontend des Anzeigeelement 14 kann hierbei an ein in der Simulation nachgebildetes, reales Schweißgerät bzw. an entsprechende Bedienungseinheiten eines realen, in der Simulation nachgebildeten Schweißgeräts angepasst sein, sodass die Bedienungseinheiten verschiedener realer Schweißgeräte realitätsnah simuliert werden können. Auch für das Mixed-Reality-Display 801 des Mixed-Reality-Headsets 800 kann in einer 3D-Ansicht die Möglichkeit vorgesehen sein, das Frontend zu verändern, unter anderem um es ebenso an ein in der Simulation nachgebildetes, reales Schweißgerät anzupassen. Ein Frontend kann vorzugsweise mit Schulungs-Schweißparameter ps, die in einem virtuellen Handschweißvorgang berücksichtig werden, synchronisiert und abgestimmt sein, da nicht jedes Frontend zwingend über die gleichen Schulungs-Schweißparameter ps verfügt.
Hinausgehend über die bloße Darstellung des virtuellen Handschweißvorganges für neben dem Handschweißer 2 weitere Personen kann vorgesehen sein, einen virtuellen Handschweißvorgang über ein Anzeigeelement 14, vorzugsweise über ein portables Tablet, zu steuern. Insbesondere kann auch vorgesehen sein, einen virtuellen Handschweißvorgang ausschließlich über ein portables Tablet zu steuern. Wenn ein abnehmbares Anzeigeelement 14 vorgesehen ist, sind auf dem restlichen Teil der Simulationseinheit 9 vorzugsweise keine weiteren Anzeigeelemente mehr vorhanden, abgesehen von einigen wenigen Status-LEDs zur Signalisierung und/oder Darstellung eines Zustands der Simulationseinheit 9. Fig.3 zeigt im Vergleich zur bisher diskutierten, erfindungsgemäßen Schweißschulungsanordnung 1 eine Schweißschulungsanordnung nach Stand der Technik. Dabei ist augenscheinlich, dass zur Identifikation des Schweißbrenners 21 sowie des Werkstücks 22 durchwegs großflächige Marker (z.B. sogenannte „Bild-Marker“, wie die auf dem Gebiet der Bildverarbeitung hinlänglich bekannten Arllco-Marker, deren Durchmesser typischerweise größer ist als 1cm) eingesetzt werden, die mit einer RGB-Kamera 23 erfasst werden.
Die in Fig.3 gezeigte Ausgestaltung weist den offensichtlichen Nachteil auf, dass nur Komponenten getrackt, also identifiziert und verfolgt, werden können, die sich im RGB- Sichtfeld der RGB-Kamera 23 befinden. Der sogenannte Trackingbereich, in Fig.3 durch den Kreis 24 angedeutet, ist damit durch die Blickführung des Handschweißers 2 und das Sichtfeld der RGB-Kamera eingeschränkt.
Auch kann das Sichtfeld einer RGB-Kamera, welche gleichzeitig Objekte trackt und das Sichtfeld eines Handschweißers 2 erfasst, nicht beliebig ausgedehnt werden. Dahingehende Versuche, beispielsweise unter Verwendung von Weitwinkelobjektiven wie Fischaugenobjektiven, haben gezeigt, dass die Verwendung derartiger Objektive zu Schwindel und Unwohlsein beim Handschweißer 2 führen kann. Auch ist das auf RGB- Kameras basierende Tracking vielfach von den gegebenen Lichtverhältnissen abhängig, wodurch sich bei geänderten Lichtverhältnissen mitunter erhebliche Funktionsstörungen ergeben können.
Die genannten Probleme des Stands der Technik werden anhand der erfindungsgemäßen Schweißschulungsanordnung 1 gelöst, wobei zur Lösung dieser Probleme insbesondere das Mixed-Reality-Headset 800 maßgebend ist. Eine mögliche Ausgestaltung eines erfindungsgemäßen Mixed-Reality-Headsets 800 ist in Fig.4 gezeigt. Das dargestellte Mixed- Reality-Headset 800 weist ein Mixed-Reality-Display 801 zur Anzeige der Sequenz von Mixed-Reality-Bildern 12 des virtuellen Handschweißvorganges auf.
Es erübrigt sich an sich zu erwähnen, dass das Mixed-Reality-Display 801 am Mixed-Reality- Headset 800 natürlich so angeordnet ist, dass eine Person, die das Mixed-Reality-Headset 800 trägt, das Mixed-Reality-Display 801 im Blickfeld hat.
Dem gezeigten Mixed-Reality-Headset 800 ist ein vorgegebener geometrischer Headset- Bezugspunkt 802 zugeordnet. Daraus ergibt sich kein statisches, im Zuge des virtuellen Handschweißvorganges unveränderliches Koordinatensystem, welches zur Beschreibung der Raumlagen des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 herangezogen wird. Vielmehr kann der genannte Headset-Bezugspunkt 802 als Ursprung eines beweglichen Koordinatensystems herangezogen werden, welches sich mit der Bewegung des Handschweißers 2 und damit mit der Bewegung des Mixed-Reality-Headsets 800 mitbewegt. Bei aus dem Stand der Technik bekannten Ansätzen, bei denen z.B. RGB- Kameras ortsfest auf Stativen im Raum des Schweißschulungsanordnung angeordnet sind, ist demgegenüber lediglich die Verwendung von statischen Koordinatensystemen möglich. Durch den Bezugspunkt 802 am Mixed- Reality- Headset 800 kann das Tracking, als das Identifizieren und Verfolgen von Objekten wie dem Schulungs-Handschweißbrenners, mitunter entscheidend dynamisiert werden und besser an eine in einem konkreten Einzelfall gegebenen Schweißsituation angepasst werden.
Ein Mixed-Reality-Headset 800 kann überdies ein Gewichts-Ausgleichselement 807 aufweisen, wie anhand der Ausführungsform der Fig.4 beschrieben wird. Das Gewichts- Ausgleichselement 807 wirkt mit einem Drehmoment TK einem sich aufgrund des Gewichts bzw. der Gewichtsverteilung der RGB-Kamera 803 und/oder des Gewichts der IR-Kamera 804 und/oder des Gewichts des Mixed-Reality-Displays 801 ausbildenden und normal zur Sichtlinie 10 des Mixed-Reality-Headsets 800 wirkenden Drehmoment Tg entgegen.
Im gegenständlichen Zusammenhang wurde festgestellt, dass ein Mixed-Reality-Headset 800, insbesondere bei dessen Verbindung mit der Simulationseinheit 9 mithilfe von Kabeln, so wie in Fig.4 gezeigt, ein teils erhebliches Gesamtgewicht des Mixed-Reality-Headsets 800 annehmen kann.
Ein hohes, unsymmetrisch über den Kopf eines Handschweißers 2 verteiltes Gewicht kann aus offensichtlichen Gründen zu Belastungen von Rücken und Nacken des Handschweißers 2 führen. Durch das Gewichts-Ausgleichselement 807 wird zwar das Gesamtgewicht des Mixed-Reality-Headsets 800 nicht reduziert, jedoch dessen Verteilung über dem Kopf eines Handschweißers 2 symmetrischer gestaltet. Auf diese Weise kann die Dauer von Schulungseinheiten teils erheblich ausgedehnt werden, womit sich die Intensität von Schweißschulungen erhöhen lässt und bessere Trainingseffekte und Fortschritte erzielbar sind.
Als Sichtlinie 10 ist hierbei eine Linie zu verstehen, entlang derer der Handschweißer 2 auf das Schulungs- Werkstück 4 blicken würde, wenn der Handschweißer 2 das Mixed-Reality- Headsets 800 nicht tragen würde. In einer bevorzugten Ausgestaltung des Mixed-Reality- Headsets 800 kann die Sichtlinie 10 dabei einer optischen Achse der RGB-Kamera 803 entsprechen.
Wie in Fig.4 gezeigt, weist die RGB-Kamera 803 zumindest eine RGB-Linse 831 auf, deren optische Achse 806 die dem Handschweißer 2 zugewandte Display-Oberfläche 805 unter einem Display-Schnittwinkel y in einem Display-Schnittpunkt 808 schneidet. Eine optische Achse 806 und die Sichtlinie 10 können insbesondere in Fällen zusammenfallen, in denen der Display-Schnittwinkel y 90 Grad beträgt. Grundsätzlich ist es vorteilhaft, die RGB- Kamera 803 und das Mixed-Reality-Displays 801 derart anzuordnen, dass der Display- Schnittwinkel y zwischen 70 Grad und 110 Grad oder zwischen 80 Grad und 100 Grad oder zwischen 85 Grad und 95 Grad liegt.
Sollten sich die Sichtlinie 10 und die optische Achse 806 nicht decken, ist das Mixed- Reality- Headsets 800 vorzugsweise derart gestaltet, dass die Sichtlinie 10 und die optische Achse 806 einen gemeinsamen Schnittpunkt aufweisen, und in einem Winkel kleiner 10 Grad, oder in einem Winkel kleiner 5 Grad, oder in einem Winkel kleiner 1 Grad auseinanderstreben.
In einer vorteilhaften Weise kann durch das Gewichts-Ausgleichselement 807 zusätzlich eine vorgegebene Kabelführung der zur Verbindung von Simulationseinheit 9 und Mixed-Reality- Headset 800 verwendeten Kabel sichergestellt werden. Insbesondere kann auf diese Weise sichergestellt werden, dass die Kabel den Handschweißer 2 nicht berühren und damit nicht beim virtuellen Handschweißen stören.
In einer bevorzugten Weise ist das Gewichts-Ausgleichselement 807 in seiner Form veränderbar und/oder in seiner Position am Mixed-Reality-Headset 800 verstellbar. Insbesondere kann des Gewichts-Ausgleichselement 807 klappbar und/oder abnehmbar gestaltet sein.
In einer vorteilhaften Weise können im Mixed-Reality-Headset 800 überdies Lautsprecher (nicht dargestellt) angeordnet sein, welche in einem realen Handschweißvorgang zu erwartende Schallgeräusch nachbilden. Es ist bekannt, dass die Akustik ein wesentliches Element beim Schweißen darstellt. So können beim Lichtbogenschweißen Schallgeräusche mit den Eigenschaften des Lichtbogens Zusammenhängen, wie der vom Lichtbogen transportieren Leistung oder dem sogenannten Anstellwinkel des Schweißbrenners, woraus sich der Winkel zwischen Lichtbogen und Werkstück ergeben kann. Zur Erzeugung der Schallgeräusche kann in der Simulationseinheit 9 neben dem Simulationsmodell 91 zur Simulation des Schweißvorganges ein Akustikmodell vorgesehen sein. Die Lautsprecher können hierbei derart angeordnet sein, dass sie in der Lage sind, einen räumlichen Stereosound zu liefern, womit dem Handschweißer 2 vielfach eine besonders realistische Darstellung („Immersion“) des virtuellen Handschweißvorganges geboten werden kann.
Fig.5 zeigt ein Mixed-Reality-Headset 800 in Frontansicht und einen Adapter 30 zur Fixierung einer IR-Kamera 804 in vorgegebener Relativposition zu einer RGB-Kamera 803. Hinsichtlich der Positionierung der RGB-Kamera 803 und der IR-Kamera 804 am Mixed- Reality-Headset 800 wurde festgestellt, dass diese vorzugsweise in möglichst starrer Anordnung zueinander anzubringen sind.
Wie insbesondere anhand von Fig.4 und Fig.5 erkannt werden kann, sind die RGB-Kamera 803 und die IR-Kamera 804 zueinander vertikal versetzt. Dieser vertikale Versatz ist bei der Überlagerung der virtuellen Schweißnaht, welche aus IR-Bildern ermittelt wird, auf die mit der RGB-Kamera gewonnenen RGB-Bilder zu berücksichtigen. Hier hat sich gezeigt, dass zeitliche Änderungen dieses vertikalen Versatzes zwar berücksichtigt werden können, dies aber die Ermittlung des vertikalen Versatzes und den Einsatz signifikant höherer Rechenkapazitäten erfordert.
In Fig.4 und Fig.5 umfasst sowohl die RGB-Kamera 803 als auch die IR-Kamera 804 jeweils zwei optische Linsen. Die Verwendung von zwei optischen Linsen bei der RGB-Kamera 803 ermöglicht hierbei das Erfassen sogenannter stereoskopischer Aufnahmen bzw. Bilder des RGB-Sichtfeldes 809. Unter stereoskopischen Bildern ist bekanntermaßen die Wiedergabe von Bildern mit einem Eindruck von räumlicher Tiefe zu verstehen. Stereoskopische Bilder können hierbei genutzt werden, um dem Handschweißer 2 eine stereoskopische Darstellung des virtuellen Handschweißvorganges zu ermöglichen. Dabei können in einer vorteilhaften Ausführungsform am Mixed-Reality-Display 801 des Mixed-Reality-Headsets 800 in Echtzeit stets zwei stereoskopisch versetzte Mixed-Reality-Bilder 12 gleichzeitig angezeigt werden.
Ferner können noch weitere Sensoren an der RGB-Kamera 803 und/oder am Mixed-Reality- Headset 800 vorgesehen sein, um die bereits an früherer Stelle erwähnte Orientierung des Schulungs-Werkstücks 4, des Schulungs-Handschweißbrenners 6, des Mixed-Reality- Zielobjekts T in der 3D-Schweißumgebung 3 oder allgemein im dreidimensionalen Raum erkennen zu können. Bei diesen Sensoren kann es sich beispielsweise um Gyroskope, Beschleunigungssensoren und/oder Annäherungssensoren handeln. Die von derartigen Sensoren erfassten Sensordaten können in einer vorteilhaften Weise an die Simulationseinheit 9 weitergeleitet werden, in welcher aus den übermittelten Sensordaten die genannte Orientierung im dreidimensionalen Raum ermittelt werden können.
Der Adapter 30 dient damit der vorteilhaften Sicherstellung eines stets (möglichst) konstanten vertikalen Versatzes zwischen RGB-Kamera 803 und die IR-Kamera 804.
Die in Fig.5 gezeigte Ausführungsform des Adapters 30 weist einen starren Montagerahmen 33 auf, an dem zwei Montageelemente 31, 32 in definierter räumlicher Lage angeordnet sind. Anhand des ersten Montageelements 31 wird die RGB-Kamera 803 fixiert, anhand des zweiten Montageelements 32 die IR-Kamera 804.
Fig.6 stellt weiters Sichtfelder 809, 810 einer RGB-Kamera 803 und einer IR-Kamera 804 dar, wie sie sich bei einer erfindungsgemäßen Schweißschulungsanordnung 1 ergeben können. Es ist erkennbar, dass das I R-Sichtfeld 810 wesentlich größer als das RGB- Sichtfeld 809 gestaltet ist. Um gewährleisten zu können, dass von der RGB-Kamera 803 erfasste Objekte, wie ein Schulungs-Werkstück 4 oder ein Schulungs-Handschweißbrenner 6 bei der Ermittlung der virtuellen Schweißnaht 13, die erfindungsgemäße auf mittels der IR- Kamer 804 erfassten I R-Bildern basiert, berücksichtigen zu können, ist es erforderlich, dass sich die Sichtfelder 809, 810 der Karners, also das RGB-Sichtfeld 809 und das I R-Sichtfeld 810 zumindest zu einem Teil überlappen. „Überlappen“ ist hierbei zu verstehen als ein zumindest teilweises gegenseitiges Überdecken des RGB-Sichtfeldes und des IR- Sichtfeldes.
In einer besonders vorteilhaften Ausgestaltung der Erfindung kann vorgesehen sein, dass das I R-Sichtfeld 810 das RGB-Sichtfeld 809 zu Gänze umschließt, dass also das RGB- Sichtfeld 809 zu Gänze im I R-Sichtfeld 810 enthalten ist. Dies stellt im Rahmen der Erfindung jedoch keine zwingende Voraussetzung dar.
Anhand von Fig.6 kann ein wesentlicher Vorteil der erfindungsgemäßen Verwendung von zwei Kamerasystemen erkannt werden. Im gezeigten Fall befindet sich das zur Individualisierung des Schulungs- Werkstücks 4 vorgesehene Referenzmuster 72 außerhalb des RGB-Sichtfeldes 809 der RGB-Kamera 803. Alleine auf Basis von RGB-Bildern wären in diesem Fall keine Identifikation und Verfolgung, also kein Tracking des Schulungs- Werkstücks 4 möglich. Dank des größeren IR-Sichtfeldes kann das Referenzmuster 72 aber dennoch erfasst werden und auch in diesem Fall ohne Probleme ein virtueller Handschweißvorgang durchgeführt werden.
Anhand von Fig.7 wird näher auf die für die gegenständliche Erfindung wesentlichen IR- reflektierenden Referenzmarker eingegangen. Fig.7 zeigen hierzu verschiedene Ausführungen eines Schulungs-Handschweißbrenners 6 aber auch von Schulungs- Schulungs-Zusatzwerkstoffen 7, wie sie zur Simulation von Elektroden- Handschweißverfahren und WIG-Schweißverfahren verwendet werden können. Die nachfolgenden Ausführungen sind aber genauso für Referenzmuster 72 für Schulungs- Werkstücke 4 gültig.
Die individualisierenden Referenzmuster 72, 74 sind erfindungsgemäß derart ausgestaltet, dass bereits die Erfassung nur eines Teils des jeweiligen Referenzmusters 72, 74 reicht, um das Objekt, an dem ein entsprechendes Referenzmusters 72, 74 angebracht ist, zu identifizieren.
Je nach Art und Ausführung eines Schulungs-Handschweißbrenners 6 kann es erforderlich sein, verschiedene Arten von Schweißelektroden in Form von virtuellen Schweißelektroden in der Simulation in der Simulationseinheit 9 zu berücksichtigen. Bevorzugt kann die Type der virtuellen Schweißelektrode dabei mit der Type des Schulungs-Handschweißbrenners 6 mitidentifiziert werden. Es ist aber auch denkbar, eine Schweißelektrode als Bestandteil eines Schulungs-Handschweißbrenners 6 vorzusehen und diese Schweißelektrode ebenfalls mit IR-reflektierenden Referenzmarkern 73 zu versehen, sodass eine Schweißelektrode auch direkt identifiziert und in der Folge als virtuelle Schweißelektrode in der Simulation berücksichtigt werden kann.
Hinsichtlich der gegenständlich betrachteten Schulungs-Handschweißbrenner 6 können überdies verschiedene Überprüfungen vorgesehen sein, die vorzugsweise in der Simulationseinheit 9 vorgenommen werden. So kann eine Überprüfung von Anschlüssen eines Schulungs-Handschweißbrenners 6, wie eines Masseanschlusses und/oder eines Brenneranschlusses vorgesehen sein, oder eine Überprüfung, ob der richtige Schulungs- Handschweißbrenner 6 verwendet wird, was insbesondere im Rahmen des MIG/MAG- Schweißens Relevanz besitzt. Weiters kann überprüft werden, ob ein Schulungs- Handschweißbrenners 6 an der richtigen elektrischen Polarität angeschlossen ist, oder ob ein Masseanschluss mit einem Schulungs-Werkstück 4 korrekt verbunden ist, oder ob ein Masseanschluss allgemein richtig angeschlossen ist und/oder ob ein Schweißkreis geschlossen ist. Die genannten Überprüfungen bzw. die Ergebnisse dieser Überprüfungen können am Mixed-Reality-Display 801 graphisch ausgegeben werden, wobei insbesondere auf fehlerhafte oder fehlende Verbindungen aufmerksam gemacht werden kann, und darüber hinaus im Fall einer fehlerhaften oder fehlenden Verbindung Hinweise für eine geeignete Korrektur vorgesehen sein können.
Dazu kann im ersten Referenzmuster 72 zur Individualisierung des Schulungs- Werkstücks 4 ein erster Abstand zwischen den IR-reflektierenden Referenzmarkern 71 vorgesehen sein, um welchen die IR-reflektierenden Referenzmarkern 71 von den jeweils benachbarten IR- reflektierenden Referenzmarkern 71 beabstandet sind, und im zweiten Referenzmuster 72 zur Individualisierung des Schulungs-Werkstücks 4 ein zweiter Abstand, welcher vom ersten Abstand verschieden ist.
Auch andere Eigenschaften von Mustern können zur Unterscheidung der eingesetzten Referenzmuster 72, 74 eingesetzt werden, wie unterschiedliche Gitterstrukturen. Auch können die IR-reflektierenden Referenzmarkern 71 , 73 voneinander verschiedene Fraktale bilden. Voneinander verschiedene Fraktale können beispielsweise auf Basis von verschiedenen Mandelbrot-Mengen erzeugt werden. Referenzmuster können aber auch mithilfe von Zufallsgeneratoren erzeugt werden oder empirisch im Rahmen der Auslegung der Schweißschulungsanordnung 1 festgelegt werden.
Ein wichtiger Vorteil der erfindungsgemäßen Verwendung von IR-reflektierenden Referenzmarker ist, dass im Vergleich zum Stand der Technik wesentlich kleinere Referenzmarker eingesetzt werden können. Konkret können die Durchmesser der IR- reflektierenden Referenzmarkern 71, 73 in einem Bereich zwischen 0,1 mm und 5 mm oder in einem Bereich zwischen 0,1 mm und 3 mm oder in einem Bereich zwischen 0,1 mm und 1 mm gewählt werden.
Die Durchmesser der IR-reflektierenden Referenzmarker 71, 73 können auch zur Unterscheidung verschiedener Referenzmuster 72, 74 herangezogen werden. So können im ersten Referenzmuster 72 IR-reflektierende Referenzmarker 71 mit einem ersten Durchmesser verwendet werden, beispielsweise von 0,5 mm oder 1,5 mm oder 2,5 mm oder 3,5 mm, und im zweiten Referenzmuster 74 IR-reflektierende Referenzmarker 74 mit einem zweiten Durchmesser eingesetzt werden, beispielsweise von 0,1 mm oder 1 ,1 mm oder 2,1 mm oder 3,1 mm.
Um eine Erfassung der von den IR-reflektierenden Referenzmarkern individualisierten Objekten zuverlässig gewährleisten zu können, ist sicherzustellen, dass die nicht von IR- reflektierenden Referenzmarkern 71 , 73 bedeckten Teile der Oberflächen der Objekte weniger IR-reflektierend sind als die Marker selbst, dass also die zwischen den IR- reflektierenden Referenzmarkern 71 , 73 liegenden Teile der Oberfläche des Schulungs- Werkstücks 4 und die zwischen den IR-reflektierenden Referenzmarkern 71 , 73 liegenden Teile der Oberfläche des Schulungs-Handschweißbrenners 6 und die zwischen den IR- reflektierenden Referenzmarkern 71 , 73 liegenden Teile der Oberfläche des Mixed-Reality- Zielobjekts T weniger IR-reflektierend sind als die IR-reflektierenden Referenzmarker 71 , 73, 75.
In einer weiteren Ausführungsform können die Reflexionseigenschaften der Referenzmarker und der Oberflächen des Schulungs-Werkstücks 4 und des Schulungs- Handschweißbrenners 6 auch invers zu den bisher beschriebenen Ausführungsformen gestaltet sein. Demnach können die Oberflächen des Schulungs-Werkstücks 4 und des Schulungs-Handschweißbrenners 6 stärker reflektierend als die Referenzmarker gestaltet sein. Auch auf diese Weise können von der IR-Kamera detektierbare Referenzmuster an Schulungs- Werkstück 4 und des Schulungs-Handschweißbrenner 6 herbeigeführt werden.
Es sei angemerkt, dass der Schulungs-Handschweißbrenner 6 als realer Handschweißbrenner, beispielsweise als realer MIG-Handschweißbrenner oder als realer MAG-Handschweißbrenner oder realer TIG-Handschweißbrenner oder realer E- Handschweißbrenner, ausgeführt sein kann. Im Rahmen der gegenständlichen Erfindung ist es also möglich, von einer realen Schweißanordnung zum realen Schweißen einen realen Handschweißbrenner zu entnehmen, diesen mit IR-reflektierenden Referenzmarker 73 mit einem den Handschweißbrenner individualisierenden Referenzmuster 74 auszustatten, und den realen Handschweißbrenner damit bei der Durchführung des virtuellen Handschweißvorganges als Schulungs-Handschweißbrenner 6 einzusetzen.
In einer vorzugsweisen Ausgestaltung eines Schulungs-Handschweißbrenners 6 können am Schulungs-Handschweißbrenner 6 wie auf einem realen Handschweißbrenner Bedienelemente S1 , S2, wie Schalter, Taster, Schieberegler usw., vorgesehen sein. Bei realen Handschweißbrennern werden derartige Bedienelemente S1 , S2 dazu herangezogen, um einen Schweißvorgang zu steuern, beispielsweise zu beginnen, also z.B. einen Lichtbogen zu zünden, oder eine Schweißstromstärke zu variieren, oder um eine Drahtvorschubgeschwindigkeit zu verändern. Bevorzugterweise kann ein Schulungs- Handschweißbrenners 6 über die gleichen Bedienelemente S1, S2 verfügen und beispielsweise mithilfe einer Kabelverbindung durch diese Bedienelemente S1, S2 erzeugten Steuersignale an die Simulationseinheit 9 weitergeben. In der Simulationseinheit 9 kann die Wirkung dieser Steuersignale in der Folge in der Simulation des Handschweißvorganges berücksichtigt werden, also die simulierte Schweißung begonnen oder unterbrochen werden, ein simulierter Drahtvorschub beschleunigt oder gebremst werden oder ein simulierter Schweißstrom erhöht oder reduziert werden.
In diesem Zusammenhang wurde erkannt, dass aufgrund der erfindungsgemäßen Gestaltung der Referenzmarker 71 , 73 eine fehlerfreie Durchführung von virtuellen Handschweißvorgängen sogar noch möglich ist, wenn sich die RGB-Kamera 803 so nahe am Schulungs-Werkstück 4 befindet, dass es zur Berührung von RGB-Kamera 803 und Schulungs-Werkstück 4 kommt.
Fig.8 zeigt mehrere mögliche Ausgestaltungsmöglichkeiten eines ersten Referenzmusters 72 zur Individualisierung verschiedener Schulungs-Werkstücke 4. Es ist erkennbar, dass die IR- Referenzmarker 71 aufgrund ihrer geringen Größe auch auf den Stirnseiten und Seitenflächen der Schulungs-Werkstücke 4 angebracht werden können. Die zu Fig.7 gemachten Ausführungen zur Gestaltung der IR-reflektierenden Referenzmarker 71 gelten ohne Einschränkung auch für die IR-reflektierenden Referenzmarker 71 auf Schulungs- Werkstücken 4 wie in Fig.8.
Die IR-reflektierenden Referenzmarker 71, 73 können beispielsweise in Form einer Klebefolie auf die Oberfläche am Schulungs- Werkstück 4 aufgebracht werden oder aber auch auf die Oberfläche des Schulungs-Werkstücks 4 aufgemalt, aufgedruckt, aufgeprägt werden oder auch durch ein Beschichtungsverfahren aufgebracht werden. Ferner wäre es auch möglich, durch Energieeinbringung auf die Oberfläche wie z.B. in Form eines Gravierungslasers derartige IR-reflektierende Referenzmarker 71, 73 auf einer Oberfläche eines Schulungs-Werkstücks 4 vorzusehen.
Fig.9 zeigt eine weitere Ausgestaltungsmöglichkeit eines ersten Referenzmusters 72 zur Individualisierung eines Schulungs-Werkstücks 4. Hervorzuheben am in Fig.9 gezeigten Referenzmuster 72 sind zwei im oberen Teil des Schulungs-Werkstücks 4 angeordnete Mulden 16. Die Mulden 16 stellen Vertiefungen, also Absenkungen der Oberfläche des Schulungs- Werkstücks 4 dar. In diesen Vertiefungen sind IR-reflektierende Referenzmarkers 71 angeordnet, die aufgrund der Vertiefung aber nur aus bestimmten Sichtwinkeln von der IR-Kamera 804 erfassbar sind.
Fig.10 zeigt eine Mulde 16 zur Anordnung eines IR-reflektierenden Referenzmarkers 71 in Detailansicht. Durch den Umstand, dass in einer Mulde 16 angeordnete IR-reflektierende Referenzmarkers 71 nur aus bestimmten Sichtwinkeln von der IR-Kamera 804 erfassbar sind, kann bei deren Detektion beispielsweise auf die räumliche Orientierung des Schulungs-Werkstücks 4 geschlossen werden. So sind in der in Fig.9 gezeigten Situation beide in den Mulden 16 angeordneten IR-reflektierende Referenzmarker 71 ersichtlich, was auf einer Orientierung des Schulungs-Werkstücks 4 schließen lässt, bei der eine Längsseite des Schulungs- Werkstücks 4 der IR-Kamera 804 zugewandt ist. Ist jedoch nur ein in einer Mulde 16 angeordneter IR-reflektierender Referenzmarker 71 ersichtlich, ist von einer Orientierung des Schulungs-Werkstücks 4 auszugehen, bei der der IR-Kamera 804 eine Querseite zugewandt ist.
Fig.11a bis 11c zeigen weiters die Aktivierung eines Menüs M auf dem Mixed-Reality-Display des Mixed-Reality-Headsets 800 bei Erfassung eines Mixed-Reality-Zielobjekts T durch die IR-Kamera 804. Um die Aktivierung des Menüs M zu ermöglichen, ist am Mixed-Reality- Zielobjekt T eine dritte Mehrzahl von IR-reflektierenden Referenzmarkern 75 in einem das Mixed-Reality-Zielobjekt T individualisierenden dritten Referenzmuster 76 angeordnet. Wird zumindest ein Teil des dritten Referenzmusters 76 von der IR-Kamera 804 erfasst, wird die Darstellung des Menüs M am Mixed-Reality-Display 801 ausgelöst. Das Mixed-Reality- Zielobjekt T kann dazu in gewünschter Position in der 3D-Schweißumgebung 3 angeordnet werden.
In einer bevorzugten Ausgestaltung der Erfindung kann die Orientierung des Menüs M von der räumlichen Orientierung des Mixed-Reality-Zielobjekts T abhängig sein, sodass sich die räumliche Orientierung des Menüs M ändert, wenn sich die räumliche Orientierung Mixed- Reality-Zielobjekts T ändert.
In einer weiteren vorzugsweisen Ausgestaltung der Erfindung kann auch an einem Schulungs-Werkstück 4 ein weiteres Referenzmuster 77 angeordnet sein, welches ebenso ein Menü M zu Anzeige bringen kann. Wie im Fall des Mixed-Reality-Zielobjekts T kann die Orientierung des angezeigten Menüs M in diesem Fall von der räumlichen Orientierung des Schulungs-Werkstück 4 abhängig gemacht werden.
Anhand des angezeigten Menüs M kann eine Reihe von Funktionen umgesetzt werden. So kann das Menü M ausgestaltet sein, um den zumindest einen Schulungs-Schweißparameter ps zu modifizieren, wodurch letztlich der gesamte virtuelle Handschweißvorgang modifiziert und verändert werden kann.
Die oben beschriebene Darstellung eines Menüs M kann aber auch auf einem weiteren Anzeigeelement 14 erfolgen, welches beispielsweise in Form eines Tablets lösbar mit der Simulationseinheit 9 verbunden ist. Auf diese Weise können neben dem Handschweißer 2 auch andere Personen das Menü verfolgen und gegebenenfalls auch bedienen. In einer vorteilhaften Ausgestaltung der Erfindung kann vorgesehen sein, ein Smartphone mit der Schweißschulungsanordnung 1 zu synchronisieren und das Display des Smartphones zur Anzeige des Menüs heranzuziehen.
In einer weiteren vorteilhaften Ausgestaltung der Erfindung kann der Schulungs- Handschweißbrenner 6 mit einem weiteren Bedienelement ausgestattet sein, welches die Bedienung des angezeigten Menüs M erlaubt.
Zu diesem Zweck kann zunächst die Orientierung des Schulungs-Handschweißbrenner 6 auf die bereits beschriebene Art und Weise ermittelt werden. Darauf aufbauend kann ein durch die Orientierung des Schulungs-Handschweißbrenner 6 identifiziertes Menü-Element im Menü M ermittelt werden, beispielsweise durch die Bestimmung eines Menü-Elements, welches von einer im Zuge der Identifikation ermittelten, vom Schulungs- Handschweißbrenner 6 ausgehenden Gerade geschnitten wird. Ist ein Menü-Element identifiziert, kann es durch Betätigung des weiteren Bedienelements aktiviert und/oder deaktiviert werden.
Die Betätigung/Bestätigung von Menü-Elementen des Menüs M kann einerseits durch Anzielen einer von einem Menü-Element ausgehenden, virtuellen Geraden des Menüs, wobei die virtuelle Gerade dabei auch angezeigt werden kann, und durch anschließenden Tastendruck eines Bedienelements S1 , S2 erfolgen, wie in den Figuren 11a und 11b gezeigt. Weiters kann zur Auswahl eines Menü-Elements auch die auf dem Gebiet der Mensch- Computer-Interaktion etablierte Methode des „Dwell-Based-Pointings“ („Anzielen und Laden“) eingesetzt werden, und ebenso kann ein Menü-Element durch virtuelles Berühren mit dem Schulungs-Handschweißbrenner 6 erfolgen.
Weiters zeigen Fig.12a und Fig.12b eine sogenannte Schweißwurzel 15 als Gegenstand einer weiteren vorteilhaften Ausgestaltung der Erfindung. In Fig.12a ist die Unterseite I eines Schulungs-Werkstücks 4 gezeigt, in Fig.12b die gegenüberliegende Oberseite II. An der in Fig.12b gezeigten Oberseite II ist eine virtuelle Schweißnaht 13 zu sehen, welche auf der Unterseite I zu einer sogenannten Schweißwurzel 15 führt.
Konkret kann die Simulationseinheit 9 in einer vorteilhaften Weise ausgestaltet sein, um eine durch den virtuellen Handschweißvorgang am Schulungs-Werkstück 4 erzeugte virtuelle Schweißwurzel 15 oder eine virtuelle Durchschweißung oder einen virtuellen Längsriss oder einen virtuellen Querriss durch die Schweißnaht 13 zunächst zu ermitteln. Aufbauend auf einer derartigen Ermittlung kann die Simulationseinheit 9 vorteilhafterweise ausgestaltet sein, die ermittelte virtuelle Schweißwurzel 15 oder die ermittelte virtuelle Durchschweißung oder den ermittelten virtuellen Längsriss oder den ermittelten virtuellen Querriss dem zum aktuellen Zeitpunkt Takt vorliegenden RGB-Bild zu überlagern. Die Darstellung einer Schweißwurzel 15 oder eines Querrisses oder eines Längsrisses ist insbesondere in Fällen von Interesse, in denen während des virtuellen Handschweißvorganges das Schulungs-Werkstück 4 analysiert wird, beispielsweise indem das Schweißen unterbrochen wird und das Schulungs-Werkstück 4 von allen Seiten betrachtet wird, beispielsweise von der Unterseite, oder indem das Schulungs-Werkstück 4 gedreht wird. Die Möglichkeit, in solchen Fällen eine Schweißwurzel 15 zu betrachten oder zu untersuchen, ob es zu einer Durchschweißung des Werkstücks gekommen ist, macht den virtuellen Schweißvorgang mitunter in einem entscheidenden Maß realistischer.

Claims

Patentansprüche
1. Schweißschulungsanordnung (1) zur Durchführung eines virtuellen Handschweißvorganges, aufweisend ein Schulungs-Werkstück (4); einen bewegbaren Schulungs-Handschweißbrenner (6); eine erste Mehrzahl von IR-reflektierenden Referenzmarkern (71), welche in einem das Schulungs-Werkstück (4) individualisierenden ersten Referenzmuster (72) am Schulungs-Werkstück (4) angeordnet sind; eine zweite Mehrzahl von IR-reflektierenden Referenzmarkern (73), welche in einem den Schulungs-Handschweißbrenner (6) individualisierenden zweiten Referenzmuster (74) am Schulungs-Handschweißbrenner (6) angeordnet sind; ein Mixed-Reality-Headset (800), aufweisend a) einen vorgegebenen geometrischen Headset-Bezugspunkt (802); b) ein Mixed-Reality-Display (801) zur Anzeige einer Sequenz von Mixed-Reality-Bildern (12) des virtuellen Handschweißvorganges; c) eine RGB-Kamera (803) mit einem räumlichen RGB-Sichtfeld (809) zur Erfassung von RGB-Bildern von sich im RGB-Sichtfeld (809) befindenden Objekten, wobei sich während der Durchführung des virtuellen Handschweißvorganges zumindest ein Teil des Schulungs-Werkstücks (4) und zumindest ein Teil des Schulungs- Handschweißbrenners (6) im RGB-Sichtfeld (809) befinden, und wobei das Mixed- Reality-Display (801) und die RGB-Kamera (803) entlang einer Sichtlinie (10) des Mixed-Reality-Headsets (800) angeordnet sind; d) eine IR-Kamera (804), welche in einer vorgegebenen Relativposition relativ zur RGB- Kamera (803) angeordnet ist, mit einem räumlichen I R-Sichtfeld (810) zur Erfassung von I R-Bildern von sich im I R-Sichtfeld (810) befindenden IR-reflektierenden Referenzmarkern (71 , 73), wobei das I R-Sichtfeld (810) größer als das RGB-Sichtfeld (809) ist und wobei sich das I R-Sichtfeld (810) und das RGB-Sichtfeld (809) zumindest teilweise überlappen, wobei sich während der Durchführung des virtuellen Handschweißvorganges zumindest ein Teil des ersten Referenzmusters (72) und zumindest ein Teil des zweiten Referenzmusters (74) im I R-Sichtfeld (810) befinden; eine Simulationseinheit (9), welche ausgestaltet ist, um a) aus den mit den I R-Bildern erfassten Teilen des ersten sowie des zweiten Referenzmusters (72, 74) eine Geometrie und/oder eine Form und/oder eine Type des Schulungs-Handschweißbrenners (6) sowie des Schulungs-Werkstücks (4) und einen zeitlichen Verlauf der Raumlagen des Schulungs-Handschweißbrenners (6) sowie des Schulungs-Werkstücks (4) relativ zum Headset-Bezugspunkt (802) zu ermitteln; b) unter Berücksichtigung zumindest eines vorgegebenen Schulungs- Schweißparameters (ps) und unter Berücksichtigung eines, aus dem zeitlichen Verlauf der Raumlage des Schulungs-Handschweißbrenners (6) ermittelten, zeitlichen Positionsverlaufs einer virtuellen Schweißelektrode des Schulungs- Handschweißbrenners (6) eine virtuelle Schweißnaht (13) am Schulungs-Werkstück (4) zu ermitteln; c) zumindest jenen Teil der bis zu einem aktuellen Zeitpunkt Takt des virtuellen Handschweißvorganges ermittelten virtuellen Schweißnaht (13), welcher innerhalb des zum aktuellen Zeitpunkt Takt vorliegenden RGB-Sichtfeldes (810) liegt, dem zum aktuellen Zeitpunkt Takt vorliegenden RGB-Bild zu überlagern, um ein Mixed- Reality- Bild (12) des virtuellen Handschweißvorganges zum aktuellen Zeitpunkt Takt zu erzeugen; d) das ermittelte Mixed-Reality-Bild (12) an das Mixed-Reality-Display (801) zu übermitteln, um es als Teil der Sequenz von Mixed-Reality-Bildern (12) des virtuellen Handschweißvorganges am Mixed-Reality-Display (801) anzuzeigen.
2. Schweißschulungsanordnung (1) nach Anspruch 1 , dadurch gekennzeichnet, dass ein Mixed-Reality-Zielobjekt (T) vorgesehen ist, an welchem eine dritte Mehrzahl von IR- reflektierenden Referenzmarkern (75) in einem das Mixed-Reality-Zielobjekt (T) individualisierenden dritten Referenzmuster (76) angeordnet ist, dass das Mixed-Reality- Display (801) ausgestaltet ist, um bei Erfassung zumindest eines Teils des dritten Referenzmusters (76) durch die IR-Kamera (804) ein Menü zur Änderung des zumindest einen Schulungs-Schweißparameters (ps) am Mixed-Reality-Display (801) anzuzeigen, und dass der zumindest eine Schulungs-Schweißparameter (ps) durch Bedienung des am Mixed-Reality-Display (801) angezeigten Menüs modifizierbar ist.
3. Schweißschulungsanordnung (1) nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Durchmesser der IR-reflektierenden Referenzmarker (71 , 73, 75) in einem Bereich zwischen 0,1 mm und 5 mm oder in einem Bereich zwischen 0,1 mm und 3 mm oder in einem Bereich zwischen 0,1 mm und 1 mm liegen.
4. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die zwischen den IR-reflektierenden Referenzmarkern (71 , 73, 75) liegenden Teile der Oberfläche des Schulungs- Werkstücks (4) und die zwischen den IR-reflektierenden Referenzmarkern (71 , 73, 75) liegenden Teile der Oberfläche des Schulungs-Handschweißbrenners (6) und die zwischen den IR-reflektierenden Referenzmarkern (71 , 73, 75) liegenden Teile der Oberfläche des Mixed-Reality-Zielobjekts (T) weniger IR-reflektierend sind als die IR-reflektierenden Referenzmarker (71 , 73, 75) oder umgekehrt.
5. Schweißschulungsanordnung (1) nach Anspruch 1 , dadurch gekennzeichnet, dass das Mixed-Reality-Headset (800) ein Gewichts-Ausgleichselement (807) aufweist, welches einem, sich aufgrund des Gewichts der RGB-Kamera (803) und/oder des Gewichts der IR- Kamera (804) und/oder des Gewichts des Mixed-Reality-Displays (801) ausbildenden und normal zur Sichtlinie (10) des Mixed-Reality-Headsets (800) wirkenden Drehmoment (Tg) entgegenwirkt.
6. Schweißschulungsanordnung (1) nach Anspruch 5, dadurch gekennzeichnet, dass das Gewichts-Ausgleichselement (807) in seiner geometrischen Form veränderbar und/oder in seiner Position am Mixed-Reality-Headset (800) verstellbar ist.
7. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der zumindest eine vorgegebene Schulungs- Schweißparameter (ps) einer Werkstückgeometrie oder einer Schweißstromstärke oder einer Schweißspannung oder einer Schweißgeschwindigkeit oder einer Wartezeit oder einer Vorheiztemperatur oder einer Drahtvorschubgeschwindigkeit oder einer Lichtbogenlänge oder einer Schweißart entspricht.
8. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Simulationseinheit (9) ein, vorzugsweise von der Simulationseinheit (9) lösbares, Anzeigeelement (14) zur Anzeige der Sequenz von Mixed- Reality-Bildern (12) des virtuellen Handschweißvorganges aufweist.
9. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Werkstückhalterung (5) vorgesehen ist, an der das Schulungs-Werkstück (4) montierbar ist.
10. Schweißschulungsanordnung (1) nach Anspruch 9, dadurch gekennzeichnet, dass das Schulungs-Werkstück (4) magnetisch an der Werkstückhalterung (5) montierbar ist.
11. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Simulationseinheit (9) am Mixed-Reality-Headset (800) angeordnet ist.
12. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Simulationseinheit (9) ausgestaltet ist, um ausgehend von der ermittelten virtuellen Schweißnaht (13) in einer nachfolgenden mechanischen Simulation ein virtuelles metallurgisches Gefüge und/oder einen virtuellen spannungsinduzierten Verzug und/oder eine virtuelle Kornstruktur des metallurgischen Gefüges, welche sich als Folge der virtuellen Schweißnaht (13) im Schul ungs- Werkstück (4) einstellen können, zu ermitteln.
13. Schweißschulungsanordnung (1) nach Anspruch 9, dadurch gekennzeichnet, dass die Simulationseinheit (9) ausgestaltet ist, um anhand einer der in der nachfolgenden mechanischen Simulation ermittelten Größen einen Schweiß-Qualitätsparameter, welcher eine Qualität und/oder eine Güte der virtuellen Schweißnaht (13) beschreibt, zu ermitteln.
14. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Simulationseinheit (9) ausgestaltet ist, um den vorliegenden RGB-Bildern eine vorgegebene, durch den virtuellen Handschweißvorgang zu erzeugende, virtuelle Ideal-Schweißnaht (131) zu überlagern, und dass das Mixed-Reality- Display (801) ausgestaltet ist, um die mit der virtuellen Ideal-Schweißnaht (131) überlagerten RGB-Bilder anzuzeigen.
15. Schweißschulungsanordnung (1) nach Anspruch 11, dadurch gekennzeichnet, dass die Simulationseinheit (9) ausgestaltet ist, einen Naht-Qualitätsparameter zu ermitteln, welcher eine Abweichung zwischen der ermittelten virtuellen Schweißnaht (13) und der vorgegebenen Ideal-Schweißnaht (131) beschreibt.
16. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Simulationseinheit (9) ausgestaltet ist, um eine durch den virtuellen Handschweißvorgang am Schulungs-Werkstück (4) erzeugte virtuelle Schweißwurzel (15) oder eine virtuelle Durchschweißung oder einen virtuellen Längsriss oder einen virtuellen Querriss zu ermitteln, und dass die Simulationseinheit (9) ausgestaltet ist, die ermittelte virtuelle Schweißwurzel (15) oder die ermittelte virtuelle Durchschweißung oder den ermittelten virtuellen Längsriss oder den ermittelten virtuellen Querriss dem zum aktuellen Zeitpunkt Takt vorliegenden RGB-Bild zu überlagern.
17. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Schulungs-Werkstück (4) zumindest eine Mulde oder zumindest eine Vertiefung aufweist und dass in dieser zumindest einen Mulde oder in dieser zumindest einen Vertiefung ein Referenzmarker (71) des ersten Referenzmusters (72) angeordnet ist.
18. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Schulungs-Handschweißbrenner (6) einem realen WIG-Handschweißbrenner oder einem realen MIG-Handschweißbrenner oder einem realen MAG-Handschweißbrenner oder einem realen E-Handschweißbrenner entspricht.
19. Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass am Mixed-Reality-Headset (800) weitere Sensoren vorgesehen sind, vorzugsweise ein Gyroskop und/oder ein Beschleunigungssensor und/oder ein Annäherungssensor, welche Sensordaten zur Ermittlung der räumlichen Orientierung des Schulungs-Werkstücks (4) und/oder des Schulungs-Handschweißbrenners (6) und/oder des Mixed-Reality-Zielobjekts (T) im dreidimensionalen Raum erfassen, dass die von den weiteren Sensoren erfassten Sensordaten an die Simulationseinheit (9) übermittelt werden und dass die Simulationseinheit (9) aus den übermittelten Sensordaten die räumliche Orientierung des Schulungs-Werkstücks (4) und/oder des Schulungs-Handschweißbrenners (6) und/oder des Mixed-Reality-Zielobjekts (T) im dreidimensionalen Raum ermittelt.
20. Verfahren zur Durchführung eines virtuellen Handschweißvorganges mit einer Schweißschulungsanordnung (1) nach einem der vorhergehenden Ansprüche, wobei ein Handschweißer (2) das Mixed-Reality-Headset (800) der Schweißschulungsanordnung (1) trägt; der Handschweißer (2) den Schulungs-Handschweißbrenner (6) der Schweißschulungsanordnung (1) zur Erzeugung einer virtuellen Schweißnaht (13) am Schulungs-Werkstück (4) der Schweißschulungsanordnung (1) manuell bewegt; mittels der RGB-Kamera (803) der Schweißschulungsanordnung (1) RGB-Bilder der sich im RGB-Sichtfeld (809) der RGB-Kamera (803) befindenden Teile des Schulungs- Handschweißbrenners (6) und des Schulungs-Werkstücks (4) erfasst werden; mittels der IR-Kamera (804) der Schweißschulungsanordnung (1) I R-Bilder von sich im I R-Sichtfeld (810) der IR-Kamera (804) befindenden IR-reflektierenden Referenzmarkern (71 , 73) erfasst werden; in der Simulationseinheit (9) der Schweißschulungsanordnung (1): a) eine Geometrie und/oder eine Form und/oder eine Type des Schulungs- Handschweißbrenners (6) sowie des Schulungs-Werkstücks (4) aus den erfassten IR-Bildern ermittelt wird; b) ein zeitlicher Verlauf der Raumlagen des Schulungs-Handschweißbrenners (6) und des Schulungs-Werkstücks (4) relativ zum Headset-Bezugspunkt (802) des Mixed- Reality-Headsets (800) der Schweißschulungsanordnung (1) aus den mit den IR- Bildern erfassten Teilen des ersten sowie des zweiten Referenzmusters (72, 74) ermittelt wird; c) eine virtuelle Schweißnaht (13) am Schulungs-Werkstück (4) unter Berücksichtigung zumindest eines vorgegebenen Schulungs-Schweißparameters (ps) und eines zeitlichen Positionsverlauf einer virtuellen Schweißelektrode aus dem zeitlichen Verlauf der Raumlage des Schulungs-Handschweißbrenners (6) ermittelt wird; d) zumindest jener Teil der bis zu einem aktuellen Zeitpunkt Takt des virtuellen Handschweißvorganges ermittelten virtuellen Schweißnaht (13), welcher innerhalb des zum aktuellen Zeitpunkt Takt vorliegenden RGB-Sichtfeldes (809) liegt, über das zum aktuellen Zeitpunkt Takt vorliegende RGB-Bild überlagert wird, um ein Mixed- Reality-Bild (12) des virtuellen Handschweißvorganges zum aktuellen Zeitpunkt Takt zu erzeugen; das ermittelte Mixed-Reality-Bild (12) als Teil einer Sequenz von Mixed-Reality-Bildern (12) des virtuellen Handschweißvorganges am Mixed-Reality-Display (801) des Mixed- Reality-Headsets (800) der Schweißschulungsanordnung (1) angezeigt wird.
PCT/EP2023/065706 2022-06-14 2023-06-13 Schweissschulungsanordnung zur durchführung eines virtuellen handschweissvorganges Ceased WO2023242147A1 (de)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202380046907.9A CN119365912A (zh) 2022-06-14 2023-06-13 用于执行虚拟手工焊接过程的焊接培训系统
DE112023001944.4T DE112023001944A5 (de) 2022-06-14 2023-06-13 Schweißschulungsanordnung zur Durchführung eines virtuellen Handschweißvorganges
ATA9142/2023A AT527978B1 (de) 2022-06-14 2023-06-13 Schweißschulungsanordnung zur Durchführung eines virtuellen Handschweißvorganges
US18/874,770 US20250371993A1 (en) 2022-06-14 2023-06-13 Welding training assembly for performing a virtual manual welding process

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102022206024.5A DE102022206024A1 (de) 2022-06-14 2022-06-14 Schweißschulungsanordnung zur Durchführung eines virtuellen Handschweißvorganges
DE102022206024.5 2022-06-14

Publications (1)

Publication Number Publication Date
WO2023242147A1 true WO2023242147A1 (de) 2023-12-21

Family

ID=86899106

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2023/065706 Ceased WO2023242147A1 (de) 2022-06-14 2023-06-13 Schweissschulungsanordnung zur durchführung eines virtuellen handschweissvorganges

Country Status (5)

Country Link
US (1) US20250371993A1 (de)
CN (1) CN119365912A (de)
AT (1) AT527978B1 (de)
DE (2) DE102022206024A1 (de)
WO (1) WO2023242147A1 (de)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN119141048A (zh) * 2024-08-29 2024-12-17 中国水利水电第四工程局有限公司 一种蜗壳座环组焊浇筑质量控制方法
EP4604101A1 (de) 2024-02-15 2025-08-20 FRONIUS INTERNATIONAL GmbH Schulungs-e-handschweissbrenner, schulungs-stabelektrode und schweissschulungsanordnung zur durchführung eines virtuellen e-handschweissvorganges

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20250353097A1 (en) * 2024-05-20 2025-11-20 Illinois Tool Works Inc. Tig torch tracking attachments for welding technique monitoring systems
US20260127978A1 (en) * 2024-11-05 2026-05-07 Illinois Tool Works Inc. Weld training simulation systems with electromagnetic haptic feedback

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005053276A1 (de) 2004-11-08 2006-05-11 Pentax Corp. Digitalkamera
EP2863376A1 (de) 2012-06-13 2015-04-22 Seabery Soluciones S.L. Erweiterte, aus der ferne aktualisierbare vorrichtung zum schweisstraining auf basis von simulationen mit erweiterter realität
US20150352794A1 (en) 2014-06-05 2015-12-10 Commonwealth Scientific And Industrial Research Organisation Distortion prediction and minimisation in additive manufacturing
WO2016144744A1 (en) * 2015-03-09 2016-09-15 Illinois Tool Works Inc. Methods and apparatus to provide visual information associated with welding operations
US20180130377A1 (en) * 2016-11-07 2018-05-10 Lincoln Global, Inc. Communication between a welding machine and a live welding training device
US20180130226A1 (en) * 2016-11-07 2018-05-10 Lincoln Global, Inc. System and method for calibrating a welding trainer
CN207937787U (zh) * 2017-10-31 2018-10-02 塔普翊海(上海)智能科技有限公司 扩增实境仿真系统
RU2694147C1 (ru) 2016-04-06 2019-07-09 Сименс Акциенгезелльшафт Способ, считываемый компьютером носитель данных, компьютерная программа и симулятор для определения напряжений и отклонений форм в аддитивно изготавливаемой конструктивной структуре
WO2020056388A1 (en) 2018-09-13 2020-03-19 Board Of Regents Of The University Of Nebraska Simulating heat flux in additive manufacturing
US20200254572A1 (en) * 2019-02-12 2020-08-13 Illinois Tool Works Inc. Virtual markings in welding systems
US20200265750A1 (en) 2019-02-19 2020-08-20 Pedro Marquinez Systems for simulating joining operations using mobile devices
US10877266B2 (en) 2006-07-11 2020-12-29 Optimum Imaging Technologies Llc Digital camera with wireless image transfer
CN112454363A (zh) * 2020-11-25 2021-03-09 马鞍山学院 一种用于焊接操作的ar辅助机器人的控制方法
US20210158724A1 (en) 2019-11-25 2021-05-27 William Joshua Becker Weld training simulations using mobile devices, modular workpieces, and simulated welding equipment

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9368045B2 (en) 2012-11-09 2016-06-14 Illinois Tool Works Inc. System and device for welding training

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005053276A1 (de) 2004-11-08 2006-05-11 Pentax Corp. Digitalkamera
US10877266B2 (en) 2006-07-11 2020-12-29 Optimum Imaging Technologies Llc Digital camera with wireless image transfer
EP2863376A1 (de) 2012-06-13 2015-04-22 Seabery Soluciones S.L. Erweiterte, aus der ferne aktualisierbare vorrichtung zum schweisstraining auf basis von simulationen mit erweiterter realität
US20150352794A1 (en) 2014-06-05 2015-12-10 Commonwealth Scientific And Industrial Research Organisation Distortion prediction and minimisation in additive manufacturing
WO2016144744A1 (en) * 2015-03-09 2016-09-15 Illinois Tool Works Inc. Methods and apparatus to provide visual information associated with welding operations
RU2694147C1 (ru) 2016-04-06 2019-07-09 Сименс Акциенгезелльшафт Способ, считываемый компьютером носитель данных, компьютерная программа и симулятор для определения напряжений и отклонений форм в аддитивно изготавливаемой конструктивной структуре
US20180130377A1 (en) * 2016-11-07 2018-05-10 Lincoln Global, Inc. Communication between a welding machine and a live welding training device
US20180130226A1 (en) * 2016-11-07 2018-05-10 Lincoln Global, Inc. System and method for calibrating a welding trainer
CN207937787U (zh) * 2017-10-31 2018-10-02 塔普翊海(上海)智能科技有限公司 扩增实境仿真系统
WO2020056388A1 (en) 2018-09-13 2020-03-19 Board Of Regents Of The University Of Nebraska Simulating heat flux in additive manufacturing
WO2020167812A1 (en) 2019-02-12 2020-08-20 Illinois Tool Works Inc. Virtual markings in welding systems
US20200254572A1 (en) * 2019-02-12 2020-08-13 Illinois Tool Works Inc. Virtual markings in welding systems
US20200265750A1 (en) 2019-02-19 2020-08-20 Pedro Marquinez Systems for simulating joining operations using mobile devices
WO2020172309A1 (en) * 2019-02-19 2020-08-27 Seabery Soluciones, S.L. Systems for simulating joining operations using mobile devices
US20210158724A1 (en) 2019-11-25 2021-05-27 William Joshua Becker Weld training simulations using mobile devices, modular workpieces, and simulated welding equipment
CN112454363A (zh) * 2020-11-25 2021-03-09 马鞍山学院 一种用于焊接操作的ar辅助机器人的控制方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4604101A1 (de) 2024-02-15 2025-08-20 FRONIUS INTERNATIONAL GmbH Schulungs-e-handschweissbrenner, schulungs-stabelektrode und schweissschulungsanordnung zur durchführung eines virtuellen e-handschweissvorganges
CN119141048A (zh) * 2024-08-29 2024-12-17 中国水利水电第四工程局有限公司 一种蜗壳座环组焊浇筑质量控制方法

Also Published As

Publication number Publication date
CN119365912A (zh) 2025-01-24
DE102022206024A1 (de) 2023-12-14
AT527978B1 (de) 2026-02-15
DE112023001944A5 (de) 2025-03-06
AT527978A5 (de) 2025-07-15
US20250371993A1 (en) 2025-12-04

Similar Documents

Publication Publication Date Title
AT527978B1 (de) Schweißschulungsanordnung zur Durchführung eines virtuellen Handschweißvorganges
EP2326452B1 (de) Verfahren zur erzeugung eines zweidimensionalen bildes an einer ausgabevorrichtung über eine visualisierungsvorrichtung
DE102007033486B4 (de) Verfahren und System zur Vermischung eines virtuellen Datenmodells mit einem von einer Kamera oder einer Darstellungsvorrichtung generierten Abbild
DE102019009313B4 (de) Robotersteuerung, Verfahren und Computerprogramm unter Verwendung von erweiterter Realität und gemischter Realität
DE102018109463B3 (de) Verfahren zur Benutzung einer mehrgliedrigen aktuierten Kinematik, vorzugsweise eines Roboters, besonders vorzugsweise eines Knickarmroboters, durch einen Benutzer mittels einer mobilen Anzeigevorrichtung
DE102010038902B4 (de) Verfahren und Einrichtung zur Unterstützung der Ausbildung eines Handschweißers
WO2006092251A1 (de) Verfahren und vorrichtung zur bestimmung von optischen überdeckungen mit ar-objekten
US9773429B2 (en) System and method for manual welder training
EP2973513B1 (de) Import und analyse externer daten unter verwendung eines virtual-reality-schweisssystems
WO2015185972A1 (en) System and method for manual welder training
EP2801966A1 (de) Verfahren zur Simulation eines Schweissprozesses
DE202012013151U1 (de) System zur Charakterisierung manueller Schweissvorgänge
DE10335501A1 (de) Verfahren und Vorrichtung zum Schweißen oder Schneiden mit Laserstrahl
EP2989872B1 (de) Platziervorrichtung und platzierverfahren
DE212014000077U1 (de) Systeme zum Exportieren oder Verwenden von Schweisssequenzerdaten für externe Systeme
DE102004016331A1 (de) Vorrichtung und Verfahren zur gleichzeitigen Darstellung virtueller und realer Umgebungsinformationen
DE102013221850A1 (de) Verfahren und Vorrichtung zur Laserbeschriftung eines Bauteils
EP4293436A1 (de) Anordnung umfassend ein cnc-bearbeitungssystem und eine augmented-reality anzeigevorrichtung
EP4604101A1 (de) Schulungs-e-handschweissbrenner, schulungs-stabelektrode und schweissschulungsanordnung zur durchführung eines virtuellen e-handschweissvorganges
DE102024124614A1 (de) System und Verfahren zum präzisen Auftragschweißen
DE102013207323B4 (de) Kamerasystem für ein Fahrzeug und Fahrzeug
EP4728330A1 (de) Farbliche kennzeichnung relevanter bereiche in einer erweiterten oder virtuellen realität

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23732889

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
WWE Wipo information: entry into national phase

Ref document number: A 9142/2023

Country of ref document: AT

WWE Wipo information: entry into national phase

Ref document number: 112023001944

Country of ref document: DE

Ref document number: 18874770

Country of ref document: US

Ref document number: 202380046907.9

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 202517000546

Country of ref document: IN

WWP Wipo information: published in national office

Ref document number: 202380046907.9

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 202517000546

Country of ref document: IN

REG Reference to national code

Ref country code: DE

Ref legal event code: R225

Ref document number: 112023001944

Country of ref document: DE

WWP Wipo information: published in national office

Ref document number: 112023001944

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 23732889

Country of ref document: EP

Kind code of ref document: A1

WWP Wipo information: published in national office

Ref document number: 18874770

Country of ref document: US