KR20190124766A - 혼합 현실 뷰어 시스템 및 방법 - Google Patents

혼합 현실 뷰어 시스템 및 방법 Download PDF

Info

Publication number
KR20190124766A
KR20190124766A KR1020197029129A KR20197029129A KR20190124766A KR 20190124766 A KR20190124766 A KR 20190124766A KR 1020197029129 A KR1020197029129 A KR 1020197029129A KR 20197029129 A KR20197029129 A KR 20197029129A KR 20190124766 A KR20190124766 A KR 20190124766A
Authority
KR
South Korea
Prior art keywords
viewer
fixed
user
generation system
computer graphics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020197029129A
Other languages
English (en)
Other versions
KR102145140B1 (ko
Inventor
트래비스 코스에어트
웨이 예
Original Assignee
유니버셜 시티 스튜디오스 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유니버셜 시티 스튜디오스 엘엘씨 filed Critical 유니버셜 시티 스튜디오스 엘엘씨
Publication of KR20190124766A publication Critical patent/KR20190124766A/ko
Application granted granted Critical
Publication of KR102145140B1 publication Critical patent/KR102145140B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A63F13/245—Constructional details thereof, e.g. game controllers with detachable joystick handles specially adapted to a particular type of game, e.g. steering wheels
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A63F13/355—Performing operations on behalf of clients with restricted processing capabilities, e.g. servers transform changing game scene into an encoded video stream for transmitting to a mobile phone or a thin client
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/837—Shooting of targets
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/843—Special adaptations for executing a specific game genre or game mode involving concurrently two or more players on the same game device, e.g. requiring the use of a plurality of controllers or of a specific view of game data for each player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G21/00—Chutes; Helter-skelters
    • A63G21/04—Chutes; Helter-skelters with fixed rails
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G21/00—Chutes; Helter-skelters
    • A63G21/06—Chutes; Helter-skelters with passing arrangements for cars
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G27/00—Russian swings; Great wheels, e.g. Ferris wheels
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A63G31/16—Amusement arrangements creating illusions of travel
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G7/00—Up-and-down hill tracks; Switchbacks
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating three-dimensional [3D] models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6653—Methods for processing data by generating or executing the game program for rendering three dimensional images for altering the visibility of an object, e.g. preventing the occlusion of an object, partially hiding an object
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0145—Head-up displays characterised by optical features creating an intermediate image
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional [3D], e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/024—Multi-user, collaborative environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Aiming, Guidance, Guns With A Light Source, Armor, Camouflage, And Targets (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Motorcycle And Bicycle Frame (AREA)

Abstract

혼합 현실 뷰어 시스템은 안정된 플랫폼에 고정되도록 구성되는 뷰어를 포함― 뷰어는 해당 뷰어를 통해 테마를 시청하도록 사용자에 의해 작동 가능함 ―한다. 뷰어는 디스플레이 디바이스, 줌 제어부를 포함하는 사용자 인터페이스, 및 적어도 하나의 카메라를 포함하는 적어도 하나의 센서를 포함한다. 혼합 현실 시청 시스템은 뷰어에 통신 가능하게 결합되는 컴퓨터 그래픽 생성 시스템을 또한 포함한다. 컴퓨터 그래픽 생성 시스템은 뷰어의 적어도 하나의 카메라를 통해 캡처되는 이미지 데이터에 기초하여 현실 세계 환경의 스트리밍 미디어를 생성하고, 현실 세계 환경의 스트리밍 미디어에 합성되는 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두를 생성하고, 뷰어의 디스플레이 디바이스 상에 디스플레이되도록, 현실 세계 환경의 스트리밍 미디어를 합성된 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두와 함께 전송하도록 구성된다.

Description

혼합 현실 뷰어 시스템 및 방법
[관련 출원에 대한 상호 참조]
본원은, 전부 본 명세서에 참조로 포함되는, 2017년 3월 6일자로 출원된 "SYSTEMS AND METHODS FOR DIGITAL OVERLAY IN AN AMUSEMENT PARK ENVIRONMENT"라는 명칭의 미국 가특허 출원 제62/467,817호에 대한 우선권 및 이익을 주장한다.
[기술분야]
본 명세서에 개시되는 청구 대상은 놀이 공원 어트랙션(amusement park attractions)에 관한 것으로, 특히, 놀이 공원 어트랙션에서 증강된 가상 현실 경험(augmented and virtual reality experiences)을 제공하는 것에 관한 것이다.
놀이 공원 또는 테마 파크는 놀이 공원의 방문객(예컨대, 가족 및/또는 모든 연령대의 사람들)에게 즐거움을 제공함에 있어서 다양한 엔터테인먼트 어트랙션을 포함할 수 있다. 전통적으로, 해당 어트랙션은 장비, 가구, 건물 배치, 소품, 장식 등을 사용해서 확립될 수 있는 특정 테마 환경을 포함할 수 있다. 이는, 특정 테마 환경의 복잡성에 따라, 특정 테마 환경을 설정 및 교체하는 데 매우 어렵고 시간 소모적인 것이 될 수 있다. 또한, 모든 방문객에게 즐거움을 주는 특정 테마 환경을 설정하는 것은 매우 어려울 수 있다. 실제로, 동일한 특정 테마 환경이 일부 방문객에게는 매력적일 수 있지만, 다른 방문객들에게는 그렇지 않을 수도 있다. 따라서, 이러한 어트랙션에서는 종래의 기술에 비해 유연하고 효율적인 방식으로 어트랙션 테마를 변경하거나, 또는 특정한 테마의 피처(features; 지물)를 포함 또는 제거하는 것이 가능할 수 있는 어트랙션을 포함하는 것이 바람직함을 인식하고 있다. 또한, 이러한 어트랙션에 대한 방문객의 몰입적인 경험을 강화하는 한편, 방문객에게 더욱 개인화 또는 맞춤화된 경험을 제공하는 것이 바람직할 수 있음을 인식하고 있다.
본 개시물의 범위에 대응하는 특정 실시형태들을 아래에 요약한다. 이들 실시형태는 본 개시물의 범위를 제한하려는 것이 아니며, 오히려 이들 실시형태는 단지 본 발명의 실시형태들의 가능한 형태의 간단한 개요를 제공하려는 것이다. 실제로, 본 발명의 실시형태들은 아래에서 설명되는 실시형태들과 유사하거나 또는 상이할 수 있는 다양한 형태를 포함할 수 있다.
일 실시형태에 있어서, 혼합 현실 시청 시스템은 안정된 플랫폼에 고정되도록 구성되는 뷰어를 포함― 뷰어는 해당 뷰어를 통해 테마를 시청하도록 사용자에 의해 작동 가능함 ―한다. 뷰어는 디스플레이 디바이스, 줌 제어부를 포함하는 사용자 인터페이스, 및 적어도 하나의 센서를 포함하고, 적어도 하나의 센서는 적어도 하나의 카메라를 포함한다. 혼합 현실 시청 시스템은 뷰어에 통신 가능하게 결합되는 컴퓨터 그래픽 생성 시스템을 또한 포함한다. 컴퓨터 그래픽 생성 시스템은 뷰어의 적어도 하나의 카메라를 통해 캡처되는 이미지 데이터에 기초하여 현실 세계 환경의 스트리밍 미디어를 생성하고, 현실 세계 환경의 스트리밍 미디어에 합성되는 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두를 생성하고, 뷰어의 디스플레이 디바이스 상에 디스플레이되도록, 현실 세계 환경의 스트리밍 미디어를 합성된 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두와 함께 전송하도록 구성된다.
다른 실시형태에 있어서, 고정-위치 뷰어는 스트리밍 미디어를 사용자에게 디스플레이하도록 구성되는 디스플레이를 포함하고, 디스플레이된 스트리밍 미디어는 증강 현실(AR) 그래픽, 가상 현실(VR) 그래픽, 또는 이들 둘 모두를 포함하는 혼합 현실(MR) 환경을 포함한다. 고정-위치 뷰어는 고정-위치 뷰어 주위의 현실 세계 환경의 이미지 데이터를 캡처하도록 구성되는 카메라를 포함한다. 고정-위치 뷰어는 스트리밍 미디어의 생성과 관련된 정보를 수집하도록 구성되는 적어도 하나의 센서를 또한 포함한다.
다른 실시형태에 있어서, 방법은 컴퓨터 그래픽 생성 시스템을 통해 실시간 데이터를 수신 및 분석하는 단계를 포함하고, 실시간 데이터를 수신하는 단계는 고정-위치 뷰어의 적어도 하나의 센서 및 사용자 인터페이스로부터 컴퓨터 그래픽 생성 시스템을 통해 데이터를 수신하는 단계를 포함한다. 방법은 수신된 실시간 데이터에 기초하여 컴퓨터 그래픽 생성 시스템을 통해 게임 효과를 생성하는 단계를 포함하고, 게임 효과는 증강 현실(AR) 그래픽, 가상 현실(VR) 그래픽, 또는 이들 둘 모두를 포함한다. 방법은 생성된 게임 효과를 컴퓨터 그래픽 생성 시스템을 통해 현실 세계 환경의 시각화에 오버레이해서 혼합 현실 시각화를 생성하는 단계를 포함한다. 또한, 방법은 혼합 현실 시각화를 컴퓨터 그래픽 생성 시스템을 통해 고정-위치 뷰어에 전송하는 단계, 및 혼합 현실 시각화를 컴퓨터 그래픽 생성 시스템을 통해 고정-위치 뷰어의 디스플레이 상에 디스플레이하는 단계를 포함한다.
본 개시물의 이들 및 다른 특징, 양태, 및 장점은 도면 전체에 걸쳐 동일한 문자가 동일한 부분을 나타내는 첨부 도면을 참조하여 하기의 상세한 설명을 읽을 때 더욱 양호하게 이해될 것이다.
도 1은, 본 발명의 실시형태들에 따른, 하나 이상의 고정-위치 증강 현실 및/또는 가상 현실(AR/VR) 뷰어를 포함하는 AR/VR 시스템에 의해 강화되는 특정 테마 어트랙션을 갖는 놀이 공원의 실시형태를 예시하고;
도 2는, 본 발명의 실시형태들에 따른, 도 1의 고정-위치 AR/VR 뷰어의 실시형태의 사시도이고;
도 3은, 본 발명의 실시형태들에 따른, 도 1의 AR/VR 시스템의 실시형태의 블록도이고;
도 4는, 본 발명의 실시형태들에 따른, 도 1의 AR/VR 시스템에 의해 렌더링되는 AR 환경과 VR 환경 사이의 예시적인 천이를 예시하는 개략도이고;
도 5는, 본 발명의 실시형태들에 따른, 다수의 고정-위치 AR/VR 뷰어에 대하여 도 1의 AR/VR 시스템에 의해 렌더링되는 예시적인 AR/VR 환경을 예시하는 개략도이고;
도 6은, 본 발명의 실시형태들에 따른, 도 1의 AR/VR 시스템을 사용해서 AR/VR 경험을 생성하기 위한 프로세스를 예시하는 흐름도이다.
본 개시물의 하나 이상의 구체적인 실시형태가 후술될 것이다. 이들 실시형태의 간결한 설명을 제공하기 위해, 본 명세서에서는 실제 실시형태의 모든 특징을 설명하지는 않을 수도 있다. 임의의 공학 프로젝트 또는 설계 프로젝트에서와 같이, 임의의 이러한 실제 구현의 개발에 있어서는, 구현마다 달라질 수 있는 시스템-관련 및 비즈니스-관련 제약과 같은 개발자의 특정한 목표를 달성하기 위해 구현에 맞춘 다양한 결정이 이루어져야 한다는 점을 이해해야 한다. 또한, 이러한 개발 노력은 복잡하고 시간 소모적일 수 있지만, 그럼에도 불구하고 본 개시물의 이익을 갖는 당업자에게는 설계, 제작, 및 제조의 일상적인 과업일 수 있음을 이해해야 한다.
본 발명의 실시형태들은, 놀이 공원 또는 테마 파크의 어트랙션의 일부로서, 증강 현실(AR) 경험, 가상 현실(VR) 경험, 혼합 현실(예컨대, AR과 VR의 조합) 경험, 또는 이들의 조합을 제공하는 시스템 및 방법에 관한 것이다. 특히, AR 및/또는 VR(AR/VR) 시스템은 놀이 공원의 방문객에게 AR/VR 경험을 제공하기 위해 하나 이상의 뷰어를 포함할 수 있다. 예를 들어, 방문객은 뷰어를 통해 풍경을 응시할 수 있으며, 뷰어는 AR 경험, VR 경험, 또는 이들 두 경험의 조합을 가능하게 할 수 있다. 일 실시형태에 있어서, 뷰어는 고정-위치 뷰어(예컨대, 안정된 플랫폼에 또는 지면에 고정되는 쌍안경, 뷰 파인더, 또는 망원경과 유사한 뷰어)일 수 있다. 따라서, 뷰어를 고정-위치 AR/VR 뷰어라고 할 수 있다. 고정-위치 AR/VR 뷰어는 현실-세계 환경(예컨대, 물리적인 놀이 공원의 양태)의 실시간 이미지 데이터(예컨대, 실사용 중에 캡처되며 실질적으로 실시간으로 전송되는 사진 및/또는 비디오)를 캡처하는 데 사용될 수 있는 적어도 하나의 카메라를 포함할 수 있다. 고정-위치 AR/VR 뷰어는 디스플레이를 포함할 수 있다. 예를 들어, 고정-위치 AR/VR 뷰어는 고정-위치 AR/VR 뷰어를 사용하는 사용자의 각각의 눈에 제각기 대응하는 적어도 2개의 디스플레이를 포함할 수 있다. 고정-위치 AR/VR 뷰어는 사용자가 시야각을 변경하거나, 광경을 둘러보는 등을 할 수 있게 회전 및 경사지도록 설계될 수 있다.
AR/VR 시스템은 고정-위치 AR/VR 뷰어로부터 실시간 이미지 데이터(예컨대, 실사용 중에 캡처되며 실질적으로 실시간으로 전송되는 사진 및/또는 비디오)를 수신하는 컴퓨터 그래픽 생성 시스템을 포함할 수 있고, 현실-세계 환경의 비디오 스트림을 다양한 AR, VR, 또는 조합된 AR 및 VR(AR/VR) 그래픽 이미지와 함께 고정-위치 AR/VR 뷰어의 디스플레이에 렌더링할 수 있다. 일 실시형태에 있어서, 고정-위치 AR/VR 뷰어는 AR/VR 환경의 특정 영역에 대하여 줌-인 또는 줌-아웃하고 AR 환경과 VR 환경 사이를 천이하도록 작동할 수 있다. 특히, 사용자는 AR 환경의 영역(예컨대, 피처, 오브젝트)에 대하여 줌-인할 수 있으며, 사용자가 계속해서 줌-인하면, 비디오 스트림이 VR 환경으로 천이한다. 일 실시형태에 있어서, 고정-위치 AR/VR 뷰어는 AR/VR 환경의 피처 또는 오브젝트와 관여 또는 상호작용(예컨대, 오브젝트를 붙잡기, 선택하기, 조준하기, 및/또는 움직이기)하도록 고정-위치 AR/VR 뷰어의 사용자 인터페이스(예컨대, 하나 이상의 푸시 버튼, 조이스틱)를 통해 사용자에 의해 작동될 수 있다. 또한, AR/VR 시스템의 특정 실시형태들은, 예를 들어 일련의 네트워크화된 고정-위치 AR/VR 뷰어들을 사용해서 다수의 사용자에게 유사한 경험들을 제공할 수 있다.
본 발명의 실시형태들이 다양한 설정으로 구현될 수 있지만, 본 개시물의 특징을 갖는 예시적인 놀이 공원(10)이 도 1에 묘사된다. 예시된 바와 같이, 놀이 공원(10)은 특정 테마 어트랙션(12)을 포함한다. 특정 테마 어트랙션(12)은 해당 테마에 대응하는 고정된 장비, 건물 배치, 소품, 장식 등을 포함하는 물리적인 구조물(14)을 포함할 수 있다. 예시된 실시예에 있어서, 특정 테마 어트랙션(12)은 농가/헛간으로 장식된다. 특정 테마 어트랙션(12)은 놀이 공원(10)의 방문객에 대하여 보다 몰입적인, 개인화된, 및/또는 상호적인 경험을 생성하기 위해 하나 이상의 고정-위치 AR/VR 뷰어(16)를 포함하는 AR/VR 시스템(15)을 포함할 수 있다. 특히, 방문객 또는 사용자는 강화된 시청 경험을 위해 고정-위치 AR/VR 뷰어(16)를 통해 특정 테마 어트랙션(12)을 둘러볼 수 있다. 고정-위치 AR/VR 뷰어(16)는 안정된 플랫폼 또는 지면(18)에 고정될 수 있으며, 사용자(20)는 고정-위치 AR/VR 뷰어(16)에 접근해서 고정-위치 AR/VR 뷰어(16)를 사용하여 특정 테마 어트랙션(12)을 둘러볼 수 있다.
고정-위치 AR/VR 뷰어(16)는 일반적인 쌍안경 또는 뷰 파인더가 가질 수 있는 기능을 가질 수 있다. 예를 들어, 고정-위치 AR/VR 뷰어(16)는 특정 테마 어트랙션(12)의 여러 영역들을 보기 위해 사용자(20)에 의해 회전 또는 경사질 수 있다. 예를 들어, 고정-위치 AR/VR 뷰어(16)는 사용자(20)가 특정 테마 어트랙션(12)의 영역들을 줌-인 또는 줌-아웃할 수 있게 확대축소 효과를 가질 수 있다. 또한, 고정-위치 AR/VR 뷰어(16)는 AR 경험, VR 경험, 또는 이들 두 경험의 조합을 가능하게 할 수 있다. 특히, 고정-위치 AR/VR 뷰어(16)는 디스플레이(24) 상에 AR/VR 환경(22)을 렌더링할 수 있으며, AR/VR 환경(22)은 AR/VR 그래픽(26)을 포함할 수 있다. 예시된 실시예에 있어서, 고정-위치 AR/VR 뷰어(16)를 사용하지 않고 특정 테마 어트랙션(12)을 바라보는 방문객에게는 단지 헛간(28)만이 보일 수 있다. 그러나, 고정-위치 AR/VR 뷰어(16)를 사용하는 사용자(20)에게는 헛간(28) 뿐만 아니라, 헛간(28) 앞에 있는 2마리의 말(30)과 같은 AR/VR 그래픽(26)도 보일 수 있다.
고정-위치 AR/VR 뷰어(16)의 실시형태의 사시도가 도 2에 도시된다. 도시된 바와 같이, 고정-위치 AR/VR 뷰어(16)는 안정된 플랫폼 또는 지면(18)에 고정될 수 있다. 고정-위치 AR/VR 뷰어(16)는 디스플레이(24)를 포함하는 뷰어부(40), 및 고정-위치 AR/VR 뷰어(16)를 안정된 플랫폼 또는 지면(18)에 고정하는 고정부(42)를 포함할 수 있다. 사용자(20)는 시청 영역(44)에 서서 고정-위치 AR/VR 뷰어(16)의 디스플레이(24)를 들여다볼 수 있다. 디스플레이(24)는 하나의 디스플레이 또는 하나 이상의 디스플레이(예컨대, 사용자(20)의 각각의 눈에 제각기 대응하는 2개의 디스플레이(46))를 포함할 수 있다. 디스플레이(46)는 원형, 정사각형, 직사각형, 타원형 등과 같은 임의의 적절한 형상을 가질 수 있다. 디스플레이(46)는 특징적 치수(48)를 가질 수 있다. 일부 실시형태에 있어서, 디스플레이(24)는 사용자(20)에게 무엇이 제시되고 있는지를 사용자(20) 근처의 방문객들도 볼 수 있는 방식으로 구성될 수 있다. 예를 들어, 디스플레이(46)의 특징적 치수(48)는 사용자(20)의 뒤쪽에 있는 및/또는 인접해 있는 방문객들이 디스플레이(46) 상에 무엇이 보여지고 있는지를 볼 수 있도록 충분히 크다.
고정-위치 AR/VR 뷰어(16)는 시야각(49)을 갖는다. 일 실시형태에 있어서, 사용자(20)는 회전 방향(50)(예컨대, 안정된 플랫폼 또는 지면(18)에 대하여 실질적으로 평행함)을 따라, 회전 방향(52)(예컨대, 회전 방향(50)에 대하여 실질적으로 평행함)을 따라, 또는 이들의 조합에 따라, 뷰어부(40)를 회전 또는 경사지게 함으로써 시야각(49)을 변화시킬 수 있다. 일 실시형태에 있어서, 사용자(20)는 또한, 방향(54)(예컨대, 안정된 플랫폼 또는 지면(18)에 대하여 수직한 방향)을 따라 뷰어부(40)를 상승 또는 하강시킴으로써 시야각(49)을 변화시킬 수도 있다. 이해할 수 있는 바와 같이, 고정-위치 AR/VR 뷰어(16)는 도 3에서 논의되는 바와 같이 다른 하드웨어 및/또는 소프트웨어 구성요소를 포함할 수 있다.
도 3은 AR/VR 시스템(15)의 다양한 구성요소의 블록도이다. 예시된 실시형태에 있어서, AR/VR 시스템(15)은 통신 네트워크(62)를 통해 (예컨대, 놀이 공원(10) 내의) 컴퓨터 그래픽 생성 시스템(60)에 통신 및 작동 가능하게 결합되는 하나 이상의 고정-위치 AR/VR 뷰어(16)를 포함한다. 통신 네트워크(62)는 무선 로컬 에어리어 네트워크, 무선 와이드 에어리어 네트워크, 근거리 통신, 및/또는 이더넷 케이블, 파이버 등을 통한 유선 네트워크를 포함할 수 있다. 하나 이상의 고정-위치 AR/VR 뷰어(16)는 컴퓨터 그래픽 생성 시스템(60)에 신호 또는 데이터를 전송하고, 또한 그로부터 신호 또는 데이터를 수신해서 AR/VR 환경(22)(예컨대, 하나 이상의 고정-위치 AR/VR 뷰어(16)를 통해 제시되는 AR/VR 그래픽(26) 및/또는 음향 효과)을 생성할 수 있다. 컴퓨터 그래픽 생성 시스템(60)은 통신 네트워크(62)를 통해 데이터 서버(64)에 통신 가능하게 결합될 수 있다. 데이터 서버(64)는 사용자(20)의 사용자 정보를 저장 및/또는 처리할 수 있는 원격 또는 현장 데이터 서버일 수 있다. 사용자 정보는 지불 정보, 회원 정보, 개인 정보(예컨대, 연령, 신장, 특별 요구사항 등), 게임 정보(예컨대, 특정 테마 어트랙션(12)과 연관되는 비디오 게임에 관한 정보, 비디오 게임에서 사용자(20)가 연관되는 특정 캐릭터에 관한 정보, 사용자(20)의 게임 이력에 관한 정보) 등과 같이, 사용자(20)에 의해 제공되는, 또는 사용자(20)에 의해 승인되는 임의의 적절한 정보를 포함할 수 있다.
도 3에 예시된 바와 같이, 고정-위치 AR/VR 뷰어(16)는 센서(66), 사용자 인터페이스(68), 프리젠테이션 디바이스(70), 및 센서(66) 및 사용자 인터페이스(68)에 통신 가능하게 결합되는 데이터 인코더(72)를 포함할 수 있다. 데이터 인코더(72)는 센서(66) 및 사용자 인터페이스(68)에 의해 제공되는 데이터 또는 신호를 수신 및/또는 처리(예컨대, 인코딩)할 수 있다. 예를 들어, 인코더(72)는 특정 알고리즘에 따라 센서(66) 및 사용자 인터페이스(68)에 의해 제공되는 스트리밍 가능한 데이터를 수집하고, 인코딩된 데이터를 생성할 수 있는 하나 이상의 프로세서로서 구현될 수 있다. 인코더(72)는 예컨대, 통신 네트워크(62)를 통해 컴퓨터 그래픽 생성 시스템(60)에 통신 가능하게 결합되어, (센서(66) 및 사용자 인터페이스(68)로부터의 데이터 및 신호에 대응하는) 인코딩된 데이터를 컴퓨터 그래픽 생성 시스템(60)에 스트리밍할 수 있다. 인코더(72)는 실질적으로 실시간으로 및/또는 컴퓨터 그래픽 생성 시스템(60)으로부터 명령을 수신할 때 인코딩된 데이터를 컴퓨터 그래픽 생성 시스템(60)에 스트리밍할 수 있다.
센서(66)는 하나 이상의 카메라(74), 하나 이상의 방위 및 위치 센서(76)(예컨대, 가속도계, 자기력계, 자이로스코프, GPS(Global Positioning System) 수신기, 하나 이상의 다중 자유도(MDOF) 관성 측정 유닛(IMUs) 등), 하나 이상의 광 센서(78), 하나 이상의 존재 감지 센서(80)(예컨대, 모션 센서, 초음파 센서, 반사 센서, 브레이크-빔 센서 등), 및 하나 이상의 안테나(82)를 포함할 수 있다.
하나 이상의 카메라(74)는 사용자(20)의 실사용 중에 현실-세계 이미지(예컨대, 특정 테마 어트랙션(12)과 같은 현실-세계 환경의 이미지 및/또는 실시간 비디오 데이터)를 캡처할 수 있다. 하나 이상의 카메라(74)는 캡처된 현실-세계 이미지를 실질적으로 실시간으로 전송할 수 있다. 일 실시형태에 있어서, 고정-위치 AR/VR 뷰어(16)는 사용자(20)의 각각의 시점(예컨대, 우측 및 좌측 눈의 시야)에 제각기 대응할 수 있는 적어도 2개의 카메라(74)를 포함할 수 있다. 일 실시형태에 있어서, 하나 이상의 카메라(74)는 고해상도 및/또는 고속 카메라일 수 있다. 예를 들어, 하나 이상의 카메라(74)는 4K-해상도 디지털 고속 카메라(예컨대, 초당 약 60프레임을 초과하는 프레임-레이트 및 4,000 픽셀 정도의 수평 해상도)일 수 있다. 하나 이상의 카메라(74)(예컨대, 하나 이상의 카메라(74)는 고정-위치 AR/VR 뷰어(16)에 배치됨)가 고속 및 고해상도 능력을 갖기 때문에, 캡처된 현실-세계 이미지는 높은 수준의 사실감을 갖는 AR/VR 그래픽의 생성을 지원할 수 있는 고해상도 및 고3차원(3D) 깊이를 가질 수 있다. 하나 이상의 방위 및 위치 센서(76)는 고정-위치 AR/VR 뷰어(16)의 시야각(49)을 나타내는 데이터를 캡처할 수 있다. 하나 이상의 광 센서(78)는 주변 광 레벨(예컨대, 얼마나 밝은지/어두운지)을 검출하기 위한 임의의 적절한 광 센서일 수 있다.
하나 이상의 존재 감지 센서(80)는 고정-위치 AR/VR 뷰어(16)의 시야각(49)을 차단 또는 가릴 수 있는 오브젝트(예컨대, 현실-세계 오브젝트, 사람)의 존재를 나타내는 데이터를 캡처할 수 있다. 하나 이상의 존재 감지 센서(80)는 사용자(20)의 존재를 나타내는 데이터를 캡처할 수 있다. 일 실시형태에 있어서, 고정-위치 AR/VR 뷰어(16)는 하나 이상의 존재 감지 센서(80)에 의해 캡처되는 데이터에 기초하여 (예컨대, 프로세서(90)를 통해) 활성화 및 비활성화될 수 있다. 예를 들어, 고정-위치 AR/VR 뷰어(16)는 고정-위치 AR/VR 뷰어(16)가 사용 중이 아닌 경우(예컨대, 사용자(20)의 존재가 검출되지 않음)에는 슬립 모드 또는 대기 모드로 비활성화될 수 있으며, 고정-위치 AR/VR 뷰어(16)는 사용자(20)의 존재를 검출한 것에 응답하여 슬립 모드 또는 대기 모드로부터 활성화될 수 있다. 일 실시형태에 있어서, 하나 이상의 존재 감지 센서(80)는 방문객 측(사용자(20) 옆에 있는 방문객들)에 배치될 수 있으며 고정-위치 AR/VR 뷰어(16)에 (예컨대, 유선 또는 무선 연결을 통해) 통신 가능하게 결합된다. 하나 이상의 안테나(82)는 사용자(20)를 식별하는 데 사용되는 무선-주파수 식별(RFID) 안테나(82)일 수 있다.
사용자 인터페이스(68)(예컨대, 게임 제어부)는 사용자(20)가 고정-위치 AR/VR 뷰어(16)의 작동에 관한 명령을 제공할 수 있게 하는 임의의 적절한 입력 디바이스(예컨대, 푸시 버튼, 조이스틱, 스피너, 노브)를 포함할 수 있다. 예를 들어, 사용자 인터페이스(68)는 사용자(20)가 디스플레이(24) 상에 보여지는 피처(예컨대, 현실-세계 피처, AR/VR 그래픽(26))를 줌-인 및 줌-아웃할 수 있게 하도록 구성되는 줌 제어부(84)(예컨대, 스피너, 노브)를 포함할 수 있다. 사용자 인터페이스(68)는 또한, 상이한 동작 및/또는 효과가 AR/VR 환경(22)에 적용될 수 있게 하도록 구성될 수 있는 푸시 버튼(86)을 포함할 수 있다. 예를 들어, 푸시 버튼(86)은 사용자(20)가 AR/VR 환경(22)에서 AR/VR 그래픽(26)의 캐릭터 또는 오브젝트를 제어해서 상이한 방향들(예컨대, 상, 하, 좌, 우)로 이동시킬 수 있게 할 수 있다. 예를 들어, 푸시 버튼(86)은 사용자(20)가 AR/VR 환경(22)에서 AR/VR 그래픽(26)의 오브젝트를 선택하거나 또는 붙잡고/놓는 것을 가능하게 할 수 있다. 특정 실시형태들에 있어서, 하나 이상의 방위 및 위치 센서(76) 및/또는 사용자 인터페이스(68)의 사용에 의해 캡처되는 데이터는 사용자(20)가 가장 많은 시간을 관람 및/또는 상호작용하는 데 소비한 어트랙션 피처(예컨대, 현실-세계 오브젝트, AR/VR 그래픽(26))가 어느 것인지를 분석하는 데 사용될 수 있다.
프리젠테이션 디바이스(70)는 통신 네트워크(62)를 통해 컴퓨터 그래픽 생성 시스템(60)에 통신 및 작동 가능하게 결합되어 프리젠테이션 콘텐츠에 대응하는 신호 또는 데이터를 수신하고, 프리젠테이션 콘텐츠(예컨대, AR/VR 그래픽 이미지 또는 비디오 스트림, AR/VR 그래픽(26))를 디스플레이해서 AR/VR 환경(22)을 생성할 수 있다. 프리젠테이션 디바이스(70)는 디스플레이(24) 및 오디오 트랜스듀서(88)(예컨대, 스피커)를 포함할 수 있다. 위에서 설명된 바와 같이, 디스플레이(24)는 하나 이상의 디스플레이(46), 예를 들어 고정-위치 AR/VR 뷰어(16)를 사용해서 사용자(20)의 각각의 눈에 제각기 대응하는 2개의 디스플레이(46)를 포함할 수 있다. 디스플레이(24)는 또한, 사용자(20) 옆에 있는 방문객들도 디스플레이(24) 상에서 사용자(20)에게 보여지는 것을 볼 수 있게 구성될 수도 있다. 일 실시형태에 있어서, 디스플레이(24)는 4K-해상도 디스플레이(예컨대, 4,000 픽셀 정도의 수평 해상도)일 수 있다. 오디오 트랜스듀서(88)는 음향 효과를 제시하기 위해 하나 이상의 스피커와 같은 임의의 적절한 디바이스를 포함할 수 있다.
AR/VR 환경(22)의 생성을 지원하기 위해, 컴퓨터 그래픽 생성 시스템(60)은 프로세서(90) 및 메모리(92)와 같은 처리 회로를 포함할 수 있다. 프로세서(90)는 메모리(92)에 작동 가능하게 결합되어 AR/VR 그래픽(26)과 병합되는 캡처된 현실-세계 이미지를 생성하는 현재 개시된 기술을 수행하기 위한 명령을 실행하여 사용자(20)의 AR/VR 경험을 강화할 수 있다. 이러한 명령은 메모리(92) 및/또는 다른 스토리지와 같은, 유형의 비일시적인 컴퓨터 판독 가능 매체에 저장되는 프로그램 또는 코드로 인코딩될 수 있다. 프로세서(90)는 범용 프로세서, 시스템-온-칩(SoC) 디바이스, 주문형 집적 회로(ASIC), 또는 일부 다른 유사한 프로세서 구성일 수 있다.
컴퓨터 그래픽 생성 시스템(60)은 적절한 AR/VR 플랫폼을 가능하게 하는, 임의의 적절한 하드웨어, 소프트웨어(예컨대, 게임 엔진), 및 알고리즘을 포함할 수 있다. 예를 들어, 컴퓨터 그래픽 생성 시스템(60)은 특정 테마 어트랙션(12)의 모델(예컨대, 공간 정보를 가진 3차원 모델, 컴퓨터-지원 설계(CAD) 파일) 및 고정-위치 AR/VR 뷰어(16)의 위치를 메모리(92)에 저장할 수 있거나, 또는 데이터 서버(64)에 액세스할 수 있다. 특히, 모델은 현실 세계 주변 환경(예컨대, 특정 테마 어트랙션(12))에 대한 고정-위치 AR/VR 뷰어(16)의 위치 정보를 포함할 수 있다. 모델은, 프리젠테이션 디바이스(70)에 신호를 제공하기 위해, 데이터 인코더(72)로부터의 다른 입력들(예컨대, 고정-위치 AR/VR 뷰어(16)의 센서(66) 및 사용자 인터페이스(68)로부터의 인코딩된 데이터)과 함께 사용된다. 특히, 컴퓨터 그래픽 생성 시스템(60)은 사용자(20)가 고정-위치 AR/VR 뷰어(16)를 작동(예컨대, 시야각(49)의 변화, 확대 및 축소, 푸시 버튼(86)의 계합)해서 캡처된 현실-세계 이미지에 합성되는 AR/VR 그래픽(26)을 생성 및 렌더링하여 AR/VR 환경(22)을 생성함에 따라 동적으로 갱신된다.
이해할 수 있는 바와 같이, 특정 테마 어트랙션(12) 및 고정-위치 AR/VR 뷰어(16)의 위치가 모델링되고 모델(예컨대, 공간 정보를 가진 3차원 모델, 컴퓨터-지원 설계(CAD) 파일)이 컴퓨터 그래픽 생성 시스템(60)에 저장되거나 또는 그것에 의해 액세스될 수 있기 때문에, 컴퓨터 그래픽 생성 시스템(60)은 사용자(20)가 어디를 보고 있는지를 결정하고 AR/VR 그래픽 및 캡처된 현실-세계 이미지의 적절한 중첩을 결정하기 위해 고정-위치 AR/VR 뷰어(16)의 시야각(49)을 결정하는 것만이 필요할 수 있다. 따라서, 컴퓨터 그래픽 생성 시스템(60)은 AR/VR 그래픽(26) 및 캡처된 현실-세계 이미지를 보다 효율적으로 (예컨대, 컴퓨팅 전력을 덜 사용해서) 결합해서 AR/VR 환경(22)을 생성할 수 있다. 특히, 컴퓨터 그래픽 생성 시스템(60)은 AR/VR 그래픽(26) 및 현실-세계 이미지가 높은 수준의 사실감으로 정렬되어 AR/VR 그래픽(26)이 정상 조건 하에서 행하듯이 거동하게 할 수 있도록 AR/VR 그래픽(26)을 효율적으로 생성하고 캡처된 현실-세계 이미지 상에 합성할 수 있다. 예를 들어, AR/VR 그래픽(26)이 고정-위치 AR/VR 뷰어(16)의 시야각(49)에 따라 임의의 현실-세계 오브젝트(예컨대, 현실 세계의 물리적인 구조물(14), 방문객, 건물, 오브젝트)에 의해 완전히 또는 부분적으로 가려져야 하는 경우에는, 컴퓨터 그래픽 생성 시스템(60)이 완전히 또는 부분적으로 투명한 AR/VR 그래픽(26)을 생성할 수 있다. 예를 들어, 컴퓨터 그래픽 생성 시스템(60)은 현실-세계 오브젝트가 더 이상 존재하지 않는 것처럼 또는 삭제된 것처럼 보이도록 AR/VR 그래픽(26)을 생성해서 현실-세계 오브젝트를 오버레이할 수 있다(예컨대, 현실-세계 오브젝트가 AR/VR 그래픽(26)으로 완전히 또는 부분적으로 가려짐).
또한, AR/VR 그래픽(26)은 현실-세계 이미지가 캡처될 때 실질적으로 실시간으로 생성되고, 캡처된 현실-세계 이미지 상에 오버레이되기 때문에, AR/VR 그래픽(26)의 사실감이 강화될 수 있다. 예를 들어, 사용자(20)가 AR/VR 환경(22)에서 줌 제어부(84)를 통해 줌-인하기 때문에, 컴퓨터 그래픽 생성 시스템(60)은 실질적으로 실시간으로 하나 이상의 카메라(74)에 의해 캡처되는 광학적으로 줌-인된 이미지에 기초하여 AR/VR 그래픽(26)을 생성 또는 갱신하므로, AR/VR 그래픽(26)은 (디지털로 줌-인된 현실-세계 이미지에 기초하여 생성되는 AR/VR 그래픽(26)에 비해) 더욱 현실적으로 보인다. 특정 실시형태들에 있어서, AR/VR 그래픽(26)은 또한, 사용자가(20)가 특정 게임 옵션(예컨대, AR/VR 환경(22)에서 게임에 대응하는 캐릭터 선택, 팀원 선택, 도구/유틸리티)을 선택하도록 유도하거나 또는 사용자(20)에게 게임 힌트(예컨대, 어디를 탐험해야 하는지, 어떤 요소를 수집해야 하는지 등의 힌트)를 제공하도록 생성될 수도 있다. 컴퓨터 그래픽 생성 시스템(60)은 또한, 오디오 트랜스듀서(88)를 통해 음향 효과를 생성 및 렌더링해서 AR/VR 환경(22)에서의 사용자 경험을 강화할 수도 있다.
일 실시형태에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 사용자(20)에 관한 정보(예컨대, 하나 이상의 안테나(82)를 통해 전송됨 및/또는 데이터 서버(64)에 저장됨)에 기초하여 AR/VR 환경(22)을 생성할 수 있다. 예를 들어, 컴퓨터 그래픽 생성 시스템(60)은 사용자의 플레이 이력, 게임 상태, 회원 상태 등에 따라 AR/VR 환경(22)에서 특정 캐릭터, 도구/유틸리티, 및/또는 게임 시나리오를 디스플레이할 수 있다. 일 실시형태에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 사용자 입력에 기초하여(예컨대, 줌 제어부(84) 및/또는 푸시 버튼(86)으로부터의 신호에 기초하여) AR/VR 그래픽(26)을 생성 및 렌더링할 수 있다. 예를 들어, 컴퓨터 그래픽 생성 시스템(60)은 줌 제어부(84)를 통해 사용자(20)에 의해 적용되는 확대축소 효과의 정도에 따라 AR/VR 환경(22)에서 줌-인 또는 줌-아웃된 이미지를 디스플레이할 수 있다. 일 실시예에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 푸시 버튼(86)을 통해 사용자(20)에 의해 적용되는 게임 동작을 반영하기 위해 AR/VR 그래픽(26)을 디스플레이할 수 있다. 예를 들어, AR/VR 그래픽(26)은 움직이는 또는 붙잡는 기능에 대응하는, 사용자(20)에 의해 적용되는 푸시 버트(86)에 응답하여 오브젝트가 움직이거나 또는 붙잡히는 것을 보여줄 수 있다. 이해할 수 있는 바와 같이, 줌 제어부(84) 및 푸시 버튼(86)은 게임 제어부 또는 조이스틱으로서 기능할 수 있다.
생성된 환경의 사실감을 강화하기 위해, 특정 실시형태들에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 현실-세계 물리적 환경(예컨대, 하나 이상의 광 센서(78)를 통해 검출되는 조명 정보, 하나 이상의 존재 감지 센서(80)를 통해 검출되는 정보)에 기초하여 AR/VR 그래픽(26)을 생성할 수 있다. 예를 들어, 하나 이상의 광 센서(78)에 의해 수집되는 데이터에 기초하여, 컴퓨터 그래픽 생성 시스템(60)은 현실-세계 물리적 환경이 어둡다(예컨대, 밤)고 결정할 수 있다. 이 결정에 응답하여, 컴퓨터 그래픽 생성 시스템(60)은 AR/VR 환경(22)이 사용자(20)에게 적절한 밝기로 제시되도록, 생성된 AR/VR 그래픽(26)의 밝기를 감소시킬 수 있다. 예를 들어, 하나 이상의 광 센서(78)에 의해 수집되는 데이터에 기초하여, 컴퓨터 그래픽 생성 시스템(60)은 현실-세계 물리적 환경이 너무 어둡다고 결정할 수 있다. 이 결정에 응답하여, 컴퓨터 그래픽 생성 시스템(60)은 AR/VR 환경(22)이 사용자(20)에게 적절한 밝기로 제시되도록, AR/VR 그래픽(26)과 결합하기 전에 캡처된 현실-세계 이미지의 밝기를 증가시킬 수 있다. 예를 들어, 컴퓨터 그래픽 생성 시스템(60)은 하나 이상의 존재 감지 센서(80)로부터 인코딩된 데이터를 처리하고, 고정-위치 AR/VR 뷰어(16)의 시야각(49)이 차단 또는 제한(예컨대, 현실-세계 오브젝트, 사람에 의해 차단됨)될 수 있다고 결정할 수 있다. 시야각(49)이 차단 또는 제한될 수 있다는 결정에 응답하여, 컴퓨터 그래픽 생성 시스템(60)은 AR/VR 그래픽(26)을 생성하기 위한 하나 이상의 카메라(74)로부터 캡처된 현실-세계 이미지를 사용하는 것을 일시적으로 중단할 수 있고, 대신에 하나 이상의 카메라(74)로부터 사전에 취득된 현실-세계 이미지가 사용될 수 있다.
특정 실시형태들에 있어서, 생성된 환경의 사실감을 강화하기 위해, 컴퓨터 그래픽 생성 시스템(60)은 실시간 디지털 그림자를 포함하는 AR 그래픽(예컨대, AR/VR 그래픽(26))을 생성할 수 있다. 컴퓨터 그래픽 생성 시스템(60)은 현실-세계 오브젝트 및 현실-세계 조명 정보(예컨대, 하나 이상의 광 센서(78)를 통해 검출되는 조명 정보, 하나 이상의 존재 감지 센서(80)를 통해 검출되는 정보, 컴퓨터 그래픽 생성 시스템(60)의 캘린더의 내부 시계에 의해 표시되는 하루 중의 시간 및/또는 연중의 날짜)에 관하여 각각의 시야각(49)에 기초하여, 디지털 오브젝트 및 AR 오브젝트에 대한 실시간 디지털 그림자를 생성할 수 있다. 예를 들어, 헛간(28) 및 2마리의 말(30)에 대한 디지털 그림자는 태양 및 현실-세계 조명 요소와 같은 현실-세계 광원의 입사각에 기초하여, 또한 각각의 시야각(49)에 대하여, 현실-세계 오브젝트 또는 사람들에 의해 광이 차단되는지의 여부에 기초하여 결정된 적절한 형상 및 밝기로 생성될 수 있다.
또한, 컴퓨터 그래픽 생성 시스템(60)은 통신 네트워크(62)를 통해 하나 이상의 원격 시청 디바이스(65)에 통신 및 작동 가능하게 결합될 수 있다. 하나 이상의 원격 시청 디바이스(65)는 놀이 공원(10) 내부에 또는 그로부터 떨어져서 배치되는 임의의 적절한 디스플레이(예컨대, 컴퓨터, 비디오 및/또는 오디오 디스플레이, 컴퓨터)를 포함할 수 있다. 하나 이상의 원격 시청 디바이스(65)는 또한, 애플리케이션 이식성 프로파일 또는 APP를 갖는 모바일 디바이스(예컨대, 휴대폰, 스마트폰, 및 태블릿)일 수도 있다. 컴퓨터 그래픽 생성 시스템(60)은, 하나 이상의 원격 시청 디바이스(65)를 시청하는 사용자가 고정-위치 AR/VR 뷰어(16)의 사용자(20)와 동일한 AR/VR 그래픽(26)을 볼 수 있으며/있거나 동일한 음향 효과를 들을 수 있도록, 생성된 AR/VR 그래픽(26) 및/또는 음향 효과를 하나 이상의 원격 시청 디바이스(65)에 스트리밍할 수 있다.
또한, 컴퓨터 그래픽 생성 시스템(60)은 사용자의 줌 제어부(84)의 작동에 기초하여 AR/VR 환경(22)의 AR 환경과 VR 환경 사이를 전환할 수 있다. 도 4는, 본 개시물의 양태에 따른, AR 환경과 VR 환경 사이의 예시적인 천이를 예시하는 개략도이다. 예시된 실시형태에 있어서, 디스플레이(24)를 통해 특정 테마 어트랙션(12)을 시청하는 사용자(20)는 AR 그래픽(23)만을 포함하는 AR/VR 그래픽(26)을 볼 수 있다. 사용자(20)는, 단계(100)에 지시된 바와 같이, AR 피처(25)의 세부내용을 보기 위해 AR 피처(25)들 중 하나(예컨대, 말)를 줌-인하도록 (예컨대, 줌 제어부(84)를 통해) 고정-위치 AR/VR 뷰어(16)를 작동할 수 있다. 사용자(20)는 더욱 확대된 AR 피처(25)의 뷰를 더욱 상세하게 보기 위해 단계(102) 및 단계(104)에 지시된 바와 같이 더 줌-인할 수 있다. 이해할 수 있는 바와 같이, 사용자(20)는 AR 피처(25)로부터 줌-아웃하기 위해 줌 제어부(84)를 역방향으로 작동할 수 있다. 다른 실시형태에 있어서, 사용자(20)는, 단계(106)에 지시된 바와 같이, AR 피처(27)의 확대된 세부내용을 보기 위해 AR 피처(27)들 중 다른 하나(예컨대, 헛간의 문)를 줌-인하도록 (예컨대, 줌 제어부(84)를 통해) 고정-위치 AR/VR 뷰어(16)를 작동할 수 있다. 사용자(20)는 더욱 확대된 AR 피처(27)의 뷰를 보기 위해 단계(108)에 지시된 바와 같이 더 줌-인할 수 있다. 사용자(20)가 단계(110)에서 지시된 바와 같이 계속해서 줌-인(예컨대, 미리 정해진 배율 임계치를 넘어서는 줌 동작)함에 따라, 컴퓨터 그래픽 생성 시스템(60)은 사용자의 경험이 AR 경험에서 VR 경험으로 천이하도록 VR 그래픽(29)을 생성할 수 있다. 예를 들어, 단계(110)에서, 사용자의 경험은 VR 환경으로 천이하고, 사용자(20)는 마치 사용자(20)가 헛간 안에서 헛간 동물들에 의해 둘러싸여 있는 것처럼 VR 그래픽(29)을 즐길 수 있다. 이해할 수 있는 바와 같이, 사용자(20)는 VR 경험에서 다시 AR 경험으로 천이하도록 줌 제어부(84)를 역방향으로 작동해서, AR 피처(27)를 줌-아웃하거나, 또는 임의의 VR 피처를 줌-아웃할 수 있다.
일 실시형태에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 다수의 사용자(20)가 동일한 게임에 참여할 수 있게 하기 위해 및/또는 다른 사용자(20)들에 의해 적용되는 동작들을 볼 수 있게 하기 위해 다수의 고정-위치 AR/VR 뷰어(16)에 통신 및 작동 가능하게 결합될 수 있다. 도 5는, 본 개시물의 양태에 따른, AR/VR 환경(22)에서 다수의 고정-위치 AR/VR 뷰어(16) 사이의 그러한 연결/결합의 실시예를 예시하는 개략도이다. 예시된 실시예에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 제1 사용자(122)에 의해 작동되는 제1 고정-위치 AR/VR 뷰어(120) 및 제2 사용자(126)에 의해 작동되는 제2 고정-위치 AR/VR 뷰어(124)에 통신 및 작동 가능하게 결합된다. 제1 사용자(122) 및 제2 사용자(126)는 모두 각각의 디스플레이(24) 상에, 서로 다른 시점으로부터 보여지는 동일한 AR/VR 피처(128)를 볼 수 있다. 또한, 제1 사용자(122) 및 제2 사용자(126)는 모두 각각의 디스플레이(24) 상에 제1 사용자(122) 및 제2 사용자(126) 중 어느 하나에 의해 적용되는 동작(129)(예컨대, AR/VR 환경(22)에서의 동작)을 볼 수 있다. 예시된 실시예에 있어서, 제1 사용자(122)는 제1 고정-위치 AR/VR 뷰어(120)를 작동해서, 영역(134)에 보여지는 바와 같이, 헛간 동물(132)에게 먹이기 위해 수조(130)를 채우는 것과 같은 동작(129)을 실행한다. 예를 들어, 제1 사용자(122)는 각각의 시야각(49)을 조정해서 수조(130)를 겨냥하고, 줌 제어부(84)를 사용해서 수조(130)를 줌-인 또는 줌-아웃하고, 또한 푸시 버튼(86)들 중 하나를 눌러서 수조(130)를 채우기 시작할 수 있다. 그에 상응하여, 제2 사용자(126)는, 각각의 디스플레이(24)로부터, 제1 사용자(122)에 의해 적용되는 동작(129)(예컨대, 수조(130) 채우기)을 볼 수 있다. 일 실시형태에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 제2 사용자(126)도 영역(134)을 보고 있다(예컨대, 제2 고정-위치 AR/VR 뷰어(124)의 각각의 시야각(49)이 영역(134)의 일부분과 중첩됨)고 결정할 수 있으며, 이 결정에 응답하여, 컴퓨터 그래픽 생성 시스템(60)은 제1 및 제2 고정-위치 AR/VR 뷰어(120 및 124)의 각각의 디스플레이(24) 상에 동작(129)의 결과를 포함하는 동일한 AR/VR 피처(128)를 디스플레이할 수 있다. 다른 실시형태에 있어서, 컴퓨터 그래픽 생성 시스템(60)은 제2 사용자(126)가 제1 사용자(122)와 동일한 게임에 참여하고 있다(예컨대, 제2 사용자(126)는 사용자 인터페이스(68)를 사용해서 제1 사용자(122)와 함께 게임에 참여하는 것에 동의한다는 지시를 제공할 수 있음)고 결정할 수 있으며, 이 결정에 응답하여, 컴퓨터 그래픽 생성 시스템(60)은 제1 및 제2 고정-위치 AR/VR 뷰어(120 및 124)의 각각의 디스플레이(24) 상에 동작(129)의 결과를 포함하는 동일한 AR/VR 피처(128)를 디스플레이할 수 있다.
도 6은 AR/VR 시스템(15)을 사용해서 AR 경험, VR 경험 및/또는 그 밖의 컴퓨터-매개 경험을 생성하는 방법(140)의 실시형태를 예시하는 프로세스 흐름도이다. 방법(140)은 비일시적인 컴퓨터 판독 가능 매체(예컨대, 메모리(92))에 저장되며, 예를 들어, 컴퓨터 그래픽 생성 시스템(60)의 프로세서(90)에 의해 실행되는 초기 코드 또는 명령을 나타내는 것일 수 있다. 생성된 AR 경험, VR 경험 및/또는 그 밖의 컴퓨터-매개 경험은 하나 이상의 고정-위치 AR/VR 뷰어(16) 및/또는 하나 이상의 원격 시청 디바이스(65)를 사용해서 하나 이상의 사용자(20) 및/또는 다른 방문객들이 즐길 수 있다. 방법(140)은 프로세서(90)로 하나 이상의 고정-위치 뷰어(16) 각각의 센서(66) 및 사용자 인터페이스(68)로부터 실시간 데이터를 수신 및 분석(블록 142)하는 것으로 시작할 수 있다. 실시간 데이터는 하나 이상의 카메라(74)에 의해 캡처되는 사진 및/또는 비디오, 하나 이상의 방위 및 위치 센서(76)에 의해 검출되는 방위 및/또는 위치 정보 및/또는 시야각(49), 하나 이상의 광 센서(78)에 의해 검출되는 조명 정보, 하나 이상의 존재 감지 센서(80)에의해 검출되는 고정-위치 뷰어(16) 근처의 오브젝트 또는 사용자의 존재를 나타내는 정보, 하나 이상의 안테나(82)에 의해 수신되는 사용자의 신원을 나타내는 정보 등을 포함할 수 있다. 실시간 데이터는 또한, 사용자 인터페이스(68)를 사용해서 줌 제어부(84) 및/또는 푸시 버튼(86)을 통해 사용자(20)에 의해 제공되는 입력(예컨대, 명령 및/또는 작동 입력)을 포함할 수도 있다.
이후, 방법(140)은 계속해서 프로세서(90)로 게임 효과를 생성(블록 144)할 수 있다. 일 실시형태에 있어서, 게임 효과는 수신 및 분석된 실시간 데이터에 기초하여 생성되는 AR/VR 이미지 데이터 및 음향 데이터를 포함할 수 있다. 예를 들어, 게임 효과는 사용자(20)와 연계되는 게임 캐릭터에 관한 특정 AR/VR 이미지 데이터를 포함한다. 예를 들어, 게임 효과는 (예컨대, 사용자(20)의 주의/시청 관심에 따라) 사용자(20)에 의해 조정되는 고정-위치 AR/VR 뷰어(16)의 시야각(49)에 의존하는 특정한 AR/VR 피처를 포함한다. 예를 들어, 게임 효과는 사용자(20)에 의해 적용되는 줌 효과에 의존하는 AR 환경과 VR 환경 사이의 천이(예컨대, AR 환경에서 VR 환경으로의 천이를 위한 특정 임계치를 넘어서는 줌-인)를 포함할 수 있다. 추가적인 실시예로서, 게임 효과는 다수의 사용자(20)가 동일한 게임 경험을 공유할 수 있는 방식으로 다수의 고정-위치 AR/VR 뷰어(16)에 대하여 조정된 AR/VR 이미지 데이터를 포함할 수 있다. 게임 효과는 또한, AR/VR 이미지 데이터에 대응하는 음향 데이터를 포함할 수도 있다.
이후, 방법(140)은 계속해서 프로세서(90)로 생성된 게임 효과를 현실-세계 환경의 생성된 시각화에 오버레이 또는 합성(블록 146)할 수 있다. 프로세서(90)는 현실-세계 이미지(예컨대, 도 1에 도시되는 물리적인 구조물(14), 헛간(28))의 비디오 데이터 스트림을 생성하고, 하나 이상의 비디오 병합 및/또는 광학 병합 기술을 사용해서 AR/VR 그래픽(26)(예컨대, 도 1에 도시되는 2마리의 말(30))을 현실-세계 이미지에 오버레이 또는 합성할 수 있다. 실시예로서, 그래픽 생성 시스템(60)의 프로세서(90)는 특정한 피처를 보기 위해(예컨대, 시야각(49)에 기초함) 또는 미리 정해진 시간의 경과 후에, 고정-위치 AR/VR 뷰어(16)의 사용자(20)의 작동과 협력하여 AR/VR 그래픽(26)을 렌더링할 수 있다. 그래픽 생성 시스템(60)은 하나 이상의 카메라(74)를 통해 캡처되는 비디오 또는 이미지 데이터에 대한 하나 이상의 기하학적 또는 광도측정 인식 알고리즘을 수행해서 시야각(49), 및 AR/VR 그래픽(26)을 도입해야 하는 시기를 결정할 수 있다. 그래픽 생성 시스템(60)은 사용자 인터페이스(68)를 통해 사용자(20)에 의해 제공되는 입력에 기초하여 AR/VR 그래픽(26)을 도입해야 하는 시기를 결정할 수 있다.
이후, 방법(140)은 프로세서(90)로 게임 효과(예컨대, 현실-세계 환경 데이터 및/또는 음향 효과와 함께 오버레이된 AR/VR 그래픽(26))를 전송(블록 148)하고 각각의 하나 이상의 고정-위치 AR/VR 뷰어(16)의 디스플레이(24) 상에 및/또는 하나 이상의 원격 시청 디바이스(65) 상에 디스플레이(블록 150)하는 것으로 마무리될 수 있다.
본 명세서에는 본 발명의 실시형태의 특정한 특징들만을 예시 및 설명하고 있지만, 당업자에게는 다양한 수정 및 변경이 가능할 것이다. 따라서, 첨부된 청구범위는 본 개시물의 진정한 사상에 속하는 그러한 모든 수정 및 변경을 포함하려는 것임을 이해해야 한다. 또한, 개시된 실시형태들의 특정 요소들은 서로 조합되거나 교환될 수 있음을 이해해야 한다.

Claims (21)

  1. 혼합 현실(mixed reality) 시청 시스템으로서,
    안정된 플랫폼에 고정되도록 구성되는 뷰어― 상기 뷰어는 상기 뷰어를 통해 테마를 시청하도록 사용자에 의해 작동 가능함 ―를 포함하고,
    상기 뷰어는:
    디스플레이 디바이스;
    줌 제어부를 포함하는 사용자 인터페이스; 및
    적어도 하나의 센서― 상기 적어도 하나의 센서는 적어도 하나의 카메라를 포함함 ―를 포함하고;
    상기 뷰어에 통신 가능하게 결합되는 컴퓨터 그래픽 생성 시스템을 또한 포함하고,
    상기 컴퓨터 그래픽 생성 시스템은:
    상기 뷰어의 상기 적어도 하나의 카메라를 통해 캡처되는 이미지 데이터에 기초하여 현실 세계 환경의 스트리밍 미디어를 생성하고;
    상기 현실 세계 환경의 스트리밍 미디어에 합성되는 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두를 생성하고;
    상기 뷰어의 상기 디스플레이 디바이스 상에 디스플레이되도록, 상기 현실 세계 환경의 스트리밍 미디어를 상기 합성된 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두와 함께 전송하도록 구성되는
    혼합 현실 시청 시스템.
  2. 제1항에 있어서,
    상기 컴퓨터 그래픽 생성 시스템은:
    상기 줌 제어부가 제1 배율로 줌 동작된다고 결정하는 것에 응답하여 상기 현실 세계 환경의 스트리밍 미디어를 상기 합성된 증강 현실 그래픽과 함께 전송하고;
    상기 줌 제어부가 상기 제1 배율보다 높은 제2 배율로 줌 동작된다고 결정하는 것에 응답하여 상기 현실 세계 환경 및 상기 합성된 가상 현실 그래픽의 확대된 뷰를 전송하도록 구성되는
    혼합 현실 시청 시스템.
  3. 제1항에 있어서,
    상기 뷰어는:
    상기 디스플레이 디바이스 및 상기 사용자 인터페이스를 포함하는 뷰어부― 상기 뷰어부는 시야각을 조정하기 위해 사용자에 의해 회전 가능함 ―; 및
    상기 뷰어부에 회전 가능하게 결합되며 상기 뷰어를 상기 안정된 플랫폼에 견고하게 결합하는 고정부를 포함하는
    혼합 현실 시청 시스템.
  4. 제1항에 있어서,
    상기 뷰어의 상기 디스플레이 디바이스는 제1 디스플레이 및 제2 디스플레이를 포함하고, 상기 제1 디스플레이는 상기 사용자의 제1 눈에 상기 스트리밍 미디어를 디스플레이하도록 구성되고 상기 제2 디스플레이는 상기 사용자의 제2 눈에 상기 스트리밍 미디어를 디스플레이하도록 구성되는
    혼합 현실 시청 시스템.
  5. 제1항에 있어서,
    상기 디스플레이 디바이스는 상기 사용자 이외의 방문객들도 상기 스트리밍 미디어를 볼 수 있게 구성되는
    혼합 현실 시청 시스템.
  6. 제1항에 있어서,
    상기 뷰어는 스피커를 포함하는
    혼합 현실 시청 시스템.
  7. 제1항에 있어서,
    상기 뷰어의 상기 적어도 하나의 카메라의 각각의 카메라는 약 4000 픽셀의 수평 해상도를 갖는 디지털 고속 카메라를 포함하는
    혼합 현실 시청 시스템.
  8. 제1항에 있어서,
    상기 적어도 하나의 센서는 하나 이상의 방위 및 위치 센서, 하나 이상의 다중 자유도 관성 측정 유닛, 하나 이상의 광 센서, 하나 이상의 존재 감지 센서, 하나 이상의 안테나, 또는 이들의 조합을 포함하는
    혼합 현실 시청 시스템.
  9. 제1항에 있어서,
    상기 혼합 현실 시청 시스템은 원격 디스플레이 디바이스를 포함하고, 상기 컴퓨터 그래픽 생성 시스템은, 상기 원격 디스플레이 디바이스 상에 디스플레이되도록, 상기 현실 세계 환경의 상기 스트리밍 미디어를 상기 합성된 증강 현실 그래픽, 가상 현실 그래픽, 또는 이들 둘 모두와 함께 전송하도록 구성되는
    혼합 현실 시청 시스템.
  10. 제1항에 있어서,
    상기 컴퓨터 그래픽 생성 시스템은 상기 뷰어 주위의 상기 현실 세계 환경의 모델을 갖고, 상기 모델은 상기 현실 세계 환경에 대한 상기 뷰어의 공간 정보를 포함하는
    혼합 현실 시청 시스템.
  11. 고정-위치 뷰어로서,
    스트리밍 미디어를 사용자에게 디스플레이하도록 구성되는 디스플레이― 상기 디스플레이된 스트리밍 미디어는 증강 현실(AR) 그래픽, 가상 현실(VR) 그래픽, 또는 이들 둘 모두를 포함하는 혼합 현실(MR) 환경을 포함함 ―;
    상기 고정-위치 뷰어 주위의 현실 세계 환경의 이미지 데이터를 캡처하도록 구성되는 카메라; 및
    상기 스트리밍 미디어의 생성과 관련된 정보를 수집하도록 구성되는 적어도 하나의 센서를 포함하는
    고정-위치 뷰어.
  12. 제11항에 있어서,
    상기 고정-위치 뷰어는 상기 사용자가 상기 디스플레이된 스트리밍 미디어를 줌-인 및 줌-아웃할 수 있게 하도록 구성되는 줌 제어부를 포함하는 사용자 인터페이스를 포함하고,
    상기 고정-위치 뷰어는:
    캡처된 이미지 데이터 및 상기 센서에 의해 수집되는 정보를 상기 컴퓨터 그래픽 생성 시스템에 전송하고;
    적어도 상기 현실 세계 환경의 상기 캡처된 이미지 데이터 및 상기 센서에 의해 수집되는 정보에 기초하여 상기 컴퓨터 그래픽 생성 시스템에 의해 렌더링되는 상기 스트리밍 미디어를 수신하고;
    상기 줌 제어부가 미리 정해진 임계 배율을 넘어서 줌 동작된다고 결정하는 것에 응답하여 상기 디스플레이된 스트리밍 미디어를 AR 환경에서 VR 환경으로 천이하도록
    컴퓨터 그래픽 생성 시스템에 통신 가능하게 결합되는
    고정-위치 뷰어.
  13. 제11항에 있어서,
    상기 카메라는 초당 약 60 프레임의 프레임 레이트 및 약 4000 픽셀의 수평 해상도를 갖는 디지털 고속 카메라를 포함하는
    고정-위치 뷰어.
  14. 제11항에 있어서,
    상기 디스플레이된 스트리밍 미디어에 대응하는 오디오 효과를 제공하도록 구성되는 하나 이상의 스피커를 포함하는
    고정-위치 뷰어.
  15. 제11항에 있어서,
    상기 적어도 하나의 센서는 하나 이상의 방위 및 위치 센서, 하나 이상의 다중 자유도 관성 측정 유닛, 하나 이상의 광 센서, 하나 이상의 존재 감지 센서, 하나 이상의 안테나, 또는 이들의 조합을 포함하는
    고정-위치 뷰어.
  16. 제11항에 있어서,
    상기 디스플레이는 상기 고정-위치 뷰어의 상기 사용자 이외의 하나 이상의 방문객이 상기 디스플레이된 스트리밍 미디어를 볼 수 있게 구성되는
    고정-위치 뷰어.
  17. 제11항에 있어서,
    상기 적어도 하나의 센서에 의해 수집되는 정보는 사용자 정보를 포함하고, 상기 디스플레이된 스트리밍 미디어의 적어도 일부 내용은 상기 사용자에게 맞춤화된
    고정-위치 뷰어.
  18. 방법으로서,
    컴퓨터 그래픽 생성 시스템을 통해 실시간 데이터를 수신 및 분석하는 단계― 상기 실시간 데이터를 수신하는 단계는 고정-위치 뷰어의 적어도 하나의 센서 및 사용자 인터페이스로부터 데이터를 수신하는 단계를 포함함 ―;
    상기 수신된 실시간 데이터에 기초하여 상기 컴퓨터 그래픽 생성 시스템을 통해 게임 효과를 생성하는 단계― 상기 게임 효과는 증강 현실(AR) 그래픽, 가상 현실(VR) 그래픽, 또는 이들 둘 모두를 포함함 ―;
    상기 생성된 게임 효과를 상기 컴퓨터 그래픽 생성 시스템을 통해 현실 세계 환경의 시각화에 오버레이해서 혼합 현실 시각화를 생성하는 단계;
    상기 혼합 현실 시각화를 상기 컴퓨터 그래픽 생성 시스템을 통해 상기 고정-위치 뷰어에 전송하는 단계; 및
    상기 혼합 현실 시각화를 상기 컴퓨터 그래픽 생성 시스템을 통해 상기 고정-위치 뷰어의 디스플레이 상에 디스플레이하는 단계를 포함하는
    방법.
  19. 제18항에 있어서,
    상기 컴퓨터 그래픽 생성 시스템을 통해 게임 효과를 생성하는 단계는:
    상기 사용자 인터페이스의 줌 제어부가 제1 배율로 줌 동작되고, 상기 AR 그래픽들이 오버레이된다고 결정하는 것에 응답하여, 상기 컴퓨터 그래픽 생성 시스템을 통해 AR 그래픽을 생성하는 단계; 및
    상기 사용자 인터페이스의 상기 줌 제어부가 제2 배율로 줌 동작된다고 결정하는 것에 응답하여, 상기 컴퓨터 그래픽 생성 시스템을 통해 VR 그래픽을 생성― 상기 제2 배율은 상기 제1 배율보다 크고, 상기 VR 그래픽은 상기 현실 세계 환경의 시각화를 대체함 ―하는 단계를 포함하는
    방법.
  20. 제18항에 있어서,
    상기 실시간 데이터를 수신하는 단계는 적어도 상기 고정-위치 뷰어의 하나 이상의 방위 및 위치 센서, 하나 이상의 다중 자유도 관성 측정 유닛, 하나 이상의 광 센서, 하나 이상의 존재 감지 센서, 또는 하나 이상의 안테나를 통해 수집되는 데이터를 상기 컴퓨터 그래픽 생성 시스템을 통해 수신하는 단계를 포함하는
    방법.
  21. 제18항에 있어서,
    다른 혼합 현실 시각화를 상기 컴퓨터 그래픽 생성 시스템을 통해 부가적인 고정-위치 뷰어에 전송― 상기 다른 혼합 현실 시각화는 상기 부가적인 고정-위치 뷰어의 시점으로부터 상기 고정-위치 뷰어 상에 디스플레이되는 상기 혼합 현실 시각화와 동일한 시각화 내용을 포함함 ―하는 단계; 및
    상기 다른 혼합 현실 시각화를 상기 컴퓨터 그래픽 생성 시스템을 통해 상기 부가적인 고정-위치 뷰어의 각각의 디스플레이 상에 디스플레이하는 단계를 포함하는
    방법.
KR1020197029129A 2017-03-06 2018-03-05 혼합 현실 뷰어 시스템 및 방법 Active KR102145140B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762467817P 2017-03-06 2017-03-06
US62/467,817 2017-03-06
US15/818,463 2017-11-20
US15/818,463 US10572000B2 (en) 2017-03-06 2017-11-20 Mixed reality viewer system and method
PCT/US2018/020951 WO2018165041A1 (en) 2017-03-06 2018-03-05 Mixed reality viewer system and method

Publications (2)

Publication Number Publication Date
KR20190124766A true KR20190124766A (ko) 2019-11-05
KR102145140B1 KR102145140B1 (ko) 2020-08-18

Family

ID=63355058

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020257011669A Pending KR20250057913A (ko) 2017-03-06 2018-03-05 놀이 공원 환경에 배치된 가상 피처용 시스템 및 방법
KR1020197029080A Ceased KR20190123314A (ko) 2017-03-06 2018-03-05 놀이 공원 환경에 배치된 가상 피처용 시스템 및 방법
KR1020197029129A Active KR102145140B1 (ko) 2017-03-06 2018-03-05 혼합 현실 뷰어 시스템 및 방법
KR1020247009170A Active KR102795741B1 (ko) 2017-03-06 2018-03-05 놀이 공원 환경에 배치된 가상 피처용 시스템 및 방법
KR1020197028984A Active KR102181793B1 (ko) 2017-03-06 2018-03-06 증강 탑승 시스템 및 방법
KR1020197028991A Active KR102145702B1 (ko) 2017-03-06 2018-03-06 게임플레이 탑승 차량 시스템 및 방법

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020257011669A Pending KR20250057913A (ko) 2017-03-06 2018-03-05 놀이 공원 환경에 배치된 가상 피처용 시스템 및 방법
KR1020197029080A Ceased KR20190123314A (ko) 2017-03-06 2018-03-05 놀이 공원 환경에 배치된 가상 피처용 시스템 및 방법

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020247009170A Active KR102795741B1 (ko) 2017-03-06 2018-03-05 놀이 공원 환경에 배치된 가상 피처용 시스템 및 방법
KR1020197028984A Active KR102181793B1 (ko) 2017-03-06 2018-03-06 증강 탑승 시스템 및 방법
KR1020197028991A Active KR102145702B1 (ko) 2017-03-06 2018-03-06 게임플레이 탑승 차량 시스템 및 방법

Country Status (11)

Country Link
US (5) US12153723B2 (ko)
EP (4) EP3592444B1 (ko)
JP (5) JP7497572B2 (ko)
KR (6) KR20250057913A (ko)
CN (5) CN110352085B (ko)
CA (2) CA3054333A1 (ko)
ES (4) ES2993944T3 (ko)
MY (3) MY200651A (ko)
RU (4) RU2771098C2 (ko)
SG (4) SG11201907294PA (ko)
WO (4) WO2018165041A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210099790A (ko) 2020-02-05 2021-08-13 이근호 사파리 투어 시스템 및 그 시스템의 구동방법
KR20220075861A (ko) * 2020-11-30 2022-06-08 방성환 이미지 인식 기반의 증강현실 컨텐츠 제공 장치 및 방법
KR20230011146A (ko) 2021-07-13 2023-01-20 주식회사 리모샷 Vr 콘텐츠 제공 장치

Families Citing this family (153)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11960637B2 (en) 2013-11-11 2024-04-16 Whitewater West Ltd. Interactive amusement attraction system
US11487349B2 (en) * 2013-11-11 2022-11-01 Whitewater West Industries, Ltd. Interactive amusement attraction system and method
EP3062142B1 (en) 2015-02-26 2018-10-03 Nokia Technologies OY Apparatus for a near-eye display
JP6440910B2 (ja) * 2016-07-29 2018-12-19 三菱電機株式会社 表示装置、表示制御装置および表示制御方法
US10650552B2 (en) 2016-12-29 2020-05-12 Magic Leap, Inc. Systems and methods for augmented reality
EP4300160A3 (en) 2016-12-30 2024-05-29 Magic Leap, Inc. Polychromatic light out-coupling apparatus, near-eye displays comprising the same, and method of out-coupling polychromatic light
US12153723B2 (en) 2017-03-06 2024-11-26 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
US10977858B2 (en) 2017-03-30 2021-04-13 Magic Leap, Inc. Centralized rendering
US10639557B2 (en) * 2017-06-22 2020-05-05 Jntvr Llc Synchronized motion simulation for virtual reality
US11118930B2 (en) * 2017-07-14 2021-09-14 Lyft, Inc. Providing information to users of a transportation system using augmented reality elements
US10578870B2 (en) 2017-07-26 2020-03-03 Magic Leap, Inc. Exit pupil expander
US10675766B1 (en) 2017-08-28 2020-06-09 Disney Enterprises, Inc. System for introducing physical experiences into virtual reality (VR) worlds
US10362299B1 (en) * 2017-08-28 2019-07-23 Disney Enterprises, Inc. System for introducing physical experiences into virtual reality (VR) worlds
US11389719B2 (en) * 2017-11-10 2022-07-19 Whitewater West Industries Ltd. Water ride attraction incorporating interactive game play
KR20250138816A (ko) 2017-12-10 2025-09-22 매직 립, 인코포레이티드 광학 도파관들 상의 반사―방지 코팅들
CA3086206A1 (en) 2017-12-20 2019-06-27 Magic Leap, Inc. Insert for augmented reality viewing device
US10695682B1 (en) * 2017-12-27 2020-06-30 Disney Enterprises Inc. Automated dynamic adaptive controls
US11113887B2 (en) * 2018-01-08 2021-09-07 Verizon Patent And Licensing Inc Generating three-dimensional content from two-dimensional images
US10369483B1 (en) 2018-01-23 2019-08-06 Universal City Studios Llc Interactive tower attraction systems and methods
US10398989B2 (en) 2018-01-29 2019-09-03 Universal City Studios Llc Ride with rotating lift
EP3766039B1 (en) 2018-03-15 2024-08-14 Magic Leap, Inc. Image correction due to deformation of components of a viewing device
WO2019232282A1 (en) 2018-05-30 2019-12-05 Magic Leap, Inc. Compact variable focus configurations
US11227440B2 (en) 2018-05-30 2022-01-18 Ke.com (Beijing)Technology Co., Ltd. Systems and methods for providing an audio-guided virtual reality tour
JP7319303B2 (ja) 2018-05-31 2023-08-01 マジック リープ， インコーポレイテッド レーダ頭部姿勢位置特定
EP3804306B1 (en) 2018-06-05 2023-12-27 Magic Leap, Inc. Homography transformation matrices based temperature calibration of a viewing system
JP7421505B2 (ja) 2018-06-08 2024-01-24 マジック リープ， インコーポレイテッド 自動化された表面選択設置およびコンテンツ配向設置を用いた拡張現実ビューア
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
WO2020010097A1 (en) 2018-07-02 2020-01-09 Magic Leap, Inc. Pixel intensity modulation using modifying gain values
US11510027B2 (en) 2018-07-03 2022-11-22 Magic Leap, Inc. Systems and methods for virtual and augmented reality
US11856479B2 (en) 2018-07-03 2023-12-26 Magic Leap, Inc. Systems and methods for virtual and augmented reality along a route with markers
JP7374981B2 (ja) 2018-07-10 2023-11-07 マジック リープ， インコーポレイテッド クロス命令セットアーキテクチャプロシージャ呼出のためのスレッドウィービング
WO2020023545A1 (en) 2018-07-24 2020-01-30 Magic Leap, Inc. Temperature dependent calibration of movement detection devices
CN112639731A (zh) 2018-07-24 2021-04-09 奇跃公司 应用共享
WO2020023543A1 (en) 2018-07-24 2020-01-30 Magic Leap, Inc. Viewing device with dust seal integration
EP3831058B1 (en) 2018-08-02 2025-10-08 Magic Leap, Inc. A viewing system with interpupillary distance compensation based on head motion
EP3830631A4 (en) 2018-08-03 2021-10-27 Magic Leap, Inc. DRIFT CORRECTION BASED ON UNMERGED LAYING OF MELTED LAYING OF A TOTEM IN A USER INTERACTION SYSTEM
DE102018213556A1 (de) * 2018-08-10 2020-02-13 Audi Ag Verfahren und System zum Betreiben von zumindest zwei von jeweiligen Fahrzeuginsassen am Kopf getragenen Anzeigeeinrichtungen
US12016719B2 (en) 2018-08-22 2024-06-25 Magic Leap, Inc. Patient viewing system
US11583781B2 (en) * 2018-09-17 2023-02-21 Universal City Studios Llc Systems and methods for actuating a show element on a ride vehicle
US10636218B2 (en) * 2018-09-24 2020-04-28 Universal City Studios Llc Augmented reality for an amusement ride
US11562539B2 (en) * 2018-09-25 2023-01-24 Universal City Studios Llc Modular augmented and virtual reality ride attraction
US11212331B1 (en) * 2018-10-26 2021-12-28 Snap Inc. Triggering changes to real-time special effects included in a live streaming video
CN113196138B (zh) 2018-11-16 2023-08-25 奇跃公司 用于保持图像清晰度的图像尺寸触发的澄清
KR102203371B1 (ko) * 2018-11-30 2021-01-15 삼성물산 주식회사 놀이공원에서 놀이기구를 가동하는 동안 이미지를 시각화하는 장치, 방법 및 이미지 시각화 장치를 관리하는 장치 및 방법
CN109725717A (zh) * 2018-11-30 2019-05-07 成都理想境界科技有限公司 应用于ar设备的图像处理方法及ar设备
US10692294B1 (en) * 2018-12-17 2020-06-23 Universal City Studios Llc Systems and methods for mediated augmented physical interaction
WO2020132484A1 (en) 2018-12-21 2020-06-25 Magic Leap, Inc. Air pocket structures for promoting total internal reflection in a waveguide
US11340758B1 (en) * 2018-12-27 2022-05-24 Meta Platforms, Inc. Systems and methods for distributing content
US11318607B2 (en) * 2019-01-04 2022-05-03 Universal City Studios Llc Extended reality ride test assembly for amusement park system
US10839607B2 (en) * 2019-01-07 2020-11-17 Disney Enterprises, Inc. Systems and methods to provide views of a virtual space
US10780359B2 (en) 2019-01-08 2020-09-22 Universal City Studios Llc Systems and methods for a connected augmented environment
US11200656B2 (en) * 2019-01-11 2021-12-14 Universal City Studios Llc Drop detection systems and methods
US10807531B2 (en) 2019-01-14 2020-10-20 Universal City Studios Llc Augmented reality system for an amusement ride
EP3921720B1 (en) 2019-02-06 2024-05-22 Magic Leap, Inc. Target intent-based clock speed determination and adjustment to limit total heat generated by multiple processors
CN113544766B (zh) 2019-03-12 2024-12-03 奇跃公司 在第一和第二增强现实观看器之间配准本地内容
KR102424311B1 (ko) * 2019-03-27 2022-07-22 다보(주) 모바일 기기가 구비된 망원경형 증강현실 관람장치
US10816813B1 (en) * 2019-04-05 2020-10-27 Disney Enterprises, Inc. Systems and methods for enhancing accuracy of spatial location and rotational orientation determination of wearable head-mounted display device
CN110013668B (zh) * 2019-04-24 2020-09-11 重庆城市管理职业学院 基于vr技术的模拟飞行体验娱乐设施热力转盘
JP2022530900A (ja) 2019-05-01 2022-07-04 マジック リープ， インコーポレイテッド コンテンツプロビジョニングシステムおよび方法
GB201906340D0 (en) * 2019-05-04 2019-06-19 Studio Go Go Ltd A method and system for providing a virtual reality experience
US11483486B1 (en) * 2019-05-23 2022-10-25 Disney Enterprises, Inc. Virtual experience imaging products
US11391257B2 (en) * 2019-07-23 2022-07-19 Ford Global Technologies, Llc Power supply during vehicle startup
US11529886B2 (en) 2019-07-23 2022-12-20 Ford Global Technologies, Llc Power supply during vehicle off state
CN114174895B (zh) * 2019-07-26 2025-07-08 奇跃公司 用于增强现实的系统和方法
KR102784317B1 (ko) 2019-07-30 2025-03-24 삼성디스플레이 주식회사 표시장치
GB2586148A (en) 2019-08-07 2021-02-10 Sony Interactive Entertainment Inc Content generation system and method
US11481980B2 (en) * 2019-08-20 2022-10-25 The Calany Holding S.Á´ R.L. Transitioning from public to personal digital reality experience
US10976818B2 (en) * 2019-08-21 2021-04-13 Universal City Studios Llc Interactive attraction system and method for object and user association
US11442533B2 (en) * 2019-09-13 2022-09-13 iPMachine, LLC System for mixed reality experiences
KR102324845B1 (ko) * 2019-10-02 2021-11-11 (주)케이시크 사용자 게임 연계 자율주행 방법 및 시스템
CN112783322A (zh) * 2019-11-11 2021-05-11 斯平玛斯特有限公司 增强现实系统
US11377039B2 (en) * 2019-11-13 2022-07-05 Universal City Studios Llc Systems and methods to hold and charge a personal electronic device on a ride vehicle
JP7635230B2 (ja) 2019-11-14 2025-02-25 マジック リープ， インコーポレイテッド 仮想および拡張現実のためのシステムおよび方法
US11830460B2 (en) * 2019-11-14 2023-11-28 Magic Leap, Inc. Systems and methods for virtual and augmented reality
WO2021097323A1 (en) 2019-11-15 2021-05-20 Magic Leap, Inc. A viewing system for use in a surgical environment
JP6901541B2 (ja) * 2019-11-28 2021-07-14 株式会社カプコン ゲームプログラム、コンピュータ、及びゲームシステム
US11145117B2 (en) 2019-12-02 2021-10-12 At&T Intellectual Property I, L.P. System and method for preserving a configurable augmented reality experience
WO2021163224A1 (en) 2020-02-10 2021-08-19 Magic Leap, Inc. Dynamic colocation of virtual content
CN117827004A (zh) 2020-02-14 2024-04-05 奇跃公司 会话管理器
WO2021163624A1 (en) 2020-02-14 2021-08-19 Magic Leap, Inc. Tool bridge
US11763559B2 (en) 2020-02-14 2023-09-19 Magic Leap, Inc. 3D object annotation
US11474602B2 (en) * 2020-02-26 2022-10-18 Disney Enterprises, Inc. Gameplay system with play augmented by merchandise
US12229800B2 (en) * 2020-02-27 2025-02-18 Universal City Studios Llc Augmented reality guest recognition systems and methods
US11207606B2 (en) * 2020-03-02 2021-12-28 Universal City Studios Llc Systems and methods for reactive projection-mapped show robot
JP2021140085A (ja) * 2020-03-06 2021-09-16 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US11196944B2 (en) * 2020-05-06 2021-12-07 At&T Intellectual Property I, L.P. System for infinite windows with optical disparity and depth resolution
CN113694531B (zh) * 2020-05-21 2024-01-19 抖音视界有限公司 游戏特效的生成方法、装置、电子设备及计算机可读介质
CN115697768A (zh) 2020-05-27 2023-02-03 金泰克斯公司 瞬间捕捉系统
US11774770B2 (en) 2020-06-03 2023-10-03 Universal City Studios Llc Interface device with three-dimensional (3-D) viewing functionality
WO2021247940A1 (en) * 2020-06-03 2021-12-09 Mr Fun, Llc Location based augmented reality gaming system
CN111694430A (zh) * 2020-06-10 2020-09-22 浙江商汤科技开发有限公司 一种ar场景画面呈现方法、装置、电子设备和存储介质
US11839829B2 (en) * 2020-06-11 2023-12-12 Universal City Studios Llc Wearable visualization device with a retractable cover
CN111603766B (zh) * 2020-06-29 2024-01-09 上海完美时空软件有限公司 虚拟载具的控制方法及装置、存储介质、电子装置
CN111857138A (zh) * 2020-07-03 2020-10-30 深圳怡丰自动化科技有限公司 载人自动导引车的控制方法及其应用以及相关装置
US12379604B2 (en) * 2020-07-24 2025-08-05 Universal City Studios Llc Electromagnetic coupling systems and methods for visualization device
CN112130660B (zh) * 2020-08-14 2024-03-15 青岛小鸟看看科技有限公司 一种基于虚拟现实一体机的交互方法和系统
US11964214B2 (en) * 2020-08-19 2024-04-23 Universal City Studios Llc Systems and methods for adjusting an operation of an attraction system
US11747894B2 (en) * 2020-09-11 2023-09-05 Universal City Studios Llc Systems and methods to facilitate guest control of a ride vehicle
US11561611B2 (en) 2020-10-29 2023-01-24 Micron Technology, Inc. Displaying augmented reality responsive to an input
JP7538025B2 (ja) * 2020-12-17 2024-08-21 トヨタ自動車株式会社 移動体
WO2022200249A1 (de) * 2021-03-22 2022-09-29 Manfred Weigl Vorrichtung zur ansteuerung von aktuatoren
US12112415B2 (en) * 2021-04-09 2024-10-08 Universal City Studios Llc Systems and methods for animated figure display
WO2022219603A1 (en) * 2021-04-15 2022-10-20 Niantic, Inc. Augmented reality hat
DE102021111457A1 (de) * 2021-05-04 2022-11-10 Vr Coaster Gmbh & Co. Kg Verfahren zum Betreiben eines Fahrgeschäfts sowie Fahrgeschäft
US12309660B2 (en) * 2021-05-06 2025-05-20 Universal City Studios Llc Systems and methods for layered data reporting in an attraction
WO2022235672A1 (en) * 2021-05-06 2022-11-10 Universal City Studios Llc Systems and methods for layered data reporting in an attraction
US12175560B2 (en) * 2021-05-10 2024-12-24 Cerence Operating Company Touring circuitry for an immersive tour through a touring theater
JP7216940B2 (ja) * 2021-06-02 2023-02-02 株式会社Ｎｔｔコノキュー 通信システム、通信方法及び通信プログラム
JP7352598B2 (ja) * 2021-07-01 2023-09-28 本田技研工業株式会社 仮想体験提供システム、及びプログラム
JP7698998B2 (ja) * 2021-07-02 2025-06-26 株式会社ソニー・インタラクティブエンタテインメント 画像表示システムおよび画像表示方法
DE102021121045A1 (de) * 2021-08-12 2023-02-16 Mack Rides Ip Gmbh & Co. Kg Vergnügungs-Fahrgeschäft und Verfahren zum Betrieb eines Vergnügungs-Fahrgeschäfts
WO2023021592A1 (ja) * 2021-08-18 2023-02-23 株式会社ハシラス Ｖｒアミューズメントプログラムおよび装置
EP4405192A4 (en) * 2021-09-22 2025-07-02 Ericsson Telefon Ab L M VIRTUAL REALITY GAMING EXPERIENCE IN AN AUTONOMOUS VEHICLE
CN113908552A (zh) * 2021-09-29 2022-01-11 东北电力大学 一种虚拟现实结合的闯关式冰雪娱乐系统
US12337730B2 (en) * 2021-10-15 2025-06-24 Hyundai Mobis Co., Ltd. System for controlling vehicle based on occupant's intent
EP4180100A1 (en) * 2021-11-11 2023-05-17 Playoke GmbH System for providing a single- or multi- player game experience
WO2023107542A1 (en) * 2021-12-09 2023-06-15 Universal City Studios Llc Amusement content processing systems and methods
US12333640B2 (en) 2022-01-04 2025-06-17 Universal City Studios Llc Facial activity detection for virtual reality systems and methods
WO2023133149A1 (en) * 2022-01-04 2023-07-13 Universal City Studios Llc Facial activity detection for virtual reality systems and methods
CN114460749A (zh) * 2022-01-29 2022-05-10 杭州灵伴科技有限公司 头戴式显示装置和载人装置
CA3245752A1 (en) * 2022-03-31 2023-10-05 Universal City Studios Llc AMUSEMENT PARK RIDING EFFECT SYSTEM
CA3247375A1 (en) * 2022-04-21 2023-10-26 Universal City Studios Llc Systems and methods for tracking head-to-head profiles of dynamic and artificially intelligence-assisted (AI) rides.
US12079384B2 (en) * 2022-04-21 2024-09-03 Universal City Studios Llc Artificial intelligence (AI)-assisted and dynamic ride profile head tracking systems and methods
JP7805864B2 (ja) * 2022-05-23 2026-01-26 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
USD1023209S1 (en) 2022-05-26 2024-04-16 Sally Industries, Inc. Indoor amusement ride
US20230415050A1 (en) * 2022-06-22 2023-12-28 Universal City Studios Llc Systems and methods for ride system audio and visual effect synchronization
WO2024030444A1 (en) * 2022-08-03 2024-02-08 Universal City Studios Llc Systems and methods for operating an amusement park system
USD1044805S1 (en) 2022-08-04 2024-10-01 Niantic, Inc. Augmented reality hat
JP2025527463A (ja) * 2022-08-15 2025-08-22 ユニバーサル シティ スタジオズ リミテッド ライアビリティ カンパニー 遊園地アトラクションシステムのためのショー効果システム
US12505587B2 (en) 2022-08-15 2025-12-23 Universal City Studios Llc Show effect system for amusement park attraction system
JP2024034143A (ja) * 2022-08-31 2024-03-13 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および情報処理方法
KR20250057898A (ko) * 2022-09-06 2025-04-29 유니버셜 시티 스튜디오스 엘엘씨 놀이 공원 어트랙션 설계를 위한 실물/가상 설계 시스템 및 방법
KR102826046B1 (ko) 2022-09-15 2025-06-26 배재대학교 산학협력단 가상 현실 기반 관광지 액티비티 체험 시스템
KR102823179B1 (ko) * 2022-10-05 2025-06-20 가온그룹 주식회사 Ar 및 vr 호환형 xr 디바이스 장치
US12518492B2 (en) 2022-10-12 2026-01-06 Samsung Electronics Co., Ltd. Method and system for handling events of a real environment in a virtual reality environment
US12217372B2 (en) 2022-10-17 2025-02-04 T-Mobile Usa, Inc. Generating mixed reality content based on data from a wireless device
CN116248851A (zh) * 2022-12-01 2023-06-09 四川智能小子科技有限公司 基于实体剧场场景的增强现实系统和增强现实播放方法
US12208782B2 (en) * 2022-12-08 2025-01-28 Disney Enterprises, Inc. Systems and methods for pre-calculating information regarding interactions between objects during a simulation
KR102852564B1 (ko) * 2022-12-27 2025-08-29 주식회사 셀코스 Ar 및 vr 겸용 헤드셋 장치 및 그 영상 제공 방법
CN115840552A (zh) * 2022-12-27 2023-03-24 维沃移动通信有限公司 显示方法、装置及第一电子设备
US20240331306A1 (en) * 2023-03-30 2024-10-03 Glenn Robert Josefosky Rotating display for 360-degree visual content
US12596365B2 (en) 2023-05-09 2026-04-07 T-Mobile Usa, Inc. Enhancements to beyond-visual-line-of-sight (BVLOS) operation of remote-controlled apparatuses
US12505522B2 (en) * 2023-09-18 2025-12-23 Universal City Studios Llc Image correction system and method
CA3218716A1 (en) * 2023-10-10 2025-06-13 KHE Limited Slide and ride system
US20250131661A1 (en) * 2023-10-19 2025-04-24 Zeality Inc. Method and system for rendering modified scene in an immersive environment
US12475644B2 (en) 2023-10-25 2025-11-18 International Business Machines Corporation Virtual holiday control
GB2635395A (en) * 2023-11-10 2025-05-14 Sony Interactive Entertainment Europe Ltd Computer implemented method and system
US20250162609A1 (en) * 2023-11-20 2025-05-22 Adeia Guides Inc. System and methods for providing immersive virtual content during a self-driving mode of an autonomous vehicle
US20250288915A1 (en) * 2024-03-18 2025-09-18 Universal City Studios Llc Spatial audio adjustment system for an amusement ride
CN118071968B (zh) * 2024-04-17 2024-06-25 深圳市赛野展览展示有限公司 一种基于ar技术的智能交互深展示方法及系统
US20250334604A1 (en) * 2024-04-25 2025-10-30 Universal City Studios Llc System and method of user affordance and actuation
US20260003195A1 (en) * 2024-06-26 2026-01-01 Universal City Studios Llc Variable curvature reflective lens for head-mounted device
WO2026079100A1 (ja) * 2024-10-11 2026-04-16 本田技研工業株式会社 仮想体験提供システム、仮想体験提供方法、及びプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008059086A1 (es) * 2006-11-16 2008-05-22 The Movie Virtual, S.L. Sistema y metodo para la visualizacion de una imagen aumentada aplicando tecnicas de realidad aumentada
US20170104911A1 (en) * 2015-10-08 2017-04-13 Gopro, Inc. Smart Shutter in Low Light

Family Cites Families (199)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5790187U (ko) 1980-11-20 1982-06-03
JPS5790187A (en) 1980-11-27 1982-06-04 Matsushita Electric Works Ltd Multiaction type electronic digital timer
EP0581943A1 (en) 1992-02-24 1994-02-09 Hughes Aircraft Company Virtual image entertainment
JPH06176131A (ja) 1992-12-03 1994-06-24 Namco Ltd 画像合成装置及びこれを用いた仮想体験装置
JPH08160349A (ja) * 1994-12-09 1996-06-21 Sega Enterp Ltd 頭部搭載型映像表示システム、および、頭部搭載型映像表示装置
JP3491327B2 (ja) 1994-04-13 2004-01-26 株式会社セガ 遊戯装置
TW275590B (en) 1994-12-09 1996-05-11 Sega Enterprises Kk Head mounted display and system for use therefor
GB9506861D0 (en) 1995-04-03 1995-05-24 Zeneca Ltd Method of coating optical fibres
GB2301216A (en) 1995-05-25 1996-11-27 Philips Electronics Uk Ltd Display headset
US6227121B1 (en) 1995-11-03 2001-05-08 Metero Amusement Corporation Modularized amusement ride and training simulation device
US5716281A (en) * 1995-11-27 1998-02-10 Sega Enterprises, Ltd. Game apparatus using a vehicle with an optical image synthesizing system
JPH1015252A (ja) 1996-07-04 1998-01-20 Sega Enterp Ltd ゲームシステムおよびゲーム用車両
US5785592A (en) * 1996-08-12 1998-07-28 Sarcos, Inc. Interactive target game system
JP3651204B2 (ja) * 1996-12-18 2005-05-25 トヨタ自動車株式会社 立体画像表示装置、立体画像表示方法及び記録媒体
AU6021398A (en) 1997-01-16 1998-08-07 Orlo J. Fiske Amusement vehicle
JPH10309381A (ja) 1997-05-13 1998-11-24 Yoshimasa Tanaka 移動体用遊戯装置
US6220965B1 (en) 1998-07-08 2001-04-24 Universal City Studios Inc. Amusement system
JP2002532795A (ja) 1998-12-07 2002-10-02 ユニバーサル シティ スタジオズ インコーポレイテッド 視点画像ゆがみを補償するための画像補正方法
US6170402B1 (en) * 1999-04-21 2001-01-09 Universal City Studios, Inc. Roller coaster control system
JP2001062154A (ja) 1999-08-23 2001-03-13 Kazuo Sawatake 稼動式遊戯乗り物用視覚効果及び音響効果機能ヘルメット。
JP3273038B2 (ja) * 1999-11-17 2002-04-08 株式会社ナムコ 仮想体験型ゲーム装置
US6533670B1 (en) 2000-08-14 2003-03-18 Universal City Studio, Inc. Amusement ride with pivotable motion base
US6796908B2 (en) 2001-06-14 2004-09-28 Creative Kingdoms, Llc Interactive dark ride
JP4124995B2 (ja) 2001-10-31 2008-07-23 キヤノン株式会社 映像合成装置および情報処理方法
WO2003082421A2 (en) 2002-03-22 2003-10-09 Threlkel David V Amusement ride
US6917370B2 (en) 2002-05-13 2005-07-12 Charles Benton Interacting augmented reality and virtual reality
US7495638B2 (en) 2003-05-13 2009-02-24 Research Triangle Institute Visual display with increased field of view
JP4378118B2 (ja) 2003-06-27 2009-12-02 学校法人早稲田大学 立体映像呈示装置
RU2293587C2 (ru) 2003-08-06 2007-02-20 Владимир Алексеевич Гнездилов Аттракцион (варианты)
US20160098095A1 (en) 2004-01-30 2016-04-07 Electronic Scripting Products, Inc. Deriving Input from Six Degrees of Freedom Interfaces
JP2005312685A (ja) 2004-04-28 2005-11-10 Aruze Corp 遊技機
US8585476B2 (en) * 2004-11-16 2013-11-19 Jeffrey D Mullen Location-based games and augmented reality systems
JP4738870B2 (ja) 2005-04-08 2011-08-03 キヤノン株式会社 情報処理方法、情報処理装置および遠隔複合現実感共有装置
US20060250322A1 (en) 2005-05-09 2006-11-09 Optics 1, Inc. Dynamic vergence and focus control for head-mounted displays
US7955168B2 (en) 2005-06-24 2011-06-07 Disney Enterprises, Inc. Amusement ride and video game
JP2007052484A (ja) 2005-08-15 2007-03-01 Dainippon Printing Co Ltd 画像処理装置、画像処理方法及び画像処理用プログラム並びに情報記録媒体
US20070106484A1 (en) 2005-11-04 2007-05-10 Triverity Corporation Entertainment ride experience enhancement system
US8212859B2 (en) 2006-10-13 2012-07-03 Apple Inc. Peripheral treatment for head-mounted displays
FR2911463B1 (fr) * 2007-01-12 2009-10-30 Total Immersion Sa Dispositif d'observation de realite augmentee temps reel et procede de mise en oeuvre d'un dispositif
US20080188318A1 (en) 2007-02-01 2008-08-07 Piccionelli Gregory A Ride system with motion simulation and video stream
US8511827B2 (en) 2008-01-22 2013-08-20 The Arizona Board Of Regents On Behalf Of The University Of Arizona Head-mounted projection display using reflective microdisplays
US8025581B2 (en) 2008-05-09 2011-09-27 Disney Enterprises, Inc. Interactive interface mounting assembly for amusement and theme park rides
US20120256945A1 (en) 2008-06-17 2012-10-11 Digigage Ltd. System for altering virtual views
ATE541624T1 (de) 2008-06-26 2012-02-15 Maurer Friedrich Soehne Fahrgeschäft, insbesondere achterbahn
US20100131865A1 (en) 2008-11-24 2010-05-27 Disney Enterprises, Inc. Method and system for providing a multi-mode interactive experience
US8303406B2 (en) 2008-11-24 2012-11-06 Disney Enterprises, Inc. System and method for providing an augmented reality experience
MX2011006941A (es) 2008-12-29 2011-07-20 Red Com Inc Camara digital modular.
US20110025584A1 (en) * 2009-07-29 2011-02-03 Gm Global Technology Operations, Inc. Light-emitting diode heads-up display for a vehicle
RU2433487C2 (ru) 2009-08-04 2011-11-10 Леонид Михайлович Файнштейн Способ проецирования изображения на поверхности реальных объектов
US20110141246A1 (en) 2009-12-15 2011-06-16 Justin Michael Schwartz System and Method for Producing Stereoscopic Images
US9901828B2 (en) 2010-03-30 2018-02-27 Sony Interactive Entertainment America Llc Method for an augmented reality character to maintain and exhibit awareness of an observer
US8941559B2 (en) 2010-09-21 2015-01-27 Microsoft Corporation Opacity filter for display device
US9122053B2 (en) 2010-10-15 2015-09-01 Microsoft Technology Licensing, Llc Realistic occlusion for a head mounted augmented reality display
US9292973B2 (en) 2010-11-08 2016-03-22 Microsoft Technology Licensing, Llc Automatic variable virtual focus for augmented reality displays
US8576276B2 (en) 2010-11-18 2013-11-05 Microsoft Corporation Head-mounted display device which provides surround video
JP2012141461A (ja) 2010-12-29 2012-07-26 Sony Corp ヘッド・マウント・ディスプレイ
JP5704931B2 (ja) 2011-01-18 2015-04-22 株式会社三共 遊技機
WO2012118507A1 (en) * 2011-03-03 2012-09-07 Research In Motion Limited Methods and apparatus to generate virtual-world environments
JP5790187B2 (ja) 2011-06-16 2015-10-07 ソニー株式会社 表示装置
WO2013000075A1 (en) 2011-06-29 2013-01-03 Recon Instruments Inc. Modular heads-up display systems
US8491403B2 (en) 2011-07-08 2013-07-23 Nathan Schreibfeder Amusement ride system
US8963957B2 (en) 2011-07-15 2015-02-24 Mark Skarulis Systems and methods for an augmented reality platform
AU2011204946C1 (en) 2011-07-22 2012-07-26 Microsoft Technology Licensing, Llc Automatic text scrolling on a head-mounted display
JP2013027479A (ja) 2011-07-27 2013-02-07 Kunio Goto 映像投影施設
US9352225B2 (en) * 2011-08-18 2016-05-31 Game Nation, Inc. System and method for providing a multi-player game experience
US9342610B2 (en) 2011-08-25 2016-05-17 Microsoft Technology Licensing, Llc Portals: registered objects as virtualized, personalized displays
US9285871B2 (en) 2011-09-30 2016-03-15 Microsoft Technology Licensing, Llc Personal audio/visual system for providing an adaptable augmented reality environment
US9215293B2 (en) * 2011-10-28 2015-12-15 Magic Leap, Inc. System and method for augmented and virtual reality
US9316834B2 (en) 2011-11-24 2016-04-19 Panasonic Intellectual Property Management Co., Ltd. Head-mounted display device with foveated pixels
US20130137076A1 (en) 2011-11-30 2013-05-30 Kathryn Stone Perez Head-mounted display based education and instruction
US20130141419A1 (en) 2011-12-01 2013-06-06 Brian Mount Augmented reality with realistic occlusion
US8705177B1 (en) 2011-12-05 2014-04-22 Google Inc. Integrated near-to-eye display module
US9497501B2 (en) 2011-12-06 2016-11-15 Microsoft Technology Licensing, Llc Augmented reality virtual monitor
CN102402005B (zh) 2011-12-06 2015-11-25 北京理工大学 自由曲面双焦面单目立体头盔显示器装置
US20150312561A1 (en) 2011-12-06 2015-10-29 Microsoft Technology Licensing, Llc Virtual 3d monitor
US20130032053A1 (en) 2012-01-09 2013-02-07 Daniel James Stoker Hybrid Motion Ride and Ride Simulator Vehicle
US9092953B1 (en) 2012-01-24 2015-07-28 Bruce J. P. Mortimer System and method for providing a remote haptic stimulus
US8727896B2 (en) 2012-03-14 2014-05-20 Anton Frolov Underground and underwater amusement attractions
US9183676B2 (en) * 2012-04-27 2015-11-10 Microsoft Technology Licensing, Llc Displaying a collision between real and virtual objects
US9210413B2 (en) 2012-05-15 2015-12-08 Imagine Mobile Augmented Reality Ltd System worn by a moving user for fully augmenting reality by anchoring virtual objects
US9253524B2 (en) 2012-07-20 2016-02-02 Intel Corporation Selective post-processing of decoded video frames based on focus point determination
US10073201B2 (en) 2012-10-26 2018-09-11 Qualcomm Incorporated See through near-eye display
US9448404B2 (en) 2012-11-13 2016-09-20 Qualcomm Incorporated Modifying virtual object display properties to increase power performance of augmented reality devices
US20140146394A1 (en) 2012-11-28 2014-05-29 Nigel David Tout Peripheral display for a near-eye display device
US9851787B2 (en) * 2012-11-29 2017-12-26 Microsoft Technology Licensing, Llc Display resource management
US8867139B2 (en) 2012-11-30 2014-10-21 Google Inc. Dual axis internal optical beam tilt for eyepiece of an HMD
IL308285B2 (en) * 2013-03-11 2024-11-01 Magic Leap Inc System and method for augmentation and virtual reality
FR3004817B1 (fr) 2013-04-19 2015-05-15 Thales Sa Systeme de visualisation hybride affichant des informations en superposition sur l exterieur
US9519144B2 (en) 2013-05-17 2016-12-13 Nvidia Corporation System, method, and computer program product to produce images for a near-eye light field display having a defect
US9582922B2 (en) 2013-05-17 2017-02-28 Nvidia Corporation System, method, and computer program product to produce images for a near-eye light field display
US10905943B2 (en) 2013-06-07 2021-02-02 Sony Interactive Entertainment LLC Systems and methods for reducing hops associated with a head mounted system
US10137361B2 (en) * 2013-06-07 2018-11-27 Sony Interactive Entertainment America Llc Systems and methods for using reduced hops to generate an augmented virtual reality scene within a head mounted system
US9908048B2 (en) 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display
EP3008549B1 (en) * 2013-06-09 2021-03-17 Sony Interactive Entertainment Inc. Head mounted display
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
US20150003819A1 (en) 2013-06-28 2015-01-01 Nathan Ackerman Camera auto-focus based on eye gaze
US9437131B2 (en) 2013-07-05 2016-09-06 Visteon Global Technologies, Inc. Driving a multi-layer transparent display
JP6237000B2 (ja) 2013-08-29 2017-11-29 セイコーエプソン株式会社 頭部装着型表示装置
CA2865343C (en) 2013-09-30 2018-03-13 Rick A. Briggs Interactive play center
US9536353B2 (en) 2013-10-03 2017-01-03 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9630631B2 (en) 2013-10-03 2017-04-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9715764B2 (en) * 2013-10-03 2017-07-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
WO2015051660A1 (zh) 2013-10-13 2015-04-16 北京蚁视科技有限公司 头戴式立体显示器
US9266028B2 (en) 2013-11-18 2016-02-23 Raven Sun Creative, Inc. Tower ride
US9463379B1 (en) * 2013-12-17 2016-10-11 Thinkwell Group Ride vehicle mounted interactive game system
US9569886B2 (en) 2013-12-19 2017-02-14 Intel Corporation Variable shading
US9494800B2 (en) 2014-01-21 2016-11-15 Osterhout Group, Inc. See-through computer display systems
CN106233189B (zh) * 2014-01-31 2020-06-26 奇跃公司 多焦点显示系统和方法
US9389423B2 (en) 2014-03-11 2016-07-12 Google Inc. Head wearable display with adjustable transparency
US9511650B2 (en) 2014-03-30 2016-12-06 Bob Momot Adjustable opacity control based on operator and light source position
CN103977559B (zh) 2014-05-23 2017-10-17 北京智谷睿拓技术服务有限公司 交互方法及交互装置
US9155971B1 (en) 2014-05-28 2015-10-13 Disney Enterprises, Inc. Selective illumination of physical scenery in amusement park rides
JP2015228050A (ja) 2014-05-30 2015-12-17 ソニー株式会社 情報処理装置および情報処理方法
US9360671B1 (en) 2014-06-09 2016-06-07 Google Inc. Systems and methods for image zoom
GB2527503A (en) 2014-06-17 2015-12-30 Next Logic Pty Ltd Generating a sequence of stereoscopic images for a head-mounted display
RU2592458C2 (ru) 2014-06-26 2016-07-20 Общество с ограниченной ответственностью "АВИАРЕАЛ" Способ формирования изображения дополненной реальности, обеспечивающий корректное восприятие удаления виртуальных объектов
JP6361327B2 (ja) * 2014-07-02 2018-07-25 セイコーエプソン株式会社 電気光学装置、及び電子機器
CN104102412B (zh) * 2014-07-24 2017-12-12 央数文化(上海)股份有限公司 一种基于增强现实技术的手持式阅览设备及其方法
EP3041591B1 (de) 2014-08-11 2016-11-09 Mack Rides GmbH & Co. KG Verfahren zum betreiben einer vorrichtung, insbesondere eines fahrgeschäftes, eines transportmittels, eines fitnessgerätes oder dergleichen
US9690375B2 (en) * 2014-08-18 2017-06-27 Universal City Studios Llc Systems and methods for generating augmented and virtual reality images
KR102230076B1 (ko) 2014-09-01 2021-03-19 삼성전자 주식회사 헤드 마운트 디스플레이 장치
US10261579B2 (en) 2014-09-01 2019-04-16 Samsung Electronics Co., Ltd. Head-mounted display apparatus
JP6290754B2 (ja) 2014-09-11 2018-03-07 株式会社パスコ 仮想空間表示装置、仮想空間表示方法及びプログラム
US10238979B2 (en) * 2014-09-26 2019-03-26 Universal City Sudios LLC Video game ride
US20160097929A1 (en) 2014-10-01 2016-04-07 Dawson Yee See-through display optic structure
US20160097930A1 (en) 2014-10-06 2016-04-07 Steven John Robbins Microdisplay optical system having two microlens arrays
JP6363928B2 (ja) * 2014-10-10 2018-07-25 泉陽興業株式会社 遊戯施設
US9366871B2 (en) 2014-10-24 2016-06-14 Emagin Corporation Microdisplay based immersive headset
CN106062862B (zh) * 2014-10-24 2020-04-21 杭州凌感科技有限公司 用于沉浸式和交互式多媒体生成的系统和方法
CN106999768A (zh) 2014-11-16 2017-08-01 盖·芬夫特 用于提供替代现实搭乘体验的系统和方法
WO2016105285A1 (en) 2014-12-26 2016-06-30 Koc University Near-to-eye display device with variable resolution
US10108832B2 (en) 2014-12-30 2018-10-23 Hand Held Products, Inc. Augmented reality vision barcode scanning system and method
WO2016112017A2 (en) 2015-01-05 2016-07-14 Worcester Polytechnic Institute System and method for controlling immersiveness of head-worn displays
US10740971B2 (en) 2015-01-20 2020-08-11 Microsoft Technology Licensing, Llc Augmented reality field of view object follower
CN104627078B (zh) * 2015-02-04 2017-03-08 上海咔酷咔新能源科技有限公司 基于柔性透明oled的汽车驾驶虚拟系统及其控制方法
WO2016130941A1 (en) 2015-02-12 2016-08-18 Google Inc. Combining a high resolution narrow field display and a mid resolution wide field display
TWI567670B (zh) 2015-02-26 2017-01-21 宅妝股份有限公司 切換虛擬實境模式與擴增實境模式的管理方法以及系統
US9358473B2 (en) 2015-03-24 2016-06-07 Anthony Frolov Interactive amusement attraction
US10423234B2 (en) 2015-03-27 2019-09-24 Lucasfilm Entertainment Company Ltd. Facilitate user manipulation of a virtual reality environment
US20160314624A1 (en) 2015-04-24 2016-10-27 Eon Reality, Inc. Systems and methods for transition between augmented reality and virtual reality
US9690374B2 (en) 2015-04-27 2017-06-27 Google Inc. Virtual/augmented reality transition system and method
US20160343173A1 (en) 2015-05-20 2016-11-24 Daqri, Llc Acousto-optical display for augmented reality
US20160349509A1 (en) 2015-05-26 2016-12-01 Microsoft Technology Licensing, Llc Mixed-reality headset
US9877016B2 (en) 2015-05-27 2018-01-23 Google Llc Omnistereo capture and render of panoramic virtual reality content
US10038887B2 (en) 2015-05-27 2018-07-31 Google Llc Capture and render of panoramic virtual reality content
US20170363949A1 (en) 2015-05-27 2017-12-21 Google Inc Multi-tier camera rig for stereoscopic image capture
US9942539B2 (en) * 2015-06-01 2018-04-10 Disney Enterprises, Inc. Scanning laser-based three dimensional (3D) display systems for viewers wearing 3D glasses
US10366534B2 (en) 2015-06-10 2019-07-30 Microsoft Technology Licensing, Llc Selective surface mesh regeneration for 3-dimensional renderings
US9638921B2 (en) 2015-06-11 2017-05-02 Oculus Vr, Llc Strap system for head-mounted displays
US9977493B2 (en) 2015-06-17 2018-05-22 Microsoft Technology Licensing, Llc Hybrid display system
US9939648B2 (en) 2015-06-23 2018-04-10 Google Llc Head mounted display device with dual curved displays
US10078917B1 (en) * 2015-06-26 2018-09-18 Lucasfilm Entertainment Company Ltd. Augmented reality simulation
CA2991644C (en) 2015-07-06 2022-03-01 Frank Jones Methods and devices for demountable head mounted displays
US20170039986A1 (en) 2015-08-07 2017-02-09 Microsoft Technology Licensing, Llc Mixed Reality Social Interactions
US9606362B2 (en) 2015-08-07 2017-03-28 Ariadne's Thread (Usa), Inc. Peripheral field-of-view illumination system for a head mounted display
US9454010B1 (en) 2015-08-07 2016-09-27 Ariadne's Thread (Usa), Inc. Wide field-of-view head mounted display system
US10235808B2 (en) 2015-08-20 2019-03-19 Microsoft Technology Licensing, Llc Communication system
US20170053445A1 (en) 2015-08-20 2017-02-23 Microsoft Technology Licensing, Llc Augmented Reality
US10169917B2 (en) 2015-08-20 2019-01-01 Microsoft Technology Licensing, Llc Augmented reality
WO2017061677A1 (en) 2015-10-08 2017-04-13 Lg Electronics Inc. Head mount display device
US10724874B2 (en) * 2015-10-13 2020-07-28 Here Global B.V. Virtual reality environment responsive to predictive route navigation
US20170116950A1 (en) 2015-10-22 2017-04-27 Google Inc. Liquid crystal display with variable drive voltage
US9741125B2 (en) 2015-10-28 2017-08-22 Intel Corporation Method and system of background-foreground segmentation for image processing
US10001683B2 (en) 2015-11-06 2018-06-19 Microsoft Technology Licensing, Llc Low-profile microdisplay module
US9763342B2 (en) 2015-12-09 2017-09-12 Oculus Vr, Llc Cable retention assembly for a head mounted display
US10147235B2 (en) 2015-12-10 2018-12-04 Microsoft Technology Licensing, Llc AR display with adjustable stereo overlap zone
US20170176747A1 (en) 2015-12-21 2017-06-22 Tuomas Heikki Sakari Vallius Multi-Pupil Display System for Head-Mounted Display Device
US10229540B2 (en) 2015-12-22 2019-03-12 Google Llc Adjusting video rendering rate of virtual reality content and processing of a stereoscopic image
EP3347811A1 (en) 2016-01-21 2018-07-18 Google LLC Global command interface for a hybrid display, corresponding method, and head mounted display
US10229541B2 (en) 2016-01-28 2019-03-12 Sony Interactive Entertainment America Llc Methods and systems for navigation within virtual reality space using head mounted display
US10209785B2 (en) 2016-02-02 2019-02-19 Microsoft Technology Licensing, Llc Volatility based cursor tethering
US20170225084A1 (en) * 2016-02-05 2017-08-10 S&S Worldwide, Inc. Immersive mobile theater
US11112266B2 (en) 2016-02-12 2021-09-07 Disney Enterprises, Inc. Method for motion-synchronized AR or VR entertainment experience
US10169922B2 (en) 2016-02-16 2019-01-01 Microsoft Technology Licensing, Llc Reality mixer for mixed reality
US10473933B2 (en) 2016-02-19 2019-11-12 Microsoft Technology Licensing, Llc Waveguide pupil relay
US9933624B1 (en) 2016-03-01 2018-04-03 Daryl White System and method for providing individualized virtual reality for an amusement attraction
US9778467B1 (en) 2016-03-01 2017-10-03 Daryl White Head mounted display
US9964767B2 (en) 2016-03-03 2018-05-08 Google Llc Display with reflected LED micro-display panels
KR102448919B1 (ko) 2016-03-16 2022-10-04 삼성디스플레이 주식회사 표시 장치
US10133345B2 (en) 2016-03-22 2018-11-20 Microsoft Technology Licensing, Llc Virtual-reality navigation
US10175487B2 (en) 2016-03-29 2019-01-08 Microsoft Technology Licensing, Llc Peripheral display for head mounted display device
US9946074B2 (en) 2016-04-07 2018-04-17 Google Llc See-through curved eyepiece with patterned optical combiner
US9965899B2 (en) 2016-04-28 2018-05-08 Verizon Patent And Licensing Inc. Methods and systems for minimizing pixel data transmission in a network-based virtual reality media delivery configuration
US20170323482A1 (en) 2016-05-05 2017-11-09 Universal City Studios Llc Systems and methods for generating stereoscopic, augmented, and virtual reality images
US20170323416A1 (en) 2016-05-09 2017-11-09 Intel Corporation Processing image fragments from one frame in separate image processing pipes based on image analysis
US10502363B2 (en) 2016-05-17 2019-12-10 Occipital, Inc. Self-contained mixed reality head mounted display
US10496156B2 (en) 2016-05-17 2019-12-03 Google Llc Techniques to change location of objects in a virtual/augmented reality system
US10151927B2 (en) 2016-05-31 2018-12-11 Falcon's Treehouse, Llc Virtual reality and augmented reality head set for ride vehicle
US9858848B1 (en) * 2016-06-09 2018-01-02 International Business Machines Corporation Dynamic display adjustment on a transparent flexible display
US10296792B2 (en) 2016-07-14 2019-05-21 Magic Leap, Inc. Iris boundary estimation using cornea curvature
CN106019597A (zh) 2016-07-27 2016-10-12 北京小米移动软件有限公司 虚拟现实眼镜
US9922466B2 (en) * 2016-08-05 2018-03-20 Uber Technologies, Inc. Virtual reality experience for a vehicle
CN106154555B (zh) 2016-08-24 2020-08-21 北京小米移动软件有限公司 虚拟现实眼镜
TWI622803B (zh) 2016-08-30 2018-05-01 廣達電腦股份有限公司 頭戴式顯示裝置
DE202017105948U1 (de) 2016-10-03 2018-03-07 Google LLC (n.d.Ges.d. Staates Delaware) Augmented-Reality- und/oder Virtual-Reality-Headset
US10459236B2 (en) 2016-12-09 2019-10-29 Lg Electronics Inc. Head-mounted display device with earbud holder
US20180196262A1 (en) 2017-01-12 2018-07-12 Artavious Cage Virtual reality system
US12153723B2 (en) 2017-03-06 2024-11-26 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
JP7108346B2 (ja) 2020-02-26 2022-07-28 ベースフード株式会社 パンおよびパンの製造方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008059086A1 (es) * 2006-11-16 2008-05-22 The Movie Virtual, S.L. Sistema y metodo para la visualizacion de una imagen aumentada aplicando tecnicas de realidad aumentada
US20170104911A1 (en) * 2015-10-08 2017-04-13 Gopro, Inc. Smart Shutter in Low Light

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210099790A (ko) 2020-02-05 2021-08-13 이근호 사파리 투어 시스템 및 그 시스템의 구동방법
KR20220075861A (ko) * 2020-11-30 2022-06-08 방성환 이미지 인식 기반의 증강현실 컨텐츠 제공 장치 및 방법
KR20230011146A (ko) 2021-07-13 2023-01-20 주식회사 리모샷 Vr 콘텐츠 제공 장치

Also Published As

Publication number Publication date
EP3592442A1 (en) 2020-01-15
CN110352085B (zh) 2023-10-27
EP3592442B1 (en) 2023-05-10
EP3592444B1 (en) 2024-09-25
JP2020511218A (ja) 2020-04-16
US10572000B2 (en) 2020-02-25
US10528123B2 (en) 2020-01-07
JP6756052B2 (ja) 2020-09-16
US20250093944A1 (en) 2025-03-20
KR20250057913A (ko) 2025-04-29
SG11201907293SA (en) 2019-09-27
RU2754991C2 (ru) 2021-09-08
EP3592445B1 (en) 2024-01-31
CN110382066A (zh) 2019-10-25
WO2018165170A1 (en) 2018-09-13
JP7655887B2 (ja) 2025-04-02
ES2974886T3 (es) 2024-07-02
KR20240042176A (ko) 2024-04-01
MY196303A (en) 2023-03-24
JP2020514900A (ja) 2020-05-21
RU2719237C1 (ru) 2020-04-17
ES2993944T3 (en) 2025-01-14
CA3054336A1 (en) 2018-09-13
RU2019131365A3 (ko) 2021-04-07
CN110352086A (zh) 2019-10-18
KR20190123314A (ko) 2019-10-31
CA3054963A1 (en) 2018-09-13
CN110352086B (zh) 2024-03-12
JP7257960B2 (ja) 2023-04-14
EP3592443A2 (en) 2020-01-15
US20180253141A1 (en) 2018-09-06
CN110382066B (zh) 2023-10-13
JP2022188084A (ja) 2022-12-20
EP3592444A1 (en) 2020-01-15
KR20190123311A (ko) 2019-10-31
WO2018165041A1 (en) 2018-09-13
JP2020513956A (ja) 2020-05-21
ES2951475T3 (es) 2023-10-23
WO2018165165A2 (en) 2018-09-13
JP7198213B2 (ja) 2022-12-28
RU2754992C2 (ru) 2021-09-08
RU2019131372A (ru) 2021-04-07
CN110352087A (zh) 2019-10-18
SG11201907990YA (en) 2019-09-27
US12153723B2 (en) 2024-11-26
RU2019131371A3 (ko) 2021-04-07
EP3592443B1 (en) 2023-09-06
RU2019131365A (ru) 2021-04-07
RU2771098C2 (ru) 2022-04-26
EP3592445A1 (en) 2020-01-15
MY195166A (en) 2023-01-11
RU2019131372A3 (ko) 2021-07-06
KR102795741B1 (ko) 2025-04-17
KR102181793B1 (ko) 2020-11-25
WO2018165041A8 (en) 2019-04-18
SG11201907294PA (en) 2019-09-27
US20180250589A1 (en) 2018-09-06
CA3054671A1 (en) 2018-09-13
RU2019131371A (ru) 2021-04-07
ES2965043T3 (es) 2024-04-10
US20180253905A1 (en) 2018-09-06
CN110352085A (zh) 2019-10-18
JP7497572B2 (ja) 2024-06-11
JP2020513957A (ja) 2020-05-21
CA3054963C (en) 2020-11-03
KR102145702B1 (ko) 2020-08-19
SG11201907988QA (en) 2019-09-27
MY200651A (en) 2024-01-09
CN116474381A (zh) 2023-07-25
WO2018165039A1 (en) 2018-09-13
KR20190117024A (ko) 2019-10-15
WO2018165165A3 (en) 2018-11-01
KR102145140B1 (ko) 2020-08-18
US10289194B2 (en) 2019-05-14
CA3054333A1 (en) 2018-09-13
US20180255285A1 (en) 2018-09-06

Similar Documents

Publication Publication Date Title
KR102145140B1 (ko) 혼합 현실 뷰어 시스템 및 방법
US11494995B2 (en) Systems and methods for virtual and augmented reality
US10845942B2 (en) Information processing device and information processing method
JP2025122040A (ja) 拡張現実および仮想現実のためのシステムおよび方法
RU2621644C2 (ru) Мир массового одновременного удаленного цифрового присутствия
US10692288B1 (en) Compositing images for augmented reality
JP7711002B2 (ja) 動的オクルージョンのための高速の手のメッシュ化
US11778283B2 (en) Video distribution system for live distributing video containing animation of character object generated based on motion of actors
JP2019510321A (ja) 仮想現実用パススルーカメラのユーザインターフェイス要素
KR20150012274A (ko) 이미지 내 원형 객체 검출에 의한 계산장치 동작
KR20230173231A (ko) 증강 및 가상 현실을 위한 시스템 및 방법
CN113194329A (zh) 直播互动方法、装置、终端及存储介质
KR102833162B1 (ko) 중재된 증강된 물리적 상호작용을 위한 시스템 및 방법
WO2024131479A1 (zh) 虚拟环境的显示方法、装置、可穿戴电子设备及存储介质
JP2025005681A (ja) 画像処理装置、画像処理方法およびプログラム
CA3054671C (en) Mixed reality viewer system and method
HK40016105A (en) Mixed reality viewer system and method
HK40016105B (zh) 混合现实观察器系统和方法
KR20200031255A (ko) 인터랙션 콘텐츠에 대한 영상 데이터 공유 시스템 및 그 방법
Hamadouche Augmented reality X-ray vision on optical see-through head mounted displays
JP2024033849A (ja) 情報処理装置および情報処理方法
HK40091522A (zh) 图像处理方法、信息处理装置、计算机程序及存储介质
KR20200031259A (ko) 인터랙션 콘텐츠에 대한 영상 데이터 공유 시스템 및 그 방법

Legal Events

Date Code Title Description
PA0105 International application

St.27 status event code: A-0-1-A10-A15-nap-PA0105

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

A201 Request for examination
A302 Request for accelerated examination
E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

PA0302 Request for accelerated examination

St.27 status event code: A-1-2-D10-D17-exm-PA0302

St.27 status event code: A-1-2-D10-D16-exm-PA0302

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U12-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 6