SE523636C2 - Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt - Google Patents

Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt

Info

Publication number
SE523636C2
SE523636C2 SE0102583A SE0102583A SE523636C2 SE 523636 C2 SE523636 C2 SE 523636C2 SE 0102583 A SE0102583 A SE 0102583A SE 0102583 A SE0102583 A SE 0102583A SE 523636 C2 SE523636 C2 SE 523636C2
Authority
SE
Sweden
Prior art keywords
handling
objects
hand
screen
pointing device
Prior art date
Application number
SE0102583A
Other languages
English (en)
Other versions
SE0102583L (sv
SE0102583D0 (sv
Inventor
Tomer Shalit
Anders Heggestad
Original Assignee
Tomer Shalit Ab
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tomer Shalit Ab filed Critical Tomer Shalit Ab
Priority to SE0102583A priority Critical patent/SE523636C2/sv
Publication of SE0102583D0 publication Critical patent/SE0102583D0/sv
Priority to JP2003515961A priority patent/JP4058406B2/ja
Priority to PCT/SE2002/001329 priority patent/WO2003010653A1/en
Priority to CNB028161645A priority patent/CN1278211C/zh
Priority to EP02746275A priority patent/EP1417562A1/en
Priority to US10/484,318 priority patent/US20050083314A1/en
Publication of SE0102583L publication Critical patent/SE0102583L/sv
Publication of SE523636C2 publication Critical patent/SE523636C2/sv

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a three-dimensional [3D] space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of two-dimensional [2D] relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional [3D], e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

25 30 523 636 2 försett med en ultraljudkälla som utsänder pulssignaler vilka uppfångas av minst två mikrofoner som är anordnade på skrivtavlan för att fastställa skrivstiftets position i två dimensioner.
I de bifogade oberoende kraven beskrivs utföringsformer av föreliggande uppfinning med dess fördelar. Vidare utföringsformer och fördelar beskrivs i de bifogade underkraven.
Sammanfattning av den beskrivna uppfinningen Ett syfte med föreliggande uppfinning är att föreslå ett portabelt datoriserat handhållet organ med en stereoskopisk bildskärm för tvådimensionell och/eller tredimensionell bläddring och hantering med två hanteringsorgan; varvid det ena används när organet hålls på en handflata som t ex under gång och den andra för placering på en annan yta som t ex ett bord.
För att uppnå målen och syftena med föreliggande uppfinning föreslås ett portabelt datoriserat handhållet organ med en bildskärm som visar bilder av objekt som skall hanteras, varvid en hantering av objekten gör att en länk ansluts till ett underobjekt eller en funktion som skall utföras, innefattande : ett första hanteringsorgan för nämnda objekt, vilket styr hanteringen av nämnda objekt genom rörelsen hos en hand som håller nämnda hanteringsorgan; ett andra hanteringsorgan för nämnda obj ekt, vilket styr hanteringen av nämnda objekt genom en pekanordning när det är placerat på en annan yta än en hand; och ett organ för anordnande av en taktil återkoppling till nämnda hand för varje lyckad möjlig hantering av nämnda obj ekt, vilket därigenom ger en tryckknappfri hantering av objekten och en känsla för hanteringen, vilket på så sätt ökar hanteringshastigheten genom att involvera minst de båda sinnena syn och känsel, och genom att anordna minst två funktioner för hantering av objekt på en skärm i överensstämmelse med nämnda första och andra organ.
Vid en utföringsforrn av föreliggande uppfinning är det försett med en gyro, varvid graden av vickningen av denna utgör en insignal till nämnda första och andra hanteringsorgan som styr objektens hanteringsgrad.
En annan utföringsforrn innefattar att en nollbas för en hantering är anordnad genom en handling för godkännande som utförs av dess bärare, oavsett i vilken riktning eller under vilken vinkel den hålls när nämnda handling utförs.
En vickning av det portabla handhållna organet i ett vertikalt plan mot dess längsgående axel bestämmer hanteringsgraden för ett objekt, och där en rotation kring dess axel bestämmer ett godkännande av hanteringen.
Vid en arman utföringsforrn av uppfinningen utgörs ett positionsdetekteringsorgan K:\Patent\l lO0-\l 100586OOSE\Pl l0058600SEÖVERS.doc 10 15 20 25 30 525 656 3 för en tredimensionell bestämning av positionen i rummet för spetsen hos nämnda pekanordning av ett ultralj udrnottagar-/sändarorgan.
Vid ytterligare en utföringsforrn utgörs positionsdetekteringsorganen av ett miniatyriserat karneraorgan.
Vid ytterligare en utföringsform ger en tredimensionell bild ger ett ytskikt med menyer, varvid hanteringsorganet används för bläddring på ytskiktens yta, vilket därigenom förhindrar glidning till ett angränsande ytskikt.
Ytterligare en annan utföringsform av föreliggande uppfinning innefattar den att den utgörs av en cellulär telefon.
Vid ytterligare en annan utföringsfonn utgörs organet av en handdator eller liknande.
Vid ytterligare en annan utföringsfonn är skärmen av en autostereoskopisk typ.
Föreliggande uppfinning avser även ett förfarande för ett portabelt datoriserat handhållet organ med en skärm som visar bilder av objekt som skall hanteras, varvid en hantering av objekt gör att en länk ansluts till ett subobjekt eller en funktion som skall utföras, innefattande följande steg : anordnande av ett första hanteringsorgan för nämnda objekt, vilket styr hanteringen av nämnda objekt genom en rörelse hos en hand som håller nänmda hanteringsorgan; anordnande av ett andra hanteringsorgan för nämnda objekt, vilket styr hanteringen av nämnda objekt genom en pekanordning när den placeras på en annan yta än en hand; och anordnande av ett organ för taktil återkoppling till nämnda hand för vaije lyckad möjlig hantering av nämnda objekt, vilket därigenom ger en tryckknappfn' hantering av objekt och en känsla för hanteringen vilket på så sätt ökar hanteringshastigheten genom involvering av minst de båda sinnena, syn och hörseln, och som ger minst två funktioner för hantering av objekt på en skärm i överensstämmelse med nämnda första och andra organ.
Förfarandet enligt föreliggande uppfinning kan tillgodogöra sig utföringsformer som hänför sig till utföringsformer av det portabla handhålhia organet, särskilt i överensstämmelse med den bifogade uppsättningen av underkrav avseende förfarandet.
Kortfattad beskrivning av figurerna Fortsättningsvis hänvisas till de bifogade figurema och den åtföljande texten för en bättre förståelse av föreliggande uppfinning med dess utföringsfonner och exempel, varvid: Fig. I schematiskt illustrerar användningen av en pekanordning för hantering av ett objekt som visas på bildskärmen hos ett portabelt handhållet organ enligt föreliggande uppfinning; och Fig. 2 schematiskt illustrerar ett handhållet organ för en vickning, i de riktningar som K:\Patent\l l00-\l l0058600SE\Pl l0058600SEÖVERS.doc 10 15 20 25 30 523 636 | u c v po a 4 indikeras med pilar, av organet för hantering av en gränssnittskomponent i överensstämmelse med föreliggande uppfinning.
Detaljerad beskrivning av föredragna utföringsformer Det finns ett behov att lösa problem som sammanhänger med visning av data på relativt små elektroniska anordningar som handutrustriingar som t ex cellulära telefoner, handdatorer (PDA), eller vilken handanordning som helst försedd med en bildskärm. Således föreslås genom föreliggande uppfinning ett portabelt handhållet organ som inför ett tvådimensionellt (2D) och/eller tredimensionellt (3D) utrymme på eller ovanför en bildskärm för hantering, bläddring eller rullning genom en datormjukvara som uppvisar grafik på bildskärmen för val/hantering av objekt, funktioner eller andra egenskaper. Grafiska fiarnställningar som de som visas på en bildskärm kallas vanligen för "widgets" eller gränssnittskomponenter inom datatekniken.
En fördelaktig egenskap som införs genom föreliggande uppfinning avser ett portabelt handhållet organ enligt vad som nämnts med funktioner för användning av en pekanordning för att hantera en gränssnittskomponent, meny etc när den placeras på och vilar på en yta såsom ett bord eller en annan vilozon annan än handflatan hos en person och när den hålls på handflatan hos en person sker hanteringen genom vickning av det handhållna organet.
Ett annat syfie med föreliggande uppfinning är att föreslå en taktil återkoppling till användaren av en sådan handanordning när denne hanterar eller väljer objekt som visas på bildskärmen med hjälp av en pekanordning som t ex spetsen hos en pennliknande pekare, eller någon annan lämplig pekanordning för kommunikation mellan denna och den portabla handanordningen.
Ett tredimensionellt rum i överensstämmelse med föreliggande uppfinning kan vid en utföringsforrn skapas med användning av autostereoskopiska tekniker. En stereobildskärm ger olika bilder av samma objekt till en persons vänstra och högra öga, varigenom den som betraktar figuren upplever den som en tredimensionell bild. Stereobildskärmen erhålls i allmänhet med hjälp av t ex rödgröna glas eller ett slags polariserat glas eller glas med en slutare.
I fig. 1 visas schematiskt en handdator (PDA) 10 eller en liknande anordning med funktions- eller inmatningsknappar 12 och en bildskärm 16. Dessa lmappar 12 kan vara en valfri typ som finns tillgänglig på marknaden som t ex en touchknappsats eller liknande. I fig. l illustreras fimktionen med användning av en pekanordning 20 när det portabla handhållna organet 10 är placerat på en plan yta i överensstämmelse med föreliggande uppfinning. Detta ger en större fördel vid användning av en handanordning 10. En handanordning 10 kan K:\Patent\l l00-\l l0058600SE\Pl l0058600SEÖVERS.d0c 10 15 20 25 30 525 656 - . - - .a q - . . » - ø . . » . . u 1 5 användas vare sig den placeras på en yta annan än handflatan hos en person eller på t ex ett bord, eller vice versa. I nedanstående fig. 2 beskrivs funktionen med hantering av en gränssnittskomponent 19 som hålls på en persons handflata, vilket är en andra fördel med föreliggande uppfinning.
Sålunda beskrivs funktioner gränssnittskomponent skall hanteras eller hur en bläddring i en meny skall utföras genom två situationer eller avseende hur en föreliggande uppfinning. Den ena illustreras i fig. 1 där organet 10 är placerat på t ex ett bord och den andra situationen när det är placerat på handflatan hos en person, eventuellt under gång, stillastående, sittande etc, se fig. 2. Det är inte uteslutet att andra hanteringsorgan såsom en touchknappsats eller liknande likaledes kan användas.
I fig. 1 återges mikrofoner vid 14 utgörande mottagare för överfört ultraljud, vilka uppfångar ultraljud som sänds ut från en ultraljudsändare (ej visad i figurema) enligt vad som beskrivs inom tidigare kända tekniker och som vidare beskrivs här nedan. Mikrofonerna uppfängar ljudvågor som reflekteras från en spets hos en pekanordning 20 för att precisera spetsens position i det tredimensionella rummet. Andra kända anordningar för positionering i ett tredimensionellt rum kan åstadkommas genom optiska organ som sänder och samlar upp reflekterat ljus och kan t o m utgöras av en typ av kamera som använder CCD.
Användningen av en pekanordning 20 för hantering av en gränssnittskomponent 19 som här utgörs av en cylinder, visas på bildskärmen 16 hos ett portabelt handhållet organ 10 enligt en utföringsform av föreliggande uppfinning och återges med pilar i fig. 1. Pilarna som visas i fig. 1 illustrerar rörelsen hos en datorpekanordning 19 i ett tredimensionellt rum som skapats ovanför bildskärmen. Denna rörelse överförs således till gränssnittkomponenten 19 ("widget") som hanteras i överensstämmelse med rörelsen hos pekanordningen 20 i enlighet med mjukvaruprinciper eller -tekniker som är väl kända inom området.
Vid en utföringsform av uppfinningen återges pekanordningens spets som en virtuell proj ektion på bildskärmen 16, t ex som en markör.
Ett sätt att åstadkomma en tredimensionell omgivning på en bildskärm 16 är genom autostereoskopiska bildskärmar. Det autostereoskopiska rummet 18 i fig. 1 återges med punktstreckade linjer. Autostereoskopiska bildskärmar ger olika bilder av ett och samma objekt/gränssnittskomponent för vänster och höger öga hos en person, utan användning av några glasögon. Den autostereoskopiska Cambridge-bildskärmen gör det möjligt för en observatör att se en verklig tredimensionell bild. Vart och ett av betraktarens ögon ser en olika bild av den visade scenen, precis som i det verkliga livet, och betraktaren kan förflytta sitt huvud för att "se sig omkring" eller för att gripa konturerna och detaljema hos objekten i en K:\Patent\l l00-\l l0058600SE\Pl l0058600SEÖVERS.doc 10 15 20 25 30 525 636 v o v u nu s n a . 1 - - » ; - w ø a- 6 scen. Detta resulterar i en autostereoskopisk vision, varvid denna är fullständigt naturlig eftersom det inte finns något behov av några speciella glasögon eller andra huvud-set.
En autostereoskopisk visning med flera vyer kräver multipla olika bilder av ett objekt som visas och som tas från olika observationspositioner. Dessa multipla bilder lyses blixtsnabbt upp av t ex katodstrålrör (CRT), den ena efter den andra. I det ögonblick då en av bildema visas öppnas en slutare i en uppsättning av flytande kristallslutare och gör bilden synlig för en del av zonen framför visningen. Det är slutama som avgör när observatören kan se var och en av bildema. Denna process upprepas mycket snabbt, sextio gånger per sekund.
Var och en av observatörens ögon ser på så sätt en serie av mycket korta och mycket ljusa avbilder av en av bildema. Ögat integrerar dessa korta burster av bilder för att ge effekten av en kontinuerligt visad bild. Efiersom varje öga ser en annorlunda bild tar en observatör emot en av de tre viktiga tredimensionella djupsignalerna : stereoparalaxen. Vidare efiersom observatören ser olika bilder när han rör på sitt huvud erhålls en annan viktig tredimensionell djupsignal : rörelseparalaxen. Dessa båda djupsignaler kombineras för att erhålla en effektiv illusion av det verkliga djupet vid tredimensionell bildfiamställning.
Vid en annan utföringsfonn avses ett relativt nytt autostereoskopiskt visningssystem som baserar sig på en direktvy på en skärm av flytande kristaller (LCD) och holografiska optiska element (HOE). Skärmen använder sig av en komposit HOE för att styra pixlens synlighet på en klassisk LCD. Vid en av de beskrivna anordningama används intersekvenserade rumsmultiplexerade stereobilder med horisontala linjer som visas på LCD för att åstadkomma en autostereoskopisk visning som är lätt att betrakta. (Dvs glasögonfri verklig tredimensionell visning). Den är förenlig med existerande glasögonbaserade stereosystem där den s k fältsekventiella metoden används, vilken kombineras med slutarsystem. (T ex LCD med slutarförsedda glasögon).
Vid föreliggande uppfinning förutses även kända organ för bestämning av positionen hos en datorpekanordning i ett tredimensionellt utrymme. Ett sådant organ ger en ultraljudpositionering. Pekanordningen är utrustad med en mikrofon som samlar upp ljudburster som överförs från ett flertal ultraljudsändare som i olika positioner är fästade på en portabel datoranordning enligt föreliggande uppfinning. En ultraljudpositionering sker genom triangulation av ljudburstavståndet enligt etablerade tekniker, löptid, från minst tre högtalare.
Vidare skulle positionsdetekteringsorganet kunna utgöras av miniatyriserade kameraorgan, enligt vad som beskrivs inom tidigare känd teknik.
En fördel med föreliggande uppfinning och som inte är känd inom området är kännetecknet taktil återkoppling när ett objekt hanteras på en bildskärm som visar K:\Patent\l 100-\l l0058600SE\Pl l0058600SEÖVERS.doc 10 15 20 25 30 523 636 n. nu: »a | u n « . | . I n o nu 7 tredimensionella objekt såsom gränssnittskomponenter, menyer etc på en portabel datoriserad handbildskärm. En taktil återkoppling kan anordnas genom t ex ett piezoelektriskt manöverorgan eller liknande manöverorgan som skapar vibrationer eller stötar, pulser etc. En "widget" (gränssnittskomponent) är en ofia använd tenn bland personer som är specialister på att åstadkomma åtminstone datorbilder och hänför sig till varje slag av objekt som kan hanteras med datorpek- eller väljaranordningar såsom en knapp, ikoner och andra konstruerade former.
Föreliggande uppfinning förutser en taktil återkoppling genom antingen en vibration eller en puls som avges från själva det handhållna organet vid en utföringsform och/eller från en pekanordning 20 såsom en penna med ett skrivstift som används t ex tillsammans med PDA eller en cellulär/mobil telefon, se fig. 1.
Vid en utföringsform av föreliggande uppfinning görs även den taktila återkopplingen synbar för en persons öga genom att låta skärmen 16 vara fäst vid ett elastiskt eller fjädrande rörelseorgan, varvid skärmen 16 skjuter ut eller vibrerar när den taktila återkopplingen aktiveras. Sådana íjäderförflyttade skärmar är kända på detta område.
I fig. 2 illustreras schematiskt samma handhållna organ 10 som i fig. 1 med dess sex dimensioner av möjlig vickning i enlighet med de fyllda pilama som återges i fig. 2. De fyllda pilarna indikerar grader i steg av en möjlig vickning av organet 10 i överensstämmelse med föreliggande uppfinning. Varje grad av ett steg vid vickning följs av en taktil återkoppling vid en uttöringsforin av föreliggande uppfinning. Här är det själva det portabla handhållna organet 10 som tjänar som pekarorgan, dvs vickningen eller íörflyttningen av det handhållna organet 16 bestämmer var, t ex en markör, är placerad i ett tvådimensionellt eller tredimensionellt rum.
De ej fyllda vita pilarna på skärmen 16 i fig. 2 indikerar en möjlig hantering av gränssnittskomponenten 19.
Som ett exempel skulle en ändring från användning av en pekanordning 20 till vicknjngen som beskrivs kunna anordnas genom tryckknappar 12. Val vid vickning skulle kurma ske genom en arman tryckknapp 12 eller på något annat sätt som är känt på detta område.
Vid en utföringsform av föreliggande uppfinning gör en låg eller långsam vickning av organet 10 att hastigheten vid bläddring eller hantering är låg och sker i jämn takt. Detta hjälper användare av PDA 10 att göra sitt val i slutet av en rulliiingssession.
Ett exempel på vickningsfunktionen är neddragning av menyer, varvid menyn till vänster på så sätt markeras, och fälten i den markerade menyn indikeras genom horisontal K:\Patent\l 100-\l l0058600SE\Pl 10058600SEÖVERS.doc 10 15 20 25 30 523 656 8 vickning av det handhållna organet 10, enligt vad som indikeras med de båda horisontala pilama i fig. 2. För att aktivera eller markera en ny meny vickas organet 10 i vertikal riktning som indikeras genom två pilar på organets kortsidor i fig. 2.
Ett annat tillämpningsexempel hänför sig till en telefonbok där vickningsfurrlctionen kan användas för bläddring genom en lista med telefonnummer, varvid listan är uppbyggd som ett virtuellt hjul och rotationen hos "hjulet" är på så sätt direkt länkad till vickningen av det handhållna organet 10.
Det portabla datoriserade handhållna organet i överensstämmelse med föreliggande uppfinning kan vara försett med en skärm 16 som ger en stereoskopisk tredimensionell bild av objekten som skall hanteras, enligt vad som beskrivs här ovan. Genom en hantering av objekt ansluts en länk till ett underobjekt eller funktion som skall utföras. Som ett exempel på en funktion skulle det kunna röra sig om att vrida på något slag av tredimensionella objekt och varje känd hantering i datorstyrd konstruktion (CAD). Ett subobjekt kan utgöras av ett nytt objekt som är länkat till ett primärt objekt, t ex genom att trycka på en gränssnittskomponent 19 såsom en knapp som ansluter till ett nytt objekt som skulle kunna utgöras av en meny för bläddring och väljarfiniktioner. Detta gäller även för en tvådimensionell projektion på skärmen 16.
Sålunda är det portabla handhållna organet enligt föreliggande uppfinning försett med ett hanteringsorgan för tvådimensionella eller tredimensionella objekt, varvid det styr hanteringen av dessa objekt genom rörelsen hos den hand som håller hanteringsorganet.
Hanteringsorganet utgörs vid en utföringsforrn av huset för det handhållna organet som t ex en PDA, mobiltelefon etc. Vid denna utföringsform är det handhållna organet utrustat med ett organ för bestämning av gyroinformation till t ex en mjukvara som har utformats för att styra ett organ som ger en taktil återkoppling, t ex som det som tidigare nämnts. Vid en utföringsform kan en taktil återkoppling utföras varje gång som en förutbestämd grad av gyroinfonnation ges, vilka kallas för ”step-above”, under hanteringen av ett objekt. En taktil återkoppling kan även ges när rörelsen hos handanordningen får visningen av ett objekt att ändras från ett objekt till ett armat, t ex vid ändring mellan menyer.
Det portabla handhållna organet 10 är försett med ett hanteringsorgan enligt föreliggande uppfinning som utgörs av ett datorpekorgan som t ex en pennliknande pekar/hanteringsanordning som används när det handhållna organet 10 placeras på en annan yta än en människas handflata.
Ett handhållet organ 10 enligt föreliggande uppfinning kan således ge en tryckknappsfri hantering av objekt och en känsla för hanteringen. Ju fler mänskliga sinnen K:\Patent\l 100-\l l0058600SE\Pl 10058600SEÖVERS.doc 10 15 20 25 30 523 636 « u n ø nu 9 som är involverade i ett beslut, desto snabbare kan beslutet utföras. I de flesta fall skulle detta vara sant åtminstone när beslutet går ut på att hantera gränssnittskomponenter 19. På så sätt ökar föreliggande uppfinning hanteringshastigheten genom att involvera minst två sinnen såsom synen och känslan.
En taktil återkoppling skulle även kunna förbättras genom frarnställningen av ett ljud såsom ett klicklj ud när återkopplingen sker, vilket på så sätt inför det tredje mänskliga sinnet som är hörseln.
När den portabla handanordningen är försedd med en gyro (piezoelektrisk, kvicksilveromkopplare eller liknande) utgör vid en utföringsfonn graden av vickning av anordningen en insignal till hanteringsorganet som styr objektens hanteringsgrad. För att upprätta en nollbas för gyron åstadkoms hanteringen genom en överenskommen handling som utförs av dess bärare, oavsett i vilken riktning eller vinkel den hålls när handlingen utförs. En sådan handling skulle kunna utföras genom tryckning på t ex en gränssnittskomponent som utgör en tryck- eller touchknapp. En vickning av densamma i ett vertikalt plan mot dess längsgående axel bestämmer objektets hanteringsgrad och en rotation av densamma kring dess axel bestämmer ett godkännande av hanteringen av en utföringsform. Andra liknande vickningshandlingar skulle kunna utföras inom ramen för föreliggande uppfinning.
En fördelaktig utföringsform av föreliggande uppfinning förutser att den tredimensionella bilden utgörs av menyer på ett skal (”skin”) sätt. Skal ger inom datografisk visning en stapel av t ex menyer, varvid ett tredimensionellt rum på en skärm kan ge en nästad oändlig stapel av menyer som endast begränsas av upplösningen i en tredimensionell återgivning. Hanteringsorganet är låst till ett skal, vid en utföringsfonn, när en taktil återkoppling eller/och någon annan godkännande handling har anordnats, varvid hanteringsorganet används för bläddring på ytlagrens yta och förhindrar därigenom glidning till ett angränsande skal.
Föreliggande uppfinning har beskrivits genom utföringsfonner och exempel vilka inte bör betraktas som en begränsning av uppfinningens omfång. De bifogade patentlcraven deñnierar uppfinningens omfattning för fackmannen.
K:\Patent\l 100-\l l0058600SE\Pl 10058600SEÖVERS.doc

Claims (20)

10 15 20 25 30 5 2 5 6 3 6 10 Patentkrav
1. Portabelt datoriserat handhållet organ (10) med en skärm (16) som visar bilder av objekt (19) som skall hanteras, varvid en hantering av objekt gör att en länk ansluts till ett subobjekt eller en funktion som skall utföras, innefattande : ett första hanteringsorgan för nämnda objekt, vilket styr hanteringen av nämnda objekt genom rörelsen hos en hand som håller nämnda hanteringsorgan; ett andra hanteringsorgan för nämnda objekt, vilket styr hanteringen av nämnda objekt genom en pekanordning (20) när det är placerat på en annan yta än en hand, varvid objektet hanteras i överensstämmelse med rörelsen hos pekanordningen (20); ett gyro, varvid graden av vickningen av detta utgör en insignal till nämnda första och andra hanteringsorgan som styr objektens (19) hanteringsgrad; och ett organ för anordnande av en taktil återkoppling till nämnda hand för varje lyckad möjlig hantering av nämnda objekt, vilket därigenom ger en tryckknappfri hantering av objekten och en känsla för hanteringen, vilket på så sätt ökar hanteringshastigheten genom att involvera minst de båda sinnena syn och känsla, och genom att anordna minst två funktioner för hantering av objekt (19) på en skärm i överensstämmelse med nämnda första och andra organ.
2. Handhållet organ enligt patentkrav 1, varvid en nollbas för en hantering är anordnad genom en handling för godkännande som utförs av dess bärare, oavsett i vilken riktning eller under vilken vinkel den hålls när nämnda handling utförs.
3. Handhållet organ enligt patentkrav 2, varvid en vickning av detsamma i ett vertikalt plan mot dess längsgående axel bestämmer hanteringsgraden för ett objekt, och där en rotation kring dess axel bestämmer ett godkännande av hanteringen.
4. Handhållet positionsdetekteringsorgan för en tredimensionell bestämning av positionen i rummet för organ enligt något av patentkraven 1 - 3, varvid ett spetsen hos nämnda pekanordning (20) utgörs av ett ultraljudmottagar-/sändarorgan (14).
5. Handhållet 1 - 3, positionsdetekteringsorgan för en tredimensionell bestämning av positionen i rummet för organ enligt något av patentkraven varvid ett spetsen hos nämnda pekanordning utgörs av ett miniatyriserat kameraorgan.
6. Handhållet organ enligt något av patentkraven 1 - 3, varvid en tredimensionell bild ger ett ytskikt med menyer.
7. Handhållet organ enligt patentkrav 6, varvid nämnda forsta och andra hanteringsorgan är låsta till ett ytskikt när en taktil återkoppling har utförts, varvid nämnda hanteringsorgan används för bläddring på ytskiktens yta, vilket därigenom förhindrar glidning K:\Patent\l lO0-\l l005\l l0O58600SE\Pl 1005 8600SEÖVERSNYAKRAV.doc 10 15 20 25 30 525 636 ll till ett angränsande ytskikt.
8. Handhållet organ enligt något av patentkraven 1 - 3, varvid organet utgörs av en cellulär telefon.
9. Handhållet organ enligt något av patentkraven 1 - 3 , varvid organet utgörs av en handdator eller liknande.
10. Handhållet organ enligt något av patentkraven 1 - 3, varvid nämnda skärm är av en autostereoskopisk typ.
11. ll. Förfarande for ett portabelt datoriserat handhållet organ (10) med en skärm (16) som visar bilder av objekt (19) som skall hanteras, varvid en hantering av objekt gör att en länk ansluts till ett subobjekt eller en funktion som skall utföras, innefattande följande steg : anordnande av ett forsta hanteringsorgan for nämnda objekt, vilket styr hanteringen av nämnda objekt genom en rörelse hos en hand som håller nämnda hanteringsorgan; anordnande av ett andra hanteringsorgan för nänmda objekt, vilket styr hanteringen av nämnda objekt genom en pekanordning (20) när den placeras på en annan yta än en hand, varvid objektet hanteras i överensstämmelse med rörelsen hos pekanordningen (20); varvid graden av vickningen av ett gyro utgör en insignal till nämnda forsta och andra hanteringsorgan som styr objektens (19) hanteringsgrad; och anordnande av ett organ for taktil återkoppling till nämnda hand for varje lyckad möjlig hantering av nänmda objekt, vilket därigenom ger en tryckknappfri hantering av objekt och en känsla for hanteringen vilket på så sätt ökar hanteringshastigheten genom involvering av minst de båda sinnena, syn och känsla, och som ger minst två funktioner for hantering av objekt på en skärm i överensstämmelse med nämnda första och andra organ.
12. Förfarande enligt patentkrav 11, varvid en nollbas för en hantering är anordnad genom en handling for godkännande som utförs av dess bärare, oavsett i vilken riktning eller under vilken vinkel den hålls när nämnda handling utförs.
13. Förfarande enligt patentkrav 12, varvid en vickning av det handhållna organet i ett vertikalt plan mot dess längsgående axel bestämmer hanteringsgraden for ett objekt, och där en rotation kring dess axel bestämmer ett godkännande av hanteringen.
14. Förfarande 11 - 13, positionsdetekteringsorgan for en tredimensionell bestämning av positionen i rummet for enligt något av patentkraven varvid ett spetsen hos nämnda pekanordning (20) utgörs av ett ultraljudmottagar-/sändarorgan (14).
15. Förfarande 1 1 - 13, positionsdetekteringsorgan for en tredimensionell bestämning av positionen i rummet for enligt något av patentkraven varvid ett spetsen hos nämnda pekanordning (20) utgörs av ett miniatyriserat karneraorgan. K:\Patent\1 l00-\l lO05\l l005860OSE\Pl 1005 SGOOSEÖVERSNYAKRAVAOC 10 525 636 12
16. Förfarande enligt något av patentkraven 11 - 13, varvid en tredimensionell bild ger ett ytskikt med menyer.
17. Förfarande enligt patentkrav 16, varvid nämnda första och andra hanteringsorgan är låsta till ett ytskikt när en taktil återkoppling har utförts, varvid nänmda hanteringsorgan används för bläddring på ytskiktens yta, vilket därigenom förhindrar glidning till ett angränsande ytskikt.
18. Förfarande enligt något av patentkraven 11 - 13, varvid det handhållna organet utgörs av en cellulär telefon.
19. Förfarande enligt något av patentkraven 11 - 13, varvid det handhållna organet utgörs av en handdator eller liknande.
20. Förfarande enligt något av patentkraven 11 - 13, varvid nämnda skärm är av en autostereoskopisk typ. K:\Patent\1 100-\11005\l10058600SE\P1IOOSSGOOSEÖVERSNYAKRAVÅOC
SE0102583A 2001-07-22 2001-07-22 Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt SE523636C2 (sv)

Priority Applications (6)

Application Number Priority Date Filing Date Title
SE0102583A SE523636C2 (sv) 2001-07-22 2001-07-22 Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt
JP2003515961A JP4058406B2 (ja) 2001-07-22 2002-07-03 手で持つコンピュータ化携帯型装置
PCT/SE2002/001329 WO2003010653A1 (en) 2001-07-22 2002-07-03 A computerized portable handheld means
CNB028161645A CN1278211C (zh) 2001-07-22 2002-07-03 计算机化便携式手持装置及其方法
EP02746275A EP1417562A1 (en) 2001-07-22 2002-07-03 A computerized portable handheld means
US10/484,318 US20050083314A1 (en) 2001-07-22 2002-07-03 Computerized portable handheld means

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
SE0102583A SE523636C2 (sv) 2001-07-22 2001-07-22 Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt

Publications (3)

Publication Number Publication Date
SE0102583D0 SE0102583D0 (sv) 2001-07-22
SE0102583L SE0102583L (sv) 2003-01-23
SE523636C2 true SE523636C2 (sv) 2004-05-04

Family

ID=20284913

Family Applications (1)

Application Number Title Priority Date Filing Date
SE0102583A SE523636C2 (sv) 2001-07-22 2001-07-22 Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt

Country Status (6)

Country Link
US (1) US20050083314A1 (sv)
EP (1) EP1417562A1 (sv)
JP (1) JP4058406B2 (sv)
CN (1) CN1278211C (sv)
SE (1) SE523636C2 (sv)
WO (1) WO2003010653A1 (sv)

Families Citing this family (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003252388A1 (en) * 2002-08-27 2004-03-19 Sharp Kabushiki Kaisha Content reproduction device capable of reproducing a content in optimal reproduction mode
US8984440B2 (en) 2010-10-01 2015-03-17 Z124 Managing expose views in dual display communication devices
US9182937B2 (en) 2010-10-01 2015-11-10 Z124 Desktop reveal by moving a logical display stack with gestures
KR100415161B1 (ko) * 2003-07-01 2004-01-13 (주)두모션 기울기 센서를 이용한 3차원 이미지 조망 기능을 갖는핸드헬드 장치 및 이를 이용한 3차원 이미지 디스플레이시스템
US7600201B2 (en) * 2004-04-07 2009-10-06 Sony Corporation Methods and apparatuses for viewing choices and making selections
US7787009B2 (en) * 2004-05-10 2010-08-31 University Of Southern California Three dimensional interaction with autostereoscopic displays
KR100641182B1 (ko) * 2004-12-30 2006-11-02 엘지전자 주식회사 휴대단말기에서의 가상화면 이동장치 및 방법
JP2006295272A (ja) * 2005-04-06 2006-10-26 Sony Corp 撮像装置
US8279168B2 (en) * 2005-12-09 2012-10-02 Edge 3 Technologies Llc Three-dimensional virtual-touch human-machine interface system and method therefor
US20080012822A1 (en) * 2006-07-11 2008-01-17 Ketul Sakhpara Motion Browser
KR20090116687A (ko) * 2006-10-05 2009-11-11 페가수스 테크놀로지 엘티디 디지털 펜 시스템, 송신기 장치, 수신 장치, 그 제조 및 사용 방법
KR101145921B1 (ko) * 2006-12-13 2012-05-15 엘지전자 주식회사 이동 단말기, 이동통신 단말기 및 이를 이용한 사용자인터페이스 제공 방법
US20090309854A1 (en) * 2008-06-13 2009-12-17 Polyvision Corporation Input devices with multiple operating modes
KR20100041006A (ko) 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
KR20100050103A (ko) 2008-11-05 2010-05-13 엘지전자 주식회사 맵 상에서의 3차원 개체 제어방법과 이를 이용한 이동 단말기
CN101872277A (zh) 2009-04-22 2010-10-27 介面光电股份有限公司 一种立体成像的触控装置
US9417700B2 (en) 2009-05-21 2016-08-16 Edge3 Technologies Gesture recognition systems and related methods
US20100309228A1 (en) * 2009-06-04 2010-12-09 Camilo Mattos Displaying Multi-Dimensional Data Using a Rotatable Object
US8271898B1 (en) 2009-06-04 2012-09-18 Mellmo Inc. Predictive scrolling
US9542010B2 (en) * 2009-09-15 2017-01-10 Palo Alto Research Center Incorporated System for interacting with objects in a virtual environment
KR101627214B1 (ko) * 2009-11-12 2016-06-03 엘지전자 주식회사 영상표시장치 및 그 동작방법
US20110115751A1 (en) * 2009-11-19 2011-05-19 Sony Ericsson Mobile Communications Ab Hand-held input device, system comprising the input device and an electronic device and method for controlling the same
EP2558924B1 (en) * 2010-04-13 2021-06-09 Nokia Technologies Oy Apparatus, method and computer program for user input using a camera
US8396252B2 (en) 2010-05-20 2013-03-12 Edge 3 Technologies Systems and related methods for three dimensional gesture recognition in vehicles
US8582866B2 (en) 2011-02-10 2013-11-12 Edge 3 Technologies, Inc. Method and apparatus for disparity computation in stereo images
US8666144B2 (en) 2010-09-02 2014-03-04 Edge 3 Technologies, Inc. Method and apparatus for determining disparity of texture
WO2012030872A1 (en) 2010-09-02 2012-03-08 Edge3 Technologies Inc. Method and apparatus for confusion learning
US8655093B2 (en) 2010-09-02 2014-02-18 Edge 3 Technologies, Inc. Method and apparatus for performing segmentation of an image
US20120084736A1 (en) 2010-10-01 2012-04-05 Flextronics Id, Llc Gesture controlled screen repositioning for one or more displays
US8564535B2 (en) * 2010-10-05 2013-10-22 Immersion Corporation Physical model based gesture recognition
JP5924802B2 (ja) * 2011-01-26 2016-05-25 日本電気株式会社 入力装置
US9417696B2 (en) * 2011-01-27 2016-08-16 Blackberry Limited Portable electronic device and method therefor
EP2482164B1 (en) * 2011-01-27 2013-05-22 Research In Motion Limited Portable electronic device and method therefor
US8970589B2 (en) 2011-02-10 2015-03-03 Edge 3 Technologies, Inc. Near-touch interaction with a stereo camera grid structured tessellations
EP2515201A1 (en) * 2011-04-18 2012-10-24 Research In Motion Limited Portable electronic device and method of controlling the same
JP5840427B2 (ja) * 2011-09-09 2016-01-06 アルプス電気株式会社 振動発生装置
KR101830966B1 (ko) 2011-09-21 2018-02-22 엘지전자 주식회사 전자 기기 및 전자 기기의 컨텐츠 생성 방법
US9672609B1 (en) 2011-11-11 2017-06-06 Edge 3 Technologies, Inc. Method and apparatus for improved depth-map estimation
EP2687950A1 (en) * 2012-07-20 2014-01-22 BlackBerry Limited Orientation sensing stylus
USD752585S1 (en) 2013-01-29 2016-03-29 Aquifi, Inc. Display device with cameras
USD753658S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc. Display device with cameras
USD753655S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc Display device with cameras
USD753657S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc. Display device with cameras
USD753656S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc. Display device with cameras
USD752048S1 (en) 2013-01-29 2016-03-22 Aquifi, Inc. Display device with cameras
US10721448B2 (en) 2013-03-15 2020-07-21 Edge 3 Technologies, Inc. Method and apparatus for adaptive exposure bracketing, segmentation and scene organization
WO2014165976A1 (en) * 2013-04-10 2014-10-16 Berryman Jeremy Multitasking and screen sharing on portable computing devices
US9817489B2 (en) * 2014-01-27 2017-11-14 Apple Inc. Texture capture stylus and method
US9635069B2 (en) * 2014-08-06 2017-04-25 Verizon Patent And Licensing Inc. User feedback systems and methods
KR101601951B1 (ko) * 2014-09-29 2016-03-09 주식회사 토비스 공간 터치 입력이 수행되는 곡면디스플레이 장치
US9400570B2 (en) 2014-11-14 2016-07-26 Apple Inc. Stylus with inertial sensor
US9575573B2 (en) 2014-12-18 2017-02-21 Apple Inc. Stylus with touch sensor
CN108268056B (zh) * 2016-12-30 2020-12-15 昊翔电能运动科技(昆山)有限公司 手持云台校准方法、装置和系统
WO2018136057A1 (en) * 2017-01-19 2018-07-26 Hewlett-Packard Development Company, L.P. Input pen gesture-based display control
CN118981271A (zh) 2019-06-01 2024-11-19 苹果公司 用于在2d屏幕上操纵3d对象的设备、方法和图形用户界面
CN115188621A (zh) * 2021-04-07 2022-10-14 群创光电股份有限公司 显示装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL7803764A (nl) * 1978-04-10 1979-10-12 Philips Nv Akoestische schrijfcombinatie, bevattende een schrijf- instrument met een bijbehorend schrijftablet.
IL92220A (en) * 1989-11-06 1993-02-21 Ibm Israel Three-dimensional computer input device
US5296871A (en) * 1992-07-27 1994-03-22 Paley W Bradford Three-dimensional mouse with tactile feedback
US5657054A (en) * 1995-04-26 1997-08-12 Texas Instruments Incorporated Determination of pen location on display apparatus using piezoelectric point elements
US5818424A (en) * 1995-10-19 1998-10-06 International Business Machines Corporation Rod shaped device and data acquisition apparatus for determining the position and orientation of an object in space
US6115028A (en) * 1996-08-22 2000-09-05 Silicon Graphics, Inc. Three dimensional input system using tilt
US6009210A (en) * 1997-03-05 1999-12-28 Digital Equipment Corporation Hands-free interface to a virtual reality environment using head tracking
US6720949B1 (en) * 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US6268857B1 (en) * 1997-08-29 2001-07-31 Xerox Corporation Computer user interface using a physical manipulatory grammar
US6297838B1 (en) * 1997-08-29 2001-10-02 Xerox Corporation Spinning as a morpheme for a physical manipulatory grammar
US5916181A (en) * 1997-10-24 1999-06-29 Creative Sports Designs, Inc. Head gear for detecting head motion and providing an indication of head movement
US6414673B1 (en) * 1998-11-10 2002-07-02 Tidenet, Inc. Transmitter pen location system
US6288704B1 (en) * 1999-06-08 2001-09-11 Vega, Vista, Inc. Motion detection and tracking system to control navigation and display of object viewers
US6466198B1 (en) * 1999-11-05 2002-10-15 Innoventions, Inc. View navigation and magnification of a hand-held device with a display
US6834249B2 (en) * 2001-03-29 2004-12-21 Arraycomm, Inc. Method and apparatus for controlling a computing system
US6727891B2 (en) * 2001-07-03 2004-04-27 Netmor, Ltd. Input device for personal digital assistants
US6961912B2 (en) * 2001-07-18 2005-11-01 Xerox Corporation Feedback mechanism for use with visual selection methods
US20040095317A1 (en) * 2002-11-20 2004-05-20 Jingxi Zhang Method and apparatus of universal remote pointing control for home entertainment system and computer

Also Published As

Publication number Publication date
EP1417562A1 (en) 2004-05-12
CN1543599A (zh) 2004-11-03
SE0102583L (sv) 2003-01-23
JP2004537118A (ja) 2004-12-09
US20050083314A1 (en) 2005-04-21
SE0102583D0 (sv) 2001-07-22
CN1278211C (zh) 2006-10-04
WO2003010653A1 (en) 2003-02-06
JP4058406B2 (ja) 2008-03-12

Similar Documents

Publication Publication Date Title
SE523636C2 (sv) Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt
US10922870B2 (en) 3D digital painting
US10620699B2 (en) Head mounted display, mobile information terminal, image processing apparatus, display control program, display control method, and display system
US11120775B2 (en) Compositing an image for display
CN105556457B (zh) 可穿戴电子装置、用于处理信息的方法和计算机可读介质
JP7635304B2 (ja) 視点回転の方法、装置、端末およびコンピュータプログラム
KR20220120649A (ko) 인공 현실 콘텐츠의 가변 초점 디스플레이를 갖는 인공 현실 시스템
CN120103614A (zh) 头戴式显示器组件和用于调节瞳孔间距离的相关方法
JP2021524629A (ja) ウェアラブルシステムのためのトランスモード入力融合
US9734622B2 (en) 3D digital painting
CN107896508A (zh) 可以作为多个目标/端点(设备)和的整合点的以人为中心的“设备的超ui”体系结构的方法和设备,以及面向“模块化”通用控制器平台以及输入设备虚拟化的具有动态上下文意识的手势输入的相关方法/系统
JP6757404B2 (ja) シースルー・グラス用の補助アイテム選択
CN106687888A (zh) 控制设备、控制方法和程序
JP6779715B2 (ja) 情報処理システム
JP6457446B2 (ja) 仮想空間におけるコミュニケーションを支援するための方法および装置ならびに当該方法をコンピュータに実行させるためのプログラム
US20240187562A1 (en) Wearable terminal device, program, and display method
JP2018142251A (ja) 仮想現実を提供するための方法、および当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置
JP2018160249A (ja) ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイ、表示制御プログラム、及び表示制御方法
KR101311479B1 (ko) 제어 객체의 움직임에 따른 피드백 제공을 위한 방법 및장치
KR20230121953A (ko) 입체영상 기반 가상현실장치
KR20250095638A (ko) 입력 디바이스, 제어 장치, 제어 방법, 정보 처리 장치 및 정보 처리 방법
KR20250095637A (ko) 정보 처리 장치 및 정보 처리 방법
WO2024205852A1 (en) Sound randomization
Strohmeier et al. To improve haptic experiences in VR and AR, we must first improve tracking.
KR101345343B1 (ko) 제어 객체의 움직임에 따른 피드백 제공을 위한 방법 및장치