SE525935C2 - Metod för styrning av en bilskärm - Google Patents

Description

l0 15 20 25 30 35 525 935 2 ett dokument som visas pà bildskärmen til höger/ vänster eller uppàt/ nedàt. Avsaknaden av datormus försvarar också hanteringen av peksymboler pà bildskärmen.

I GB 2357684 föreslås användning av gyro för att detektera rumslig- och/ eller vinkelrörelse och överföra denna rörelse till en förändring av den visade bilden. En sådan lösning är tekniskt komplicerad att konstruera och producera med hög tillverkningskostnad och högt pris som följd.

Andra föreslagna metoder att detektera terminalens rörelse är att förse den mobila terminalen med anordningar som ultraljudsensor och lutningsgivare. Även här blir konstruktionen betydligt mer tekniskt komplicerad jämfört med kända mobila terminaler.

Sammanfattning av uppfinningen Syftet med uppfinningen är att àstadkomma en i förhàllande till känd teknik förbättrad metod att styra en bildskärm, vilken är koppplad till en databehandlande enhet, vilken metod möjliggör ett förenklat handhavande och en förenklad konstruktion av den databehandlande enheten.

Detta och andra syften, som kommer att framgà av efterföljande beskrivning, uppnàs med hjälp av en metod att styra en bildskärm vilken är kopplad till en databehandlande enhet och som därutöver har de särdrag som anges i den kännetecknande delen av efterföljande patentkrav l med föredragna utföringsformer i de därtill relaterade underkraven. Ovan nämnda syfte löses även genom att tillhandahålla en databehandlande enhet enligt patentkrav l2 med föredragna utföringsformer i de därtill relaterade underkraven.

Den genom uppfinningen àstadkomna metoden är ytterst fördelaktig genom att den för databehandlande enheter som är utrustade eller kopplingsbara med en kamera inte kräver nägra ytterligare komponenter. Det är inte 10 15 20 25 30 525 955 3 nödvändigt att bygga in särskilda, tekniskt komplicerade och kostsamma instrument för lägesdetektering i den databehandlande enheten. Vidare behövs därmed heller inga anordningar med mekaniskt rörliga delar, vilket skulle försämra hållbarhet och öka risken för funktionshaveri.

En särskild fördel är att uppfinningen är generellt tillämpbar pà mànga olika typer av databehandlande enheter med bildskärm, till exempel mobiltelefoner, PDA och persondatorer.

Kort beskrivning av ritningarna Fig. 1 visar en databehandlande enhet med digitalkamera över en yta xy (t.ex. en skrivbordsyta) enligt en första utföringsform och en papperskopia av ett dokument som också finns lagrat i elektronisk form i den databehandlande enheten.

Fig. 2 visar en databehandlande enhet och användarens fingergrepp enligt en andra utföringsform. Figuren illustrerar kalibrering av pekdons-symbolens läge pà bildskärmen relativt en punkt pà användarens tumgrepp.

Fig. 3 visar tumgreppet i en andra utföringsform samt ett användargränssnitt vars objekt och menyknappar kan flyttas/pàverkas genom förflyttning av tumgreppet och pekdonssymbolen.

Fig.4 visar en databehandlande enhet med kamera riktad mot en papperkopia med knappar för inmatning av tecken. l0 15 20 25 30 525 935 4 Beskrivning av föredragna utföringsformer Panorering och Zoomning I en första utföringsform av uppfinningen syftas till att göra det möjligt att pà ett enkelt sätt betrakta valda delar av ett dokument 40 (i elektronisk form) som kan innehàlla t.ex. bild och/eller text (se fig.l) pà en bildskärm 20 som är för liten för att kunna betrakta och läsa hela dokumentet 40 samtidigt.

I den här utföringsformen kopplas rörelse i bildinformationen fràn kameran 30 till en panorering och/eller zoomning av det datorgrafiska bildobjekt (benämns i fortsättningen bildobjekt)som visas pà bildskärmen 20. Bildobjekt kan vara ett dokument eller del av dokument bestående av text och/eller bild. Det kan även vara ett enskilt objekt i ett dokument eller i ett användargränssnitt i en applikation som körs pà den databehandlanden enheten. Kameran 30 sitter i exemplet monterad pà undersidan av den databehandlande enheten 10 riktad vinkelrätt ner mot ytan xy.

Fig. l visar den här första utföringsformen av uppfinningen. En databehandlande enhet 10 med en bildskärm 20 och en inbyggd digitalkamera 30 hàlles över en yta, exempelvis ett skrivbord, med kameran riktad vinkelrätt ner mot ytan. Pà ytan finns ett tänkt koordinatsystem xyz Den databehandlande enheten 10 är laddad med ett dokument. En papperskopia 40 av detta dokument visas i fig.l. Pa bildskärmen 20 visas ett första bildobjekt som 10 15 20 25 30 525 9235 5 motsvarar i detta exempel en del 41 i mitten av dokumentet 40. Kameran registrerar en bild av en del 51 av ytan xy men denna visas inte i bildskärmen 20.

Bilden av ytan xy analyseras med hjälp av mjukvara i den databehandlande enheten 10 med avseende pä hur bildens innehàll förflyttas samt hur storleken pà den del av ytan xy som finns i bildinformationen fràn kameran förändras.

En förflyttning av den databehandlande enheten 10 parallellt med xy-planet t.ex. i rikting som illustreras av pilen 60 medför att bildinformationen som inhämtas av kameran 30 panoreras (eller scrollas) i sama riktning.

En rörelse av den databehandlande enheten 10 i z-led mot ytan xy medför att bildinformationen som inhämtas av kameran 30 utgör en mindre del av ytan xy.

Resultatet fràn denna rumsliga förflyttning är sàledes tre datavärden som definierar den databehandlande enhetens 10 rörelse i koordinatsystemet xyz. 0 Rörelse längs x-axeln 0 Rörelse längs y-axeln 0 Rörelse längs z-axeln Dessa datavärden filtreras för att erhàlla stabila ingàngsvärden för styrning av bildskärmen 20.

Filtreringen bestàr företrädesvis av làgpassfiltrering och/eller hystereseffekt.

Datavärdena blir ingàngsvärden till den del av den databehandlande enhetens 10 mjukvara som styr bildskärmen 20, d.v.s. scroll-mekanism och zoom-mekanism. 10 15 20 25 30 525 935 6 Den ovan beskriva rörelsen av den databehandlande enheten 10 resulterar i att den initialt visade bildobjektet som motsvarar del 41 panoreras ut uppàt till vänster i bildskärmen 20. När bildínformationen fràn kameran innehàller delen 52 av ytan xy kommer istället ett bildobjekt som motsvarar del 42 av dokumentet att visa pà bildskärmen 20.

Användaren intryck blir att dokumentet 40 som skall betraktas ligger pà bordet (ytan xy) och dokumentet 40 betraktas genom ett ”titthál” som utgörs av den databehandlande enhetens bildskärm 20. Samtliga delar av dokumentet 40 (i elektronisk form)kan betraktas pä bildskärmen 20 genom att förflytta den databehandlande enheten 10 parallellt med ytan xy sà att dess kamera 30 detekterar bilder inom ytan 55 pà xy-planet.

Om den databehandlande enheten 10 förflyttas längs z- axeln ner mot ytan xy kommer bildinformationen fràn kameran 30 att utgöra en mindre del av ytan xy.

Bildskärmen 20 styrs da sà att ett bildobjekt som motsvarar en mindre och förstorad del av dokumentet 40 visas pà bildskärmen. Detta innebär alltsa en zoomning av bildobjektet 40 Pekdonsfunktion med tumgrepp Vidare möjliggör uppfinningen en pekdonsfunktion genom att detektera rörelsen av användarens fingrar eller annat objekt som detekteras av kameran.

I en denna andra utföringsform av uppfinningen visad i fig. 3 inhämtar kameran 30 bildinformation pà användarens lO 15 20 25 30 525 955 7 tumgrepp 70 d.v.s. pekfinger och tumme (se fig. 3).

Fingrarnas rörelse relativt kameran 30 styr ett bildobjekt i form av en pekare 80 som visas pà bildskärmen 20. Tum-greppets 70 status kan vara öppet eller slutet. Observera att status kan vara läge eller eller definierad konfiguration pà användarens fingrar eller annnat objekt i bildinformationen som inhämtas av kameran.

I denna utföringsform av uppfinningen visas ett användargränssnitt till en applikation som används, pà den databehandlande enhetens bildskärm 20 (se fig. 3). I det aktuella gränssnittet finns t.ex. objekt som kan flyttas, knappar eller menyval.

Kameran 30 riktas mot användarens tumgrepp 70 (se fig. 2). Bilden pà tumgreppet 70 samt en referens 80 (till exempel ett bildobjekt i form av ett hàrkors) visas pà bildskärmen (se fig 2). Hàrkorset pàverkas inte av tumgreppents rörelse. En punkt pà tumgreppet 90 definieras som referens för tumgreppets läge i bildinformationen fràn kameran relativt dess läge i bildobjektet pà bildskärmen 20. Detta sker genom att placera tumgreppet 70 sa att en punkt, punkten 90 är anordnad vid referenspunkten 80. Därefter làses referensen genom att företrädesvis trycka pà en knapp pà den databehandlande enheten 10 som ger signal till mjukvara i densamma.

Bildinformationen fràn kameran analyseras nu med hjälp av mjukvara i den databehandlande enheten 10 med avseende pà tumgreppets 70 rörelse och status. Status är öppet om det lO 15 20 25 30 525 935 8 detekteras ett avstànd mellan tume och pekfinger. Status är slutet om inget avstånd detekteras.

Resultatet av analysen blir tre datavärden som representerar: 0 Tumgreppets rörelse längs x-axeln 0 Tumgreppets rörelse längs y-axeln 0 Tumgreppets status (öppet eller slutet) Pà lämpligt sätt växlas nu till att pà bildskärmen 20 visa ovan nämnda användargränssnitt (se Fig.3). En pekdons-symbol 100, visas pà bildskärmen 20 som en stiliserad bild pà tumgreppet 70. Denna återspeglar även tumgreppets status. I detta exempel är status slutet.

Ovan nämnda tre datavärden är sedan ingàngsvärden till delar av den databehandlande enhetens 10 mjukvara som styr förflyttning av pekdon och som styr den funktion som motsvarar en tryckning pà en av knapparna hos en konventionell datormus. Användaren kan nu förflytta pekdons-symbolen 100 genom att förflytta sitt tumgrepp 70 relativt kameran 30. Vidare kan användaren gripa objekt i användargränssnittet genom att sluta tumgreppet 70 när pekdons-symbolen 100 befinner sig över objektet pà bildskärmen 20.

Användaren kan panorera ett bildobjekt pà bildskärmen 20 pà följande sätt: - sluta tumgreppet 70 pà en punkt i bildobjektet 10 15 20 25 30 525 935 9 - förflytta tumgreppet 70 samtidigt som tumgreppet hàlls slutet (bildobjektet i bildskärmen 20 panoreras) - öppna tumgreppet 70.

Detekteringa av ljuskontraster I denna utföringsform analyseras bildinformation som inhämtas av kameran (30) med avseende pà kontrastförändringar. Kameran 30 är i detta exempel riktad mot ett objekt som sänder ut ljuspunkter. Denna bildinformation inhämtas av kameran kopplad till/integrerad i den databehandlande enheten.

Ljuspunkterna i bildinformationen analyseras i den databehandlande enheten med avseende pa deras läge i bildinformationen och status. Status är tänd eller släckt. Resultaten av denna analys blir ett datavärde per ljuspunkt som representerar dess status.

(ID).

Varje ljuspunkt ges en identifikation Pà bildskärmen 20 visas ett bildobjekt som visar Ljuspunkternas ID och status.

Exempel pà ovan nämnda objekt är en kontrollpanel i t.ex. en fabrik med lampor som representeras status pä en process i fabriken. Datavärden för respektive lampa pà panelen samlas i den databehandlande enheten och kan processas, presenteras pà t.ex. den databehandlande enhetens bildskärm och även sändas vidare.

Ett annat exempel är en panel med hal genom vilket ljus flödar fràn en ljuskälla placerad bakom panelen sett fràn kameran. Användaren kan täcka för hälen och pà detta sätt förändra status pà ljuspunkter. Analys i den 10 15 20 25 30 525 955 10 databehandlande enheten ger ett datavärde per ljuspunkt (häl i panelen) i bildinformationen som inhämtas av kameran. Datavärdet motsvarar status täckt eller inte täckt. Datavärdena kan presenteras pà bildskärmen. Varje häl kan làtas representera en bokstav eller siffra pà ett datatangentbord. Därmed möjliggör uppfinningen inmatning av text till den databehandlande enheten.

Tangentbord Syftet med denna utföringsform är att med ingen eller ett minimum av anordningar eller komponenter möjliggöra snabb inmatning av tecken (bokstäver och siffror)samt datorgrafiska ritelement (linjer och figurer).

Det förutsätts att det är opraktisk att förse den databehandlande enheten med tangentbord av den typ som används för PC.

Den till den databehandlande enheten 10 (se Fig.4) kopplade kameran 30 riktas mot en en papperskopia 110 med bild pà i detta exempel ett antal knappar 120 och en yta 130 för inmatning av datorgrafiska ritobjekt. Knapparna kontrasterar mot bakgrunden.

Användaren pekar, företrädesvis med pekfingrarna, pà någon av knapparna 120 pà papperskopian. Analys av bildinformationen som inhämtas av kameran ger ett datavärde som för varje tangent motsvarar tangent nertryckt eller tangent ej nertryckt. Analysen bestar företrädesvis av att detektera den kontrastförändring som uppstàr när ett finger täcker över en knapp 120 pà papperskopian. De i sekvens inmatade datavärdena visas 10 15 20 25 30 A525 935 ll som en sekvens av tecken i ett bildobjekt som visas pà bildskärmen 20.

Vidare kan användaren skapa t.ex. linjeinformation genom placera företrädesvis sitt tumgrepp parallelt med, och liggande i kontakt med, en företrädesvis därför avsedd del av papperskopian, i detta exempel ytan 130.

Användarens tumgrepp används da som pekdon/penna pà liknande sätt som i utföringsform ”pekdonsfunktion med tumgrepp” ovan. Tumgreppets rörelse och status analyseras. När tumgreppets status är slutet skapas vid rörelse av detsamma datavärden som motsvarar en linje.

Linjen presenteras som en del i ett datorgrafiskt objekt som visas pà bildskärmen 20.

Notera att layout eller utformningen pà den papperskopia som används vid inmatning inte pà nagot sätt är begränsad till den i detta exempel beskrivna.

I detta exempel används en papperskopia med bild pà tangentbord. I andra utföringsformer kan en pà ytan projecerad bild användas. Projektionen kan t.ex. àstadkommas av en i den databehandlande enheten inbyggd anordning som projecerar bilden pà ytan.

Slutligen ska påpekas att föreläggande uppfinning inte pà nagot sätt är begränsad till de utföringsformer som beskrivits ovan. Istället är flera modifikationer genomförbara inom ramen för de bifogade kraven.

Exempelvis kan en penna eller ett annat objekt användas istället för ett tumgrepp mellan tvà fingrar för att åstadkomma pekdons-symbolen pä bildskärmen hos den mobila den databehandlande enheten.

Claims (17)

5 10 15 20 25 30 35 525 935 12. PATENTKRÄV

1. Metod att styra en bildskärm (20) vilken är innefattad i en databehandlande enhet (10) , kännetecknad av att (51) (52) inhämtas till nämnda databehandlande enhet (10) med (10) - en första och en andra bildinformation en i nämnda databehandlande enhet innefattad (30); - en skillnad mellan nämnda första kamera (51) och andra (52) bildinformation detekteras; - ett på nämnda bildskärm (20) visat datorgrafiskt bildobjekt (41), nämnda skillnad. förändras i överensstämmelse med

2. Metod enligt skillnad mellan nämnda första kännetecknad av aU:nàmma (51)och andra (52) bildinformation är en skillnad i relativ position mellan krav 1, kameran (30)och ett i kamerans lins synligt objekt.

3. Metod enligt krav 1-2, nämnda datorgrafiska bildobjekt (41)positionsförändras. kännetecknad av att

4. Metod enligt krav 1-3, förändringen av nämnda datorgrafiska bildobjekt är en kännetecknad av att panorering.

5. Metod enligt krav 1-3, förändringen av nämnda datorgrafiska bildobjekt är en zoomning. kännetecknad av att

6. Metod enligt krav 1-2, kännetecknad av att nämnda datorgrafiska bildobjekt (4l)statusförändras.

7. Metod enligt något av ovanstående krav, kännetecknad av att en tredje bildinformation 10 15 20 25 30 35 525 935 (3 inhämtas till nämnda databehandlande enhet (10) med den i nämnda databehandlande enhet innefattade kameran(30).

8. Metod enligt krav 7, kännetecknad av att - en skillnad mellan nämnda första, andra och tredje bildinformation detekteras; - nämnda skillnad mellan nämnda första, andra och tredje bildinformation representeras av en uppsättning datavärden vilka filtreras i den (10), - nämnda bildobjekt förändras i överensstämmelse med databehandlande enheten resultatet av filtreringen av nämnda datavärden.

9. Metod enligt krav 8, kännetecknad av att nämnda filtrering är av typen làgpassfiltrering.

10. Metod enligt krav 8, nämnda filtrering äger rum med hjälp av hystereseffekt. kännetecknad av att

11. ll. Metod enligt något av ovanstående krav, kärn1etec:knaci av att nämnda databehandlande enhet (10) är en mobil databehandlande enhet.

12. Metod enligt något av ovanstående krav, kännetecknad av att nämnda kamera (30) är en digitalkamera.

13. Databehandlande enhet (10) vilken innefattar en bildskärm (20) (30) första och en andra bildinformation, (10) organ för detektering av en skillnad mellan nämnda första (51) och andra (52) ett organ för förändring av ett på nämnda bildskärm (20) och en kamera för inhämtande av en kännetecknad av att nämnda databehandlande enhet innefattar ett bildinformation och visat datorgrafiskt bildobjekt (41) i överensstämmelse med nämnda skillnad. 10 l5 20 25 30

14. Databehandlande enhet (10) vilken innefattar en bildskärm (20) (30) första och en andra bildinformation, kännetecknad av (10) organ för detektering av en skillnad mellan nämnda första (51) och andra (52) ett organ för panorering av ett på nämnda bildskärm (20) och en kamera för inhämtande av en att nämnda databehandlande enhet innefattar ett bildinformation och visat datorgrafiskt bildobjekt (41) i överensstämmelse med nämnda skillnad.

15. Databehandlande enhet (10) vilken innefattar en bildskärm (20) och en kamera (30) för inhämtande av en första och en andra bildinformation, kännetecknad av (10) organ för detektering av en skillnad mellan nämnda första (51) (52) ett organ för zoomning av ett pà nämnda bildskärm (20) visat datorgrafiskt bildobjekt (41) med nämnda skillnad. att nämnda databehandlande enhet innefattar ett bildinformation och och andra i överensstämmelse

16. Databehandlande enhet kännetecknad av att nämnda databehandlande enhet (10) enligt något av krav 13-15 (10) är en mobil terminal.

17. Databehandlande enhet (10) kännetecknad av att nämnda kamera enligt något av krav 13-16 (30) är en digitalkamera.