TW200910875A - Method and system for instantly translating text within an image - Google Patents

Description

200910875 1AC070146.1W 24970twf.doc/p 九、發明說明： 【發明所屬之技術領域】 本發明是有關於一種圖文翻譯方法，且特別是有關於 一種用於可攜式通訊裝置’可遠端翻譯所擷取影像中之文 字的方法。 【先前技術】 隨著電子科技的快速發展，市面上的消費性電子產品 (' 莫不整合多項功能以提昇其競爭力，除了一般的照相、通 話、上網等功能之外，更是將翻譯功能整合在手機或個人 數位助理等可攜式通訊裝置上。而傳統翻譯機輪入文字的 方式也從按鍵輸入，發展為手寫、語音輸入等方式。使用 ' 傳統翻譯機查詢文字的功能是建立在使用者了解所見文字 的字母或發音的前提下’配合適用的輸入法或麥克風，才 能順利的輸入查找文字的翻譯。然而，當使用者遇到不熟 悉語言的文字時，便會無從查詢起。例如，在國外出差戋 I 是旅遊時，使用者可能會因為看不懂所見之文字，因而無 法順利輸入以查找文字的翻譯。 … 因此，手機廠商便發展出將可攜式電子裝置結合光學 文予辨識（Optical Character Recognition，OCR)技術，與 由OCR辨識數位相機所拍攝下之圖文影像，之: 翻譯。如此一來，就算是從未接觸過之外來語言，= =地進行翻譯。'然而，在現今電子產品講究輕薄短=的 ，可攜式通絲置儲存容量有—定的限制，連帶使 付貢料庫的擴充f到限制，而無法充分利用QCR技術。 200910875 IAC070146.TW 24970twf.d〇c/p 因此，即使傳統可攜式通訊裝 但若對-些特殊的、複雜的圖文，的圖^像， 規則編排圖文，或者是大量資料圖3 =國居吕、不 整地翻譯，甚至會因為其内建資料庫精確、完 法進行翻譯。 不支棱該國語言而無 【發明内容】 本發明提供-種即時翻譯圖文的 Ο 傳送至服務端裝置進行翻譯: 攜式通訊裝置建構翻譯模組的成本。 名舌在] 本發明提供一種即時翻譯圖文 置強大的運算能力及儲存資源，提供完整的翻 『攜式通訊裝置所娜之任何影像皆得以=二： 月提出-種即時翻譯圖文的方法，適於翻譯可攜 式通喊置所擷取之影像中的文字。此方法包括：可攜式 通訊裝置摘取影像，並透過通訊網路將影像傳送至服務端 裝置。之後，由服務端裝置辨識並翻譯影像中之文字為一 翻譯文字，並透過通訊網路回傳翻譯文字至可攜式通訊裝 置，而使得可攜式通訊裝置顯示翻譯文字。印 ° 在本發明之-實施例中，服務端裝置辨識並翻譯影像 中之文字為一翻譯文字，並透過通訊網路回傳翻譯文字至 可攜式通訊裝置的步驟，更包括由服務端裝置在每翻譯完 一部分景》像中的文字之後，便透過通訊網路即時回傳已翻 譯完之部分的翻譯文字至可攜式通訊裝置。尤其是當影像 200910875 1AC070146.TW 24970twidoc/p 為不規則編排圖文或大量資料圖文時，則由服務端裝置即 時翻譯並先回傳已翻譯完之部分的翻譯文字。 在本發明之一實施例中，在服務端裝置透過通訊網路 回傳翻譯文字至可攜式通訊裝置的步驟之前，首先吁攜式 通訊裝置接收翻譯語言要求’並透過通訊網路傳送至服務 端裝置。接著’服務端裝置則依據翻譯語言要求’翻譯已 辨識之影像中的文字。另外，服務端裝置透過通訊網路回 Ο 傳翻譯文字至可攜式通訊裝置的步驟，更包括由服務端裝 置藉由簡訊將翻譯文字傳送至可攜式通訊裝置，或者是將 翻澤文予存放至服務端裝置之網頁，之後，可攜式通訊裝 置即可透過瀏覽器，連線至服務端裝置瀏覽網頁中之翻譯 文字。 本發明提出一種即時翻譯圖文的系統，其包括可攜式 通，裝置以及服務端裝置’此可攜式祕m括影像操 取Ϊ元以i第—通訊模組。其中，影像擷取單元係用以擷 取衫像，第一通訊模組則用以透過通訊網路，傳送影像。 另方面，服務端裝置包括第二通訊模組、圖文辨識楔 以及，譯模組。其巾，第二通訊模組制以透過通訊網路 〜像，圖文辨識模組係用以辨識影像中之文字，而 澤換^則是用以將影像中之文字翻譯為崎文字。其中， 服務端裝置在完成翻譯後’即透過第二通訊模組 文字傳送至可攜式通訊裝置。 翻澤 在本發明之一實施例中，可攜式通訊裝置更包括輪 η面，其係用以接收翻譯語言要求，而此翻譯語言要求係 200910875 IAC070146.TW 24970twf.doc/p 透過第一通訊模組傳送至服務端裝置，以供服務端裝置據 以翻譯影像中之文字。另外，服務端裝置更包括多國語言 資料庫’係用以儲存多國語言’以供翻譯模組查詢以進行 翻譯。 在本發明之一實施例中，圖文辨識模組包括光學字元 辨識。可攜式通乱裝置包括行動電話、個人數位助理或智 慧電話。通訊網路包括全球行動通信系統（G1〇balSystemf〇r 〇 Mobile Communication，GSM)、碼多重擷取（Code Division Multiple Access, CDMA )系統或個人手持式電話系統 (Personal Handy-phone System，PHS)。影像擷取單元包 括電荷耦合元件（Charge-Coupled Device, CCD )相機或互 補金氧半導體（Complementary Metal Oxide Semiconductor， CMOS )相機。 本發明利用服務端裝置強大的運算功能及儲存資 源’將可攜式通訊裝置所擷取之影像傳送至服務端裝置進 行辨識及翻譯，之後再將翻譯文字回傳至可攜式通訊裝置 I 中顯示，而達到即時翻譯的功效。此外對於複雜的圖文， 更能夠在翻譯的同時將已完成的部份傳回到可攜式通訊裝 置。據此’本發明可提供更完整、精確而快速的多國語言 翻譯功能’且能節省在可攜式通訊裝置中裝置翻譯模組的 成本，一舉數得。 為了讓本發明之上述特徵和優點能更明顯易懂，下文 特舉較佳實施例，並配合所附圖式，作詳細說明如下。 【實施方式】 200910875 IAC070146.TW 24970twf.doc/p 目蓟市面上手機已經能夠進行圖文的翻譯，然而礙於 手機儲存谷里限制，圖文翻譯在應用上便有諸多限制，例 如能夠辨識及翻譯的語言有限，另外影像辨識的計算亦會 X到硬體效能的限制。因此，本發明提出一種即時翻譯圖 文的方法及系統，藉由在服務端裝置中建構完善的影像辨 識及翻譯機制，以即時辨識並翻譯由可攜式通訊裝置傳送 而來之影像中的文字。為了使本發明之内容更為明瞭，以 〇 下特舉實施例作為本發明確實能夠據以實施的範例。 圖1疋依照本發明一實施例所缘示之即時翻譯圖文的 系統方塊圖。請參照圖丨，即時翻譯圖文的系統1〇〇包括 可攜式通訊裝置110以及服務端裝置12〇。其中，可攜式 通訊裝置11G包括第—通訊模組lu以及影像擷取單元 1^3 ’而服務端裝置12〇包括第二通訊模組121、圖文辨識 模組123以及翻譯模組丨25。 可攜式通訊裝置110係用來擷取影像，並透過通訊網 I 路13〇將影像傳送至服務端農置12〇。在本實施例中，可 攜式通訊裝置120例如是行動電話、個人數位助理或智藝 電話。而軌 13G咖如全麵純信祕⑽丄 System f0r Mobile c〇m_icati〇n，GSM)、碼多重擷取（匸_

Dms— Multiple Access，CDMA )系統或個人手持式電話

，、先（Personal Handy-phone System，PHS)。以使用 GSM j的行動電話為例，即是行動電話· GSM系統將影 象傳送至服務端裝f 110以進行後續動作。以下便詳細 紹各構件之功能。 200910875 IAC070146.TW 24970twf.doc/p 在可攜式通訊裝置110中，影像擷取單元113係用以 擷取影像’而此影像擷取單元1Π例如是電荷麵合元件 (Charge-Coupled Device，CCD)相機或互補金氧半導體 (Complementary Metal Oxide Semiconductor, CMOS)相 機。而第一通訊模組111則係用以透過通訊網路130傳送 由影像擷取單元113擷取的影像。 另一方面，在服務端裝置120中’第二通訊模組121 係用以透過通訊網路13〇，接收由可攜式通訊裝置11〇之 第一通訊模組ill所傳送的影像。圖文辨識模組123 (例 如光學字元辨識）則用以辨識影像中之文字。而翻譯模組 125便將影像中之文字翻譯為翻譯文字。另外，在翻譯模 組125中，亦可設置一多國語言資料庫（未繪示），以供 翻δ睪模組125查詢以進行翻譯，然在此並不限定實際應用 之範圍。 整體而言，可攜式通訊裝置110在影像擷取單元113 擷=影像之後，便藉由第一通訊模組ιη將影像傳送至服 務端裝置120。而服務端裝f 12〇在藉由圖文辨識模組123 將所接收之影像觸完之後，便透過鱗触125完成翻 譯。之後，服務端裝置120即透過第二通訊模組121，傳 送翻譯文字至可攜式通訊裝置110。 而在實際應用中，即時翻譯圖文的系統100更可包括 其他構件，以提供使用者更完善的服務。以下即再舉一實 施例詳加說明。圖2是依照本發明另—實施例所繪示之即 時翻譯圖文的系統方塊圖。請參照圖2，即時翻譯圖文的 200910875 IAC070146.TW 24970twf.doc/p 系統200包括可攜式通訊裝置210以及服務端裝置220。 其中’可攜式通訊裝置210包括第一通訊模組211、影像 擷取單元213以及輸入介面215，而服務端裝置220包括 第二通訊模組22卜圖文辨識模組223、翻譯模組225以及 多國語言資料庫227。 在可攜式通訊裝置210中，第一通訊模組211與影像 擷取單元213與前述實施例之第一通訊模組ηι與影像擷 p 取單几Π3功能相同或相似。另外，在服務端裝置220中， 第一通訊模組221、圖文辨識模組223以及翻譯模組225 亦與前述實施例之第二通訊模組121、圖文辨識模組123 以及翻譯模組125功能相同或相似，故其詳細功能在此皆 不再贅述。然而，本實施例之可攜式通訊裝置21〇相較於 刖述實施例更包括輸入介面215，而服務端裝置220則更 包括多國語言資料庫227。 在本實施例中，可攜式通訊裝置21〇的輸入介面215 #】 （例如按鍵、手寫版、麥克風等）可接收使用者所輪入之 ‘ 翻譯語言要求’其巾此崎語言要求贿過第-通訊模組 2H傳送至服務端裴置22〇，以供服務端裝置22〇據以翻譯 衫像中之文字。舉例來說，此翻譯語言要求例如要求將影 像中的=字翻譯為英文，或是其他國家的語言，本實施例 並=限定其範圍。而由於服務端裝置22〇對於硬體的擴充 f =有限制’因此’藉由在服務端裝置220中設置多國語 :貝料庫227 ’儲存多國語言而提供翻譯模組225查詢翻 #，因此可提供更多樣性的翻譯語言選擇。 11 200910875 24970twf.doc/p

IAC070146.TW 洋細地说，可攜式通訊裝置21〇在影像操取單元 擷取影像之後，便透過第—通訊模組211將影像傳送至服 務端裝置220。並且’可攜式通訊裝f 21〇更可將輸入介 面215所接收之翻譯語言要求，透過第一通訊模組Μ〗傳 迗至服務端裝置220。而服務端裝置22〇在將所接收之影 像藉由圖文辨識模組223辨識完成之後，便根據翻譯語言

要求’透過翻澤模組225完成翻譯。之後，服務端裝置22〇 即透過第二通訊模組221，傳送翻譯文字至可攜式通訊裝 置 210。 搭配上述即時翻譯圖文的系統，本發明另提供一種即 時翻譯圖文的方法。圖3是依照本發明一實施例所繪示之 即時翻譯圖文的方法流程圖。請同時參照圖2及圖，首 先，在步驟S310中，可攜式通訊裝置21〇擷取影像，並 透過通訊網路230傳送影像至服務端裝置22〇中。詳細地 說，可攜式通訊裝置210係藉由影像擷取單元213擷取影 像，再藉由弟一通訊模組211透過通訊網路mo將影像傳 送至服務端裝置220中。 如 舉例來說，以使用GSM系統的行動電話而言，當使 用者遇到不認識之文子日寸’便可藉由行動電話將文字拍 下來後，透過GSM系統將所拍攝的影像傳送至服務端 置220進行翻譯。另外，使用者更可透過行動電話的按鍵 (即輸入介面215)輸入翻譯語言要求，使得服務端襄 220根據翻譯語言要求據以翻譯影像中之文字。例如未 使用者按下按鍵“Γ即是表示將影像中之文字翻★睪為^ 12 200910875 IAC070146.TW 24970twf.doc/p 文，而按鍵“2”即表示翻譯為中文，諸如 舉例說明，並不_其現實應财之_在此僅為 η 接著，在步驟S320中，由服務端裝置22〇對影像中 =字，識並翻譯為翻譯文字，並在翻譯完成後透過 通訊稱23〇回傳翻譯文字至可攜式通訊裝置別。進一 ^也^，服務端裝置220在透過第二通訊模组221接收影 像之後’便藉由圖文辨識模組221辨識影像中之文字。铁 模組225將圖文辨識模組221辨識的文字翻譯 為翻澤δ需求所要求之翻譯文字。 八夕提的是’服務端裝置220可以在每翻譯完一部 ^ 字後，便透過通訊網路23g㈣回傳已翻 的翻譯文字至可攜式通訊裝置21〇。尤其是當 影像為不社歧財 動作，此時就可由服務 210顯-邛刀的翻澤文字回傳給可攜式通訊裝置 210顯不，而無需等待翻 時翻譯的功效。子翻澤模組225全數翻譯，以達到即 另外，服務端裝置220在回傳翻譯文字至 裝置210時，可採用又鬥沾+上荆事又子主]‘式通況 。α的方式提供可攜式通訊裝置210 僂送翻❹^ t例來說，服務端裝置220可藉由簡訊來 二用者只需透過可攜式通訊裝置210的簡 訊功月匕就此收到翻譯寺空 口 22〇將翻譯文字存放至盆:種方式則是由服務端裝置 通訊裝置中’而使用者可利用可搞式 』見為連線至服務端裝置220的網頁中 13 200910875 IAC070146. TW 24970twf.doc/p d見翻敎字。以上兩者均可達到檢視翻譯文字的目的， 然在此並不限制其實際應用的方式。 —取後’在步驟S330中’可攜式通訊裝置21〇將翻譯 文字顯不在營幕（未緣示）上，以供使用者觀看並解讀原 始擷取影像中文字的含意。 练上所述’上述實施例利用服務端裝置進行即時圖文 翻譯’充分利用了服務端褒置附帶的完整辨識技術。並且， $於服務端裝置巾具備龐大的儲存容量，以及快速的計算 月&力’不僅可支援多國語言的辨識及翻譯，在遇到大量資 料圖文或是不規則圖文時，亦有足夠的計算能力來即時辨 1及翻#。另外’對於較複雜的圖文，能夠把已完成的部 伤先订傳回到可攜式通訊裝置顯示，而維持翻譯功能的即 時性。據此’使用者能夠隨時拍攝影像，即時了解其内容， 大大豐富了可攜式通訊裝置的使用樂趣。 —雖然本發明已以較佳實施例揭露如上，然其並非用以 〔 ^本發明’任何所屬技術領域巾具有通常知識者，在不 脫離本發明之精神和範圍内，當可作些許之更動與潤掷， 因此本發明之保護範圍當視後附之申請專利範圍所界定者 為準。 【圖式簡單說明】 圖1是依照本發明一實施例所繪示之即時翻譯圖文的 系統方塊圖。 圖2是依照本發明另一實施例所繪示之即時翻譯圖文 的系統方塊圖。 14 200910875 IAC070146.TW 24970twf.doc/p 圖3是依照本發明一實施例所繪示之即時翻譯圖文的 方法流程圖。 【主要元件符號說明】 100、200 :即時翻譯圖文的系統 110、 210 :可攜式通訊裝置 111、 211 :第一通訊模組 113、213 :影像擷取單元 120、 220 :服務端裝置 121、 221 :第二通訊模組 123、223 :圖文辨識模組 125、225 :翻譯模組 130、230 :通訊網路 215 :輸入介面 227 :多國語言資料庫 S310〜S330 :本發明一實施例之即時翻譯圖文的方法 各步驟 15

Claims (1)

1. 200910875 IAC070146.TW 24970twf.doc/p 十、申請專利範圍： 1·-種即時_圖文的方法，適於翻譯—评式通訊 裝置所擷取之-影像中的文字，該方法包括下列^: 該可攜式通訊裝置擷取該影像，並透過 傳 送該影像至一服務端裝置； Γ 該服務端裝置辨識並翻譯該影像中之文字為一翻譯 g:=過該通訊網路回傳該翻譯文字至該可攜式通訊 該可攜式通訊裝置顯示該翻譯文字。 請專利範圍第！項所述之即時翻譯圖文的方 法’，、中魏務端裝置_並翻賴影像巾之 譯文字，並透職軌祕回傳該崎 ^ 訊裝置的步驟包括： ％』揭式通 該服務端裝置在每翻譯完一部分之該影像 — 後，透過該通訊網路即時回傳已翻譯 之文字 文字至該可攜歧絲置。 f 該翻譯 、3.如申請專利範圍第2項所述之即時 法，其中當該影像為一不規則編排圖文或一大旦> 的方 時，則由該服務端裝置即時翻譯並回"二f資料圖文 的該翻譯文字。 &之讀部分 4.如申請專利範圍第丨項所述之 法，其2該服務端裝置透過該通訊心=匕的方 至該可攜式通訊裝置的步驟之前，更包括：哥文字 該可攜式通訊裝置接收一翻譯語言要求，並 喝讀通 16 200910875 ΐΛ^υ/υΐΗ〇.ι w 24970twf.doc/p 訊網路傳送至該服務端裝置；以及 翻譯已辨識之該 該服務端裝置依據該翻譯語言要求 影像中的文字。 、5·如ΐ請補範圍第丨項所述卩時翻譯圖文 法，其中該服務端装置透過該通訊網路回傳該翻 該可攜式通訊裝置的步驟，更包括：

   該服務端裝置藉由簡訊將該翻譯文字 式通訊裝置。 檇 、6·如申請專利範圍第1項所述之即時翻譯圖文的方 法’其中該服務端裝置透職通訊網路回傳該翻譯 该可攜式通訊裝置的步驟，更包括： 網頁該：端裝置存放該翻譯文字至該服務端裝置之一 該可攜式通訊裝置透過-劉覽器，連線至該服務端裝 置瀏覽該網頁中之該翻譯文字。 7.如申請專利範圍第丨項所述之即時翻譯圖文的方 法，其中該通訊網路包括全球行動通信系統（G1〇balSystem for Mobile Communication，GSM )、碼多重擷取（C〇de Division Multiple Access，CDMA )系統或個人手持式電話系統 (Personal Handy-phone System，PHS )。 8·—種即時翻譯圖文的系統，包括： 一可攜式通訊裝置，包括： 一影像擷取單元’用以擷取一影像；以及 一第一通訊模組，用以透過一通訊網路，傳送該 17 200910875 a w 24970twf.doc/p 影像；以及 一服務端裝置，包括： 一第一通訊模組，用以透過該通訊網路，接收該 影像； ° 一圖文辨識模組，用以辨識該影像中之文字；以 及 ， 一翻譯模組，用以翻譯該影像中之文字為一翻譯 文字，其中 該服務端裝置在完成翻譯後，即透過該第二通訊 模組，傳送該翻譯文字至該可攜式通訊裝置。 ° 9·如申凊專利範圍第8項所述之即時翻譯圖文的系 統’其中該可攜式通訊裝置更包括： ’ 輸人介面’用以接收-翻譯語言要求，其中該翻譯 2要求诚賴第—祕模祕送i該服務端裝置，以 供該服務端裝置據以翻譯該影像中之文字。 模組查彳⑽言’以供該翻譯 申請專利範圍第8項所述之即時翻譯圖文的系 、、-，、中遠圖文辨識模組包括一光學字元辨識。 轉3申請專利範圍第8項所述之即時翻譯圖文的系 二可攜式通訊裝置包括行動電話、個人數位助i 18 200910875 /υ ι^+υ. 1 νν 24970twf.doc/p ^如h專利8項所述之印時翻譯圖文的系 統〜、中該通訊網路包括全球行動通信系統（Gk)balsystem for Mobile Communication，GSM )、碼多重擷取（c〇de Divisi〇n Multiple Access，CDMA )系統或個人手持式電話系統 (Personal Handy-phone System, PHS ) ° 14.如申請專利範圍第8項所述之即時翻譯圖文的系 統，其中該影像擷取單元包括電荷轉合元件 (Charge-Coupled Device, CCD)相機或互補金氧半導體 (Complementary Metal Oxide Semiconductor，CMOS)相 機。 19