JPH10312381A - 翻訳方法および装置 - Google Patents
翻訳方法および装置Info
- Publication number
- JPH10312381A JPH10312381A JP9120757A JP12075797A JPH10312381A JP H10312381 A JPH10312381 A JP H10312381A JP 9120757 A JP9120757 A JP 9120757A JP 12075797 A JP12075797 A JP 12075797A JP H10312381 A JPH10312381 A JP H10312381A
- Authority
- JP
- Japan
- Prior art keywords
- pattern
- image
- specific information
- extracting
- extracted
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Machine Translation (AREA)
- Document Processing Apparatus (AREA)
Abstract
(57)【要約】
【課題】 翻訳方法および装置に関し、入力画像中の文
字等を他の言語の文字等に翻訳すること。 【解決手段】 撮像した画像を取り込む（ステップＳ
１）。撮像した画像をイメージ表示する（ステップＳ
２）。このイメージにおいて領域を指定する（ステップ
Ｓ３）。指定領域内の文字パターンを抽出する（ステッ
プＳ４）。抽出した文字パターンを認識する（ステップ
Ｓ５）。認識した文字をテキスト表示する（ステップＳ
６）。認識した文字を翻訳する（ステップＳ７）。翻訳
結果を表示する（ステップＳ８）。
字等を他の言語の文字等に翻訳すること。 【解決手段】 撮像した画像を取り込む（ステップＳ
１）。撮像した画像をイメージ表示する（ステップＳ
２）。このイメージにおいて領域を指定する（ステップ
Ｓ３）。指定領域内の文字パターンを抽出する（ステッ
プＳ４）。抽出した文字パターンを認識する（ステップ
Ｓ５）。認識した文字をテキスト表示する（ステップＳ
６）。認識した文字を翻訳する（ステップＳ７）。翻訳
結果を表示する（ステップＳ８）。
Description
【０００１】
【発明の属する技術分野】本発明は翻訳方法および装置
に関し、特に、画像シーンに含まれる文字等を所望の異
なる言語等に翻訳することのできる翻訳方法および装置
に関する。
に関し、特に、画像シーンに含まれる文字等を所望の異
なる言語等に翻訳することのできる翻訳方法および装置
に関する。
【０００２】
【従来の技術】従来、表記された言語、すなわち文字や
特定の意味を持つ記号等を認識するパターン認識技術が
知られており、近年ではＯＣＲが広く普及してきてい
る。
特定の意味を持つ記号等を認識するパターン認識技術が
知られており、近年ではＯＣＲが広く普及してきてい
る。
【０００３】このＯＣＲでは、通常は帳票等に手書きあ
るいは印刷された文字等を認識対象にしている。また、
自然画像等の画像シーン（ｓｃｅｎｅ ｉｍａｇｅｓ；
以下、シーンと略記する）中の文字等を対象にした自動
文字認識技術に関する技術も研究されてはいる。
るいは印刷された文字等を認識対象にしている。また、
自然画像等の画像シーン（ｓｃｅｎｅ ｉｍａｇｅｓ；
以下、シーンと略記する）中の文字等を対象にした自動
文字認識技術に関する技術も研究されてはいる。
【０００４】例えば、Ｏｈｙａ，Ｓｈｉｏ，Ａｋａｍａ
ｔｓｕの：“Ｒｅｃｏｇｎｉｚｉｎｇ Ｃｈａｒａｃｔ
ｅｒｓ ｉｎ Ｓｃｅｎｅ Ｉｍａｇｅｓ”（ＩＥＥＥ
Ｔｒａｎｓａｃｔｉｏｎｓ ｏｎ Ｐａｔｔｅｒｎ
ａｎａｌｙｓｉｓ ａｎｄｍａｃｈｉｎｅ ｉｎｔｅｌ
ｌｉｇｅｎｃｅ，Ｖｏｌ．１６，Ｎｏ．２，（１９９
４））では、シーンの中に含まれる文字を対象にして、
隣接領域間の輝度差によって文字候補領域を抽出する方
法が提案されている。
ｔｓｕの：“Ｒｅｃｏｇｎｉｚｉｎｇ Ｃｈａｒａｃｔ
ｅｒｓ ｉｎ Ｓｃｅｎｅ Ｉｍａｇｅｓ”（ＩＥＥＥ
Ｔｒａｎｓａｃｔｉｏｎｓ ｏｎ Ｐａｔｔｅｒｎ
ａｎａｌｙｓｉｓ ａｎｄｍａｃｈｉｎｅ ｉｎｔｅｌ
ｌｉｇｅｎｃｅ，Ｖｏｌ．１６，Ｎｏ．２，（１９９
４））では、シーンの中に含まれる文字を対象にして、
隣接領域間の輝度差によって文字候補領域を抽出する方
法が提案されている。
【０００５】
【発明が解決しようとする課題】しかしながら、これら
の研究で扱っているのは、シーンから文字領域あるいは
文字パターンを抽出・認識する方法が中心であり、抽出
した文字情報を積極的に利用することを目的とした研究
はなされていない。
の研究で扱っているのは、シーンから文字領域あるいは
文字パターンを抽出・認識する方法が中心であり、抽出
した文字情報を積極的に利用することを目的とした研究
はなされていない。
【０００６】特に、屋外または屋外のシーンに含まれる
文字や記号を認識し、認識結果の文字情報を利用して、
これを異なる言語や記号へ即時翻訳するシステムは、本
出願人らの「機械翻訳カメラ」（電子情報通信学会、言
語理解とコミュニケーション研究会（ＮＬＣ）技術報告
（１９９７．Ｍａｒｃｈ））まで報告されていなかっ
た。これらのシーンは文字や記号の情報が数多く含まれ
ており、これらの中には命令、注意、説明、名称など重
要な情報を表すものも多い。そこで、この情報を構成す
る言語がわからない人間にも、その表された意味内容を
その場で即時に理解できるようにすることが望ましい。
文字や記号を認識し、認識結果の文字情報を利用して、
これを異なる言語や記号へ即時翻訳するシステムは、本
出願人らの「機械翻訳カメラ」（電子情報通信学会、言
語理解とコミュニケーション研究会（ＮＬＣ）技術報告
（１９９７．Ｍａｒｃｈ））まで報告されていなかっ
た。これらのシーンは文字や記号の情報が数多く含まれ
ており、これらの中には命令、注意、説明、名称など重
要な情報を表すものも多い。そこで、この情報を構成す
る言語がわからない人間にも、その表された意味内容を
その場で即時に理解できるようにすることが望ましい。
【０００７】本発明は上述の点に鑑みて成されたもの
で、屋外または屋外のシーンに含まれる文字等を異なる
言語等に翻訳することのできる翻訳方法および翻訳装置
を提供することを目的とする。
で、屋外または屋外のシーンに含まれる文字等を異なる
言語等に翻訳することのできる翻訳方法および翻訳装置
を提供することを目的とする。
【０００８】
【課題を解決するための手段】上記目的を達成するため
に、請求項１に記載の本発明の方法では、入力画像に含
まれる特定情報を表すパターンを抽出し、前記抽出した
パターンをその特定情報に対応する他のパターンに変換
する翻訳方法であって、前記入力画像中の前記特定情報
を表すパターンを抽出するパターン抽出ステップと、前
記抽出したパターンをパターン認識する認識ステップ
と、前記認識したパターンが表す前記特定情報に対応す
る他のパターンに変換する変換ステップとを備えること
を特徴とする。
に、請求項１に記載の本発明の方法では、入力画像に含
まれる特定情報を表すパターンを抽出し、前記抽出した
パターンをその特定情報に対応する他のパターンに変換
する翻訳方法であって、前記入力画像中の前記特定情報
を表すパターンを抽出するパターン抽出ステップと、前
記抽出したパターンをパターン認識する認識ステップ
と、前記認識したパターンが表す前記特定情報に対応す
る他のパターンに変換する変換ステップとを備えること
を特徴とする。
【０００９】ここで、請求項２に記載の本発明の方法で
は、前記パターン抽出ステップは、前記入力画像を表示
する表示ステップと、前記表示ステップにおいて表示し
た画像中で前記特定情報を表すパターンを含む領域を指
定する領域指定ステップと、前記指定した領域内画像に
ついて、前記特定情報を表すパターンを抽出する抽出ス
テップとを含むこともできる。
は、前記パターン抽出ステップは、前記入力画像を表示
する表示ステップと、前記表示ステップにおいて表示し
た画像中で前記特定情報を表すパターンを含む領域を指
定する領域指定ステップと、前記指定した領域内画像に
ついて、前記特定情報を表すパターンを抽出する抽出ス
テップとを含むこともできる。
【００１０】ここで、請求項３に記載の本発明の方法で
は、前記抽出ステップにおいて、前記領域内画像を濃淡
画像に変換して当該濃淡画像に応じた閾値を決定し、決
定した前記閾値に従って前記濃淡画像に２値化処理を行
い、当該処理結果から前記特定情報を表すパターンを抽
出することもできる。
は、前記抽出ステップにおいて、前記領域内画像を濃淡
画像に変換して当該濃淡画像に応じた閾値を決定し、決
定した前記閾値に従って前記濃淡画像に２値化処理を行
い、当該処理結果から前記特定情報を表すパターンを抽
出することもできる。
【００１１】ここで、請求項４に記載の本発明の方法で
は、前記変換して得た前記他のパターンが表す前記特定
情報に対応する情報を出力する出力ステップを備えるこ
ともできる。
は、前記変換して得た前記他のパターンが表す前記特定
情報に対応する情報を出力する出力ステップを備えるこ
ともできる。
【００１２】ここで、請求項５に記載の本発明の方法で
は、前記情報は画像信号であり、前記出力ステップにお
いて前記画像信号を表示出力することもできる。
は、前記情報は画像信号であり、前記出力ステップにお
いて前記画像信号を表示出力することもできる。
【００１３】上記目的を達成するために、請求項６に記
載の本発明の装置では、入力画像に含まれる特定情報を
表すパターンを抽出し、前記抽出したパターンをその特
定情報に対応する他のパターンに変換する翻訳装置であ
って、前記入力画像中の前記特定情報を表すパターンを
抽出するパターン抽出手段と、前記抽出したパターンを
パターン認識する認識手段と、前記認識したパターンが
表す前記特定情報に対応する他のパターンに変換する変
換手段とを備えることを特徴とする。
載の本発明の装置では、入力画像に含まれる特定情報を
表すパターンを抽出し、前記抽出したパターンをその特
定情報に対応する他のパターンに変換する翻訳装置であ
って、前記入力画像中の前記特定情報を表すパターンを
抽出するパターン抽出手段と、前記抽出したパターンを
パターン認識する認識手段と、前記認識したパターンが
表す前記特定情報に対応する他のパターンに変換する変
換手段とを備えることを特徴とする。
【００１４】ここで、請求項７に記載の本発明の装置で
は、前記パターン抽出手段は、前記入力画像を表示する
表示手段と、前記表示手段により表示した画像中で前記
特定情報を表すパターンを含む領域を指定する領域指定
手段と、前記指定した領域内画像について、前記特定情
報を表すパターンを抽出する抽出手段とを含むこともで
きる。
は、前記パターン抽出手段は、前記入力画像を表示する
表示手段と、前記表示手段により表示した画像中で前記
特定情報を表すパターンを含む領域を指定する領域指定
手段と、前記指定した領域内画像について、前記特定情
報を表すパターンを抽出する抽出手段とを含むこともで
きる。
【００１５】ここで、請求項８に記載の本発明の装置で
は、前記抽出手段により、前記領域内画像を濃淡画像に
変換して当該濃淡画像に応じた閾値を決定し、決定した
前記閾値に従って前記濃淡画像に２値化処理を行い、当
該処理結果から前記特定情報を表すパターンを抽出する
こともできる。
は、前記抽出手段により、前記領域内画像を濃淡画像に
変換して当該濃淡画像に応じた閾値を決定し、決定した
前記閾値に従って前記濃淡画像に２値化処理を行い、当
該処理結果から前記特定情報を表すパターンを抽出する
こともできる。
【００１６】ここで、請求項９に記載の本発明の装置で
は、前記変換して得た前記他のパターンが表す前記特定
情報に対応する情報を出力する出力手段を備えることも
できる。
は、前記変換して得た前記他のパターンが表す前記特定
情報に対応する情報を出力する出力手段を備えることも
できる。
【００１７】ここで、請求項１０に記載の本発明の装置
では、前記情報は画像信号であり、前記出力手段を前記
画像信号を表示出力する表示装置とすることもできる。
では、前記情報は画像信号であり、前記出力手段を前記
画像信号を表示出力する表示装置とすることもできる。
【００１８】
【発明の実施の形態】以下、図面を参照しながら本発明
の実施の形態を詳細に説明する。
の実施の形態を詳細に説明する。
【００１９】図１は本発明を適用した翻訳方法の実施に
使用するシステム構成を示すブロック図である。
使用するシステム構成を示すブロック図である。
【００２０】図１の翻訳システムは、光学ディジタル画
像入力装置としてのディジタルカメラ１と、ディジタル
カメラ１からの画像データに後述の処理を施して翻訳結
果を得る翻訳装置２と、ディジタルカメラ１による撮像
画像や翻訳装置２による翻訳結果等を表示する出力装置
としての表示装置３とに大別される。ディジタルカメラ
１は、スチルカメラであってもムービーカメラであって
も良い。表示装置３は、ＣＲＴ、液晶パネル等を有する
ものであれば良い。翻訳装置２はユーザが領域指定を行
うための領域指定装置５と文字認識・機械翻訳モジュー
ル６から構成され、これらは、一般的なハードウエア構
成のコンピュータシステムを使用することで表現するこ
とができる。
像入力装置としてのディジタルカメラ１と、ディジタル
カメラ１からの画像データに後述の処理を施して翻訳結
果を得る翻訳装置２と、ディジタルカメラ１による撮像
画像や翻訳装置２による翻訳結果等を表示する出力装置
としての表示装置３とに大別される。ディジタルカメラ
１は、スチルカメラであってもムービーカメラであって
も良い。表示装置３は、ＣＲＴ、液晶パネル等を有する
ものであれば良い。翻訳装置２はユーザが領域指定を行
うための領域指定装置５と文字認識・機械翻訳モジュー
ル６から構成され、これらは、一般的なハードウエア構
成のコンピュータシステムを使用することで表現するこ
とができる。
【００２１】これは、図示しないＣＰＵ、ＲＡＭ、ＲＯ
Ｍ、システムバス、外部記憶装置、ビデオカード、表示
装置コントローラ、Ｉ／Ｏインタフェース等を備え、シ
ステムバスに接続される各デバイスをＣＰＵが総括的に
制御し、ＲＯＭまたは外部記憶装置等に記憶された本発
明方法のプログラムを実行することができる。このプロ
グラムは、フロッピィディスク等の装置に着脱自在な他
の記憶媒体によっても提供することができる。翻訳装置
２は、領域指定その他のコマンドを与えるマウス等のポ
インティングデバイスを領域指定装置５として備え、文
字認識・機械翻訳モジュール６の機能は文字パターン抽
出部２１と文字認識部２２と機械翻訳部２３とで表現で
きる。
Ｍ、システムバス、外部記憶装置、ビデオカード、表示
装置コントローラ、Ｉ／Ｏインタフェース等を備え、シ
ステムバスに接続される各デバイスをＣＰＵが総括的に
制御し、ＲＯＭまたは外部記憶装置等に記憶された本発
明方法のプログラムを実行することができる。このプロ
グラムは、フロッピィディスク等の装置に着脱自在な他
の記憶媒体によっても提供することができる。翻訳装置
２は、領域指定その他のコマンドを与えるマウス等のポ
インティングデバイスを領域指定装置５として備え、文
字認識・機械翻訳モジュール６の機能は文字パターン抽
出部２１と文字認識部２２と機械翻訳部２３とで表現で
きる。
【００２２】以下、図２のフローチャートに従って説明
する。
する。
【００２３】ディジタルカメラ１で撮像した画像シーン
Ｓは、画像データとして翻訳装置２に取り込まれ（ステ
ップＳ１）、表示装置３に表示される。ここでは、たと
えば屋内において漢字で「消火栓」と表記された掲示を
画像シーンＳとして撮像したとする。表示装置３の図３
に示す表示画面３１に表示されたウインドウ３２には、
取り込んだ画像を表示する表示部３３が設けられてお
り、この表示部３３に撮像画像がイメージとして表示さ
れる（ステップＳ２）。
Ｓは、画像データとして翻訳装置２に取り込まれ（ステ
ップＳ１）、表示装置３に表示される。ここでは、たと
えば屋内において漢字で「消火栓」と表記された掲示を
画像シーンＳとして撮像したとする。表示装置３の図３
に示す表示画面３１に表示されたウインドウ３２には、
取り込んだ画像を表示する表示部３３が設けられてお
り、この表示部３３に撮像画像がイメージとして表示さ
れる（ステップＳ２）。
【００２４】次に、表示部３３に表示されたイメージに
おいて、文字が水平か垂直に記述されていることが多い
という特徴を利用して、翻訳を希望する文字（またはパ
ターン）を含む矩形領域３４をマウスを用いて使用者が
任意に指定（ステップＳ３）する。所望の領域を指定し
てボタン３５をクリックすると、文字パターン抽出部２
１により矩形領域３４内の画像について例えば大津の手
法（大津：判別および最小２垂規準に基づく自動しきい
値設定法、電子情報通信学会論文誌、Ｖｏｌ．Ｊ６３−
Ｄ，Ｎｏ．４，（１９８０））を用いて文字パターンの
抽出が行われる（ステップＳ４）。
おいて、文字が水平か垂直に記述されていることが多い
という特徴を利用して、翻訳を希望する文字（またはパ
ターン）を含む矩形領域３４をマウスを用いて使用者が
任意に指定（ステップＳ３）する。所望の領域を指定し
てボタン３５をクリックすると、文字パターン抽出部２
１により矩形領域３４内の画像について例えば大津の手
法（大津：判別および最小２垂規準に基づく自動しきい
値設定法、電子情報通信学会論文誌、Ｖｏｌ．Ｊ６３−
Ｄ，Ｎｏ．４，（１９８０））を用いて文字パターンの
抽出が行われる（ステップＳ４）。
【００２５】具体的には、まず、指定された矩形領域の
カラー画像を濃淡画像に変換し、この濃淡画像を対象に
２値化処理のための閾値を決定する。決定した閾値に対
して２値化処理を行い、この結果から文字パターンを抽
出する。このように、文字パターンとその背景領域はそ
れぞれ単一色であることが多いという特徴を利用すれ
ば、文字パターンとその背景領域のコントラストが不十
分の場合や文字パターン以外の雑音が文字領域に含まれ
る場合にも適応できる。
カラー画像を濃淡画像に変換し、この濃淡画像を対象に
２値化処理のための閾値を決定する。決定した閾値に対
して２値化処理を行い、この結果から文字パターンを抽
出する。このように、文字パターンとその背景領域はそ
れぞれ単一色であることが多いという特徴を利用すれ
ば、文字パターンとその背景領域のコントラストが不十
分の場合や文字パターン以外の雑音が文字領域に含まれ
る場合にも適応できる。
【００２６】抽出された文字パターンは図１の文字認識
部２２に送られ、そのままＯＣＲアプリケーションを用
いて文字認識する（ステップＳ５）。ここでは、例えば
（株）リコー社製のＯＣＲライブラリＩＭＡＺＯＮＥ
（リコーＩＭＡＺ０ＮＥ（Ｖ２．０）インストールマニ
ュアル、（株）リコー（１９９５））を用いることがで
きる。ＯＣＲでは、抽出された文字パターンに対して、
テキストを構成する文字がゴシックかそれに類したもの
が多いこと、およびテキストが水平か垂直に記述されて
いるものが多いことの特徴を用いれば文字認識を即時に
行うことができる。また、認識対象のテキストは単語ま
たは典型的なパターンを持った単純な構造の文が多いた
め、これらの点を考慮して精度の高い認識を行うことが
できる。
部２２に送られ、そのままＯＣＲアプリケーションを用
いて文字認識する（ステップＳ５）。ここでは、例えば
（株）リコー社製のＯＣＲライブラリＩＭＡＺＯＮＥ
（リコーＩＭＡＺ０ＮＥ（Ｖ２．０）インストールマニ
ュアル、（株）リコー（１９９５））を用いることがで
きる。ＯＣＲでは、抽出された文字パターンに対して、
テキストを構成する文字がゴシックかそれに類したもの
が多いこと、およびテキストが水平か垂直に記述されて
いるものが多いことの特徴を用いれば文字認識を即時に
行うことができる。また、認識対象のテキストは単語ま
たは典型的なパターンを持った単純な構造の文が多いた
め、これらの点を考慮して精度の高い認識を行うことが
できる。
【００２７】文字認識により得られた日本語のテキスト
が認識文字表示ボックス３６に表示される（ステップＳ
６）。このテキストデータは図１の機械翻訳部２３に送
られ、ボタン３７をクリックするとＯＣＲの文字認識結
果をそのまま機械翻訳し（ステップＳ７）、認識文字表
示ボックス３６に表示された日本語「消火栓」に対応し
た英語の翻訳結果「Ｆｉｒｅ−Ｐｌｕｇ」が得られる。
が認識文字表示ボックス３６に表示される（ステップＳ
６）。このテキストデータは図１の機械翻訳部２３に送
られ、ボタン３７をクリックするとＯＣＲの文字認識結
果をそのまま機械翻訳し（ステップＳ７）、認識文字表
示ボックス３６に表示された日本語「消火栓」に対応し
た英語の翻訳結果「Ｆｉｒｅ−Ｐｌｕｇ」が得られる。
【００２８】ここでは、例えば富士通（株）のＡＴＬＡ
Ｓ（ＡＴＬＡＳ翻訳クライアント・サーバ使用手引書、
富士通株式会社、（１９９１））を用いることができ
る。この翻訳結果は表示装置３に画像データとして出力
され、翻訳結果表示ボックス３８に表示されて（ステッ
プＳ８）使用者に別の言語で知らされる。
Ｓ（ＡＴＬＡＳ翻訳クライアント・サーバ使用手引書、
富士通株式会社、（１９９１））を用いることができ
る。この翻訳結果は表示装置３に画像データとして出力
され、翻訳結果表示ボックス３８に表示されて（ステッ
プＳ８）使用者に別の言語で知らされる。
【００２９】なお、認識するパターンは特定の情報を表
すものであれば文字、すなわち言語表記に限らない。こ
の場合、ステップＳ７の翻訳に代えて、撮像したパター
ンが表す特定情報と対応する情報を表す他のパターンへ
の変換を行えば良い。
すものであれば文字、すなわち言語表記に限らない。こ
の場合、ステップＳ７の翻訳に代えて、撮像したパター
ンが表す特定情報と対応する情報を表す他のパターンへ
の変換を行えば良い。
【００３０】このように本実施の形態によれば、撮像し
た屋内、屋外のシーンに含まれているテキスト情報をデ
ィジタルカメラのような光学入力装置を介して入力し、
そのテキストを構成する言語のわからない人間にもその
表す情報を自分がわかる言語に即時翻訳してその結果を
提供することができるという、従来の技術では得られな
かった全く新規な効果が得られる。電子辞書等も使用さ
れてはいたが、特に翻訳対象が日本語の漢字のようにデ
ータの手入力が難しい場合は操作が煩雑で時間がかかる
ために、例えば日本語がわからない米国人等が英語の翻
訳結果を得る場合に有効である。
た屋内、屋外のシーンに含まれているテキスト情報をデ
ィジタルカメラのような光学入力装置を介して入力し、
そのテキストを構成する言語のわからない人間にもその
表す情報を自分がわかる言語に即時翻訳してその結果を
提供することができるという、従来の技術では得られな
かった全く新規な効果が得られる。電子辞書等も使用さ
れてはいたが、特に翻訳対象が日本語の漢字のようにデ
ータの手入力が難しい場合は操作が煩雑で時間がかかる
ために、例えば日本語がわからない米国人等が英語の翻
訳結果を得る場合に有効である。
【００３１】特に、屋外および屋内に設置されている案
内板のテキストにはさまざまな情報が含まれており、そ
れらのテキストの中には命令、注意、説明、名称など重
要な情報を表すものも多いので、海外旅行者や外国人の
ように現地の言語を熟知していない使用者に非常に有用
である。
内板のテキストにはさまざまな情報が含まれており、そ
れらのテキストの中には命令、注意、説明、名称など重
要な情報を表すものも多いので、海外旅行者や外国人の
ように現地の言語を熟知していない使用者に非常に有用
である。
【００３２】なお、入力画像は撮像して得た画像に限る
ものではなく、良く知られているテレビジョン画像等の
画像通信により入力した画像や、これらを記録装置で記
録しておいたものの再生画像であっても良い。
ものではなく、良く知られているテレビジョン画像等の
画像通信により入力した画像や、これらを記録装置で記
録しておいたものの再生画像であっても良い。
【００３３】
【発明の効果】以上説明してきたように、本発明によれ
ば、入力画像に含まれる特定情報を表すパターンを抽出
し、抽出したパターンをパターン認識し、認識したパタ
ーンが表す前記特定情報に対応する他のパターンに変換
するようにしたので、入力画像中のパターンが表す特定
情報を直接にはわからなくとも、変換された他のパター
ンがわかっていればこの特定情報を理解することができ
る。したがって、ある言語の文字を入力画像とすれば、
これに対応する他の言語の文字に変換することで、この
変換された言語がわかっていれば、入力された文字の言
語がわからなくとも入力文字が表す意味を容易に理解す
ることができる効果がある。
ば、入力画像に含まれる特定情報を表すパターンを抽出
し、抽出したパターンをパターン認識し、認識したパタ
ーンが表す前記特定情報に対応する他のパターンに変換
するようにしたので、入力画像中のパターンが表す特定
情報を直接にはわからなくとも、変換された他のパター
ンがわかっていればこの特定情報を理解することができ
る。したがって、ある言語の文字を入力画像とすれば、
これに対応する他の言語の文字に変換することで、この
変換された言語がわかっていれば、入力された文字の言
語がわからなくとも入力文字が表す意味を容易に理解す
ることができる効果がある。
【図１】本発明を適用した翻訳方法の実施に使用するシ
ステム構成を示すブロック図である。
ステム構成を示すブロック図である。
【図２】本発明を適用した翻訳方法のフローチャートで
ある。
ある。
【図３】表示画面の一例を示す図である。
１ ディジタルカメラ ２ 翻訳装置 ３ 表示装置 ５ 領域指定装置 ６ 文字認識・機械翻訳モジュール ２１ 文字パターン抽出部 ２２ 文字認識部 ２３ 機械翻訳部 ３３ 表示部 ３４ 矩形領域
Claims (10)
- 【請求項１】 入力画像に含まれる特定情報を表すパタ
ーンを抽出し、前記抽出したパターンをその特定情報に
対応する他のパターンに変換する翻訳方法であって、 前記入力画像中の前記特定情報を表すパターンを抽出す
るパターン抽出ステップと、 前記抽出したパターンをパターン認識する認識ステップ
と、 前記認識したパターンが表す前記特定情報に対応する他
のパターンに変換する変換ステップとを備えることを特
徴とする翻訳方法。 - 【請求項２】 前記パターン抽出ステップは、 前記入力画像を表示する表示ステップと、 前記表示ステップにおいて表示した画像中で前記特定情
報を表すパターンを含む領域を指定する領域指定ステッ
プと、 前記指定した領域内画像について、前記特定情報を表す
パターンを抽出する抽出ステップとを含むことを特徴と
する請求項１に記載の翻訳方法。 - 【請求項３】 前記抽出ステップにおいて、前記領域内
画像を濃淡画像に変換して当該濃淡画像に応じた閾値を
決定し、決定した前記閾値に従って前記濃淡画像に２値
化処理を行い、当該処理結果から前記特定情報を表すパ
ターンを抽出することを特徴とする請求項２に記載の翻
訳方法。 - 【請求項４】 前記変換して得た前記他のパターンが表
す前記特定情報に対応する情報を出力する出力ステップ
を備えることを特徴とする請求項１ないし３のいずれか
に記載の翻訳方法。 - 【請求項５】 前記情報は画像信号であり、前記出力ス
テップにおいて前記画像信号を表示出力することを特徴
とする請求項４に記載の翻訳方法。 - 【請求項６】 入力画像に含まれる特定情報を表すパタ
ーンを抽出し、前記抽出したパターンをその特定情報に
対応する他のパターンに変換する翻訳装置であって、 前記入力画像中の前記特定情報を表すパターンを抽出す
るパターン抽出手段と、 前記抽出したパターンをパターン認識する認識手段と、 前記認識したパターンが表す前記特定情報に対応する他
のパターンに変換する変換手段とを備えることを特徴と
する翻訳装置。 - 【請求項７】 前記パターン抽出手段は、 前記入力画像を表示する表示手段と、 前記表示手段により表示した画像中で前記特定情報を表
すパターンを含む領域を指定する領域指定手段と、 前記指定した領域内画像について、前記特定情報を表す
パターンを抽出する抽出手段とを含むことを特徴とする
請求項６に記載の翻訳装置。 - 【請求項８】 前記抽出手段により、前記領域内画像を
濃淡画像に変換して当該濃淡画像に応じた閾値を決定
し、決定した前記閾値に従って前記濃淡画像に２値化処
理を行い、当該処理結果から前記特定情報を表すパター
ンを抽出することを特徴とする請求項７に記載の翻訳装
置。 - 【請求項９】 前記変換して得た前記他のパターンが表
す前記特定情報に対応する情報を出力する出力手段を備
えることを特徴とする請求項６ないし８のいずれかに記
載の翻訳装置。 - 【請求項１０】 前記情報は画像信号であり、前記出力
手段を前記画像信号を表示出力する表示装置とすること
を特徴とする請求項９に記載の翻訳装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9120757A JPH10312381A (ja) | 1997-05-12 | 1997-05-12 | 翻訳方法および装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9120757A JPH10312381A (ja) | 1997-05-12 | 1997-05-12 | 翻訳方法および装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH10312381A true JPH10312381A (ja) | 1998-11-24 |
Family
ID=14794246
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9120757A Pending JPH10312381A (ja) | 1997-05-12 | 1997-05-12 | 翻訳方法および装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH10312381A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2003050714A1 (fr) * | 2001-12-10 | 2003-06-19 | Mitsubishi Denki Kabushiki Kaisha | Systeme de traitement d'image de terminal cellulaire, terminal cellulaire et serveur |
| JP2007018166A (ja) * | 2005-07-06 | 2007-01-25 | Nec Corp | 情報検索装置、情報検索システム、情報検索方法及び情報検索プログラム |
| JP2012234287A (ja) * | 2011-04-28 | 2012-11-29 | Rakuten Inc | サーバ装置、サーバ装置の制御方法、プログラム、及び、記録媒体 |
| WO2016152962A1 (ja) * | 2015-03-25 | 2016-09-29 | 株式会社リクルートホールディングス | コンピュータプログラム、情報検索システム、及びその制御方法 |
| WO2024018553A1 (ja) * | 2022-07-20 | 2024-01-25 | 合同会社Ada | 被翻訳データ作成装置、被翻訳データ作成方法、及び被翻訳データ作成プログラム |
-
1997
- 1997-05-12 JP JP9120757A patent/JPH10312381A/ja active Pending
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2003050714A1 (fr) * | 2001-12-10 | 2003-06-19 | Mitsubishi Denki Kabushiki Kaisha | Systeme de traitement d'image de terminal cellulaire, terminal cellulaire et serveur |
| JP2007018166A (ja) * | 2005-07-06 | 2007-01-25 | Nec Corp | 情報検索装置、情報検索システム、情報検索方法及び情報検索プログラム |
| JP2012234287A (ja) * | 2011-04-28 | 2012-11-29 | Rakuten Inc | サーバ装置、サーバ装置の制御方法、プログラム、及び、記録媒体 |
| US9396392B2 (en) | 2011-04-28 | 2016-07-19 | Rakuten, Inc. | Server, server control method, program and recording medium |
| WO2016152962A1 (ja) * | 2015-03-25 | 2016-09-29 | 株式会社リクルートホールディングス | コンピュータプログラム、情報検索システム、及びその制御方法 |
| JP2016181198A (ja) * | 2015-03-25 | 2016-10-13 | 株式会社リクルートホールディングス | コンピュータプログラム、情報検索システム、及びその制御方法 |
| WO2024018553A1 (ja) * | 2022-07-20 | 2024-01-25 | 合同会社Ada | 被翻訳データ作成装置、被翻訳データ作成方法、及び被翻訳データ作成プログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0774729B1 (en) | Character recognizing and translating system | |
| JP5274305B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
| JP2002279433A (ja) | 映像中の文字検索方法及び装置 | |
| CN108549643B (zh) | 翻译处理方法和装置 | |
| US20050221856A1 (en) | Cellular terminal image processing system, cellular terminal, and server | |
| KR102148021B1 (ko) | 딥러닝 텍스트 탐지 기술을 활용한 실생활 영상 속의 정보 검색 방법 및 그 장치 | |
| CN112733857B (zh) | 自动分割字符区域的图像文字检测模型训练方法及装置 | |
| CN101981568A (zh) | 扫描方法 | |
| Singla et al. | Optical character recognition based speech synthesis system using LabVIEW | |
| KR20210045298A (ko) | 딥러닝 텍스트 탐지 기술을 활용한 실생활 영상 속의 정보 검색 방법 | |
| JPH09138802A (ja) | 文字認識翻訳システム | |
| Javaid et al. | UAlpha40: A comprehensive dataset of Urdu alphabet for Pakistan sign language | |
| JP2002015280A (ja) | 画像認識装置、画像認識方法および画像認識プログラムを記録したコンピュータ読取可能な記録媒体 | |
| KR100243350B1 (ko) | 뉴스 비디오 자막 추출 및 인식 방법 | |
| JPH10162098A (ja) | 文書電子化装置及び文書電子化方法 | |
| JP3537753B2 (ja) | 編集処理装置、及び編集処理プログラムが記憶された記憶媒体 | |
| JPH08180068A (ja) | 電子ファイリング装置 | |
| US20060204095A1 (en) | Document layout analysis with control of non-character area | |
| JPH05303619A (ja) | 電子スクラップブック | |
| KR101911613B1 (ko) | 뉴스 인터뷰 영상의 오버레이 텍스트 기반 인물 인덱싱 방법 및 장치 | |
| Velmurugan et al. | A Next-Gen Automated Reading Companion for the Visually Impaired | |
| CN114241175A (zh) | 文本翻译方法、装置、扫描笔和存储介质 | |
| Govekar et al. | A Smart Reader for Blind People | |
| Goudar et al. | A effective communication solution for the hearing impaired persons: A novel approach using gesture and sentence formation | |
| Revathy et al. | Android live text recognition and translation application using tesseract |