JPH0756587A - カラオケシステムにおける歌の点数採点装置 - Google Patents
カラオケシステムにおける歌の点数採点装置Info
- Publication number
- JPH0756587A JPH0756587A JP6149643A JP14964394A JPH0756587A JP H0756587 A JPH0756587 A JP H0756587A JP 6149643 A JP6149643 A JP 6149643A JP 14964394 A JP14964394 A JP 14964394A JP H0756587 A JPH0756587 A JP H0756587A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- signals
- cross
- correlator
- song
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B31/00—Arrangements for the associated working of recording or reproducing apparatus with related apparatus
- G11B31/02—Arrangements for the associated working of recording or reproducing apparatus with related apparatus with automatic musical instruments
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B15/00—Teaching music
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
- G10H2210/091—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for performance evaluation, i.e. judging, grading or scoring the musical qualities or faithfulness of a performance, e.g. with respect to pitch, tempo or other timings of a reference performance
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2250/00—Aspects of algorithms or signal processing methods without intrinsic musical character, yet specifically adapted for or used in electrophonic musical processing
- G10H2250/131—Mathematical functions for musical analysis, processing, synthesis or composition
- G10H2250/135—Autocorrelation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- General Physics & Mathematics (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Signal Processing Not Specific To The Method Of Recording And Reproducing (AREA)
Abstract
(57)【要約】
【目的】 カラオケシステムにおいて相互相関器を使用
して使用者の歌の点数を拍子や音程等を考慮して正確に
採点するカラオケシステムにおける歌の点数採点装置を
提供する。 【構成】 カラオケシステムに採用された相互相関器に
カラオケシステムの伴奏信号と使用者の歌の信号とが入
力されると、この二つの信号間の類似性の程度を決定
し、この類似性の程度に基づいて使用者の歌の実力を採
点する。
して使用者の歌の点数を拍子や音程等を考慮して正確に
採点するカラオケシステムにおける歌の点数採点装置を
提供する。 【構成】 カラオケシステムに採用された相互相関器に
カラオケシステムの伴奏信号と使用者の歌の信号とが入
力されると、この二つの信号間の類似性の程度を決定
し、この類似性の程度に基づいて使用者の歌の実力を採
点する。
Description
【０００１】
【産業上の利用分野】本発明は、カラオケシステムに関
し、特に使用者がカラオケシステムの伴奏に合わせて歌
った歌の点数算定を相互相関器を利用して正確に採点す
るようにしたカラオケシステムの採点装置に関するもの
である。
し、特に使用者がカラオケシステムの伴奏に合わせて歌
った歌の点数算定を相互相関器を利用して正確に採点す
るようにしたカラオケシステムの採点装置に関するもの
である。
【０００２】
【従来の技術】従来、カラオケシステムにおける使用者
の歌の点数に対する採点は不正確に行われていた。例え
ば、使用者の歌が終わった後の他人の拍手の音の大小に
よって歌の点数をつけたり、あるいは、歌の実力とは関
係なく乱数を発生して点数をつけたりしていた。従っ
て、このような採点方法は本質的に歌の実力とは関係な
いので歌の点数に対する信頼度の低下という問題点があ
った。
の歌の点数に対する採点は不正確に行われていた。例え
ば、使用者の歌が終わった後の他人の拍手の音の大小に
よって歌の点数をつけたり、あるいは、歌の実力とは関
係なく乱数を発生して点数をつけたりしていた。従っ
て、このような採点方法は本質的に歌の実力とは関係な
いので歌の点数に対する信頼度の低下という問題点があ
った。
【０００３】
【発明が解決しようとする課題】このような問題を解決
するために、本発明の目的は、使用者の歌声とカラオケ
システムの伴奏信号を相互相関器を利用して使用者の歌
の点数を採点するようにしたカラオケシステムの採点装
置を提供することにある。
するために、本発明の目的は、使用者の歌声とカラオケ
システムの伴奏信号を相互相関器を利用して使用者の歌
の点数を採点するようにしたカラオケシステムの採点装
置を提供することにある。
【０００４】
【課題を解決するための手段】上記目的を達成するため
の本発明のカラオケシステムは、カラオケ伴奏信号源か
ら第１アナログ伴奏信号をデジタル化する第１Ａ／Ｄ変
換器と、上記Ａ／Ｄ変換器のデジタル伴奏信号の内第１
バンド信号のみを通過させる第１デジタルフィルター
と、マイク信号源からの第２アナログ信号を増幅する増
幅器と、増幅された第２アナログ信号を第２デジタル信
号に変換する第２Ａ／Ｄ変換器と、上記第２デジタル信
号の内第２帯域信号を通過させる第２デジタルフィルタ
ーと、上記第１及び第２デジタルフィルターからの第１
及び第２帯域信号とが入力されて相互相関演算（ｃｒｏ
ｓｓ−ｃｏｒｒｅｌａｔｉｏｎ演算）を行う相互相関器
（ｃｒｏｓｓ−ｃｏｒｒｅｌａｔｏｒ）と、上記相互相
関器からの信号が入力され、この信号の平均値を算出す
る第１平均算出部と、上記第１及び第２デジタルフィル
ターの第１及び第２帯域信号の各々に対して自動相関演
算を行う第１及び第２自動相関器（ａｕｔｏーｃｏｒｒ
ｅｌａｔｏｒ）と、上記第１自動相関器からの信号と第
２平均算出部を経る第２自動相関器の信号とを正規化し
て歌の点数表示器に出力するノーマライザーとを備えて
いる。
の本発明のカラオケシステムは、カラオケ伴奏信号源か
ら第１アナログ伴奏信号をデジタル化する第１Ａ／Ｄ変
換器と、上記Ａ／Ｄ変換器のデジタル伴奏信号の内第１
バンド信号のみを通過させる第１デジタルフィルター
と、マイク信号源からの第２アナログ信号を増幅する増
幅器と、増幅された第２アナログ信号を第２デジタル信
号に変換する第２Ａ／Ｄ変換器と、上記第２デジタル信
号の内第２帯域信号を通過させる第２デジタルフィルタ
ーと、上記第１及び第２デジタルフィルターからの第１
及び第２帯域信号とが入力されて相互相関演算（ｃｒｏ
ｓｓ−ｃｏｒｒｅｌａｔｉｏｎ演算）を行う相互相関器
（ｃｒｏｓｓ−ｃｏｒｒｅｌａｔｏｒ）と、上記相互相
関器からの信号が入力され、この信号の平均値を算出す
る第１平均算出部と、上記第１及び第２デジタルフィル
ターの第１及び第２帯域信号の各々に対して自動相関演
算を行う第１及び第２自動相関器（ａｕｔｏーｃｏｒｒ
ｅｌａｔｏｒ）と、上記第１自動相関器からの信号と第
２平均算出部を経る第２自動相関器の信号とを正規化し
て歌の点数表示器に出力するノーマライザーとを備えて
いる。
【０００５】本発明のカラオケシステムにおける採点装
置は、使用者の歌の実力を信頼度高く採点することが出
来るとの特長がある。
置は、使用者の歌の実力を信頼度高く採点することが出
来るとの特長がある。
【０００６】
【実施例】図１は本発明の１実施例のカラオケシステム
における採点装置のブロック図である。以下、本発明の
カラオケシステムにおける採点装置を第１図に基づいて
詳細に説明する。カラオケシステムはシステム制御器７
５のキー入力によって作動する。使用者はシステム制御
器を介して歌の曲名を自分で選ぶことが出来る。使用者
が歌の曲名を入力すると、カラオケシステム信号源５か
らは使用者が選択したアナログ形態の伴奏信号が出力さ
れ、この伴奏信号は第１Ａ／Ｄ変換機７に行ってデジタ
ル信号に変換された後第１デジタルフィルター８に印加
されるようになる。
における採点装置のブロック図である。以下、本発明の
カラオケシステムにおける採点装置を第１図に基づいて
詳細に説明する。カラオケシステムはシステム制御器７
５のキー入力によって作動する。使用者はシステム制御
器を介して歌の曲名を自分で選ぶことが出来る。使用者
が歌の曲名を入力すると、カラオケシステム信号源５か
らは使用者が選択したアナログ形態の伴奏信号が出力さ
れ、この伴奏信号は第１Ａ／Ｄ変換機７に行ってデジタ
ル信号に変換された後第１デジタルフィルター８に印加
されるようになる。
【０００７】カラオケシステム信号源５からの伴奏信号
には楽器信号や歌手の音声信号または、楽器信号と音声
信号との混合信号を包含させることが出来る。第１デジ
タルフィルター８では印可された伴奏信号の内、楽器伴
奏信号と音声信号がある場合には可能な限り音声信号の
みを通過させ、歌手の音声信号無しに楽器伴奏信号のみ
の場合は可能な限り音声に近いリズム楽器の伴奏信号の
みを通過させ第１自動相関器９と相互相関器３０に印加
する。
には楽器信号や歌手の音声信号または、楽器信号と音声
信号との混合信号を包含させることが出来る。第１デジ
タルフィルター８では印可された伴奏信号の内、楽器伴
奏信号と音声信号がある場合には可能な限り音声信号の
みを通過させ、歌手の音声信号無しに楽器伴奏信号のみ
の場合は可能な限り音声に近いリズム楽器の伴奏信号の
みを通過させ第１自動相関器９と相互相関器３０に印加
する。
【０００８】デジタルフィルター８はバンドパス形であ
り、数１２０ＨＺ乃至数ＫＨＺの信号帯域を通過させ
る。この第１デジタルフィルターは歌手の歌う音域によ
って通過させる信号帯域幅を可変させるのも望ましい。
り、数１２０ＨＺ乃至数ＫＨＺの信号帯域を通過させ
る。この第１デジタルフィルターは歌手の歌う音域によ
って通過させる信号帯域幅を可変させるのも望ましい。
【０００９】一方、マイク信号源５５からはカラオケシ
ステムの伴奏に合わせて使用者の音源が受信され増幅器
６０に印加され増幅されて第２Ａ／Ｄ変換器６５に印加
される。第２Ａ／Ｄ変換器６５では増幅されたアナログ
音源信号をデジタル音源信号に変換して第２デジタルフ
ィルター５０に印加し、第２デジタルフィルター５０で
は雑音や歌の点数に大きな影響を与えない不必要な高域
及び低域の雑音を除去した音源信号だけを第２自動相関
器４５と相互相関器３０に各々印加するようになる。第
２デジタルフィルターは第１デジタルフィルター８とそ
の特性が類似する。
ステムの伴奏に合わせて使用者の音源が受信され増幅器
６０に印加され増幅されて第２Ａ／Ｄ変換器６５に印加
される。第２Ａ／Ｄ変換器６５では増幅されたアナログ
音源信号をデジタル音源信号に変換して第２デジタルフ
ィルター５０に印加し、第２デジタルフィルター５０で
は雑音や歌の点数に大きな影響を与えない不必要な高域
及び低域の雑音を除去した音源信号だけを第２自動相関
器４５と相互相関器３０に各々印加するようになる。第
２デジタルフィルターは第１デジタルフィルター８とそ
の特性が類似する。
【００１０】第１デジタルフィルター８からの伴奏信号
は第１自動相関器９に印加され、第１自動相関器９では
伴奏信号を自動相関演算を行ってその演算値をノーマラ
イザー４０に印加し、一方、第２デジタルフィルター５
０からの音源信号が印加された自動相関器４５でも印加
された音源信号に対して自動相関演算を行ってその演算
値を第２平均算出部３６に出力する。第１、第２及び第
３平均算出部３５、３６、３７では相互相関器３０と第
２自動相関器９、４５からの出力信号を受けて平均値を
生成した後ノーマライザー４０に送り、ノーマライザー
４０はこの信号等を正規化した後点数表示器に送り使用
者の歌の点数を表示する。
は第１自動相関器９に印加され、第１自動相関器９では
伴奏信号を自動相関演算を行ってその演算値をノーマラ
イザー４０に印加し、一方、第２デジタルフィルター５
０からの音源信号が印加された自動相関器４５でも印加
された音源信号に対して自動相関演算を行ってその演算
値を第２平均算出部３６に出力する。第１、第２及び第
３平均算出部３５、３６、３７では相互相関器３０と第
２自動相関器９、４５からの出力信号を受けて平均値を
生成した後ノーマライザー４０に送り、ノーマライザー
４０はこの信号等を正規化した後点数表示器に送り使用
者の歌の点数を表示する。
【００１２】ここで、第１及び第２自動相関器９、４５
での自動相関演算は、出力をＲ（γ）、入力をＸ（ｔ）
にしておくと、入力信号がｗｉｄｅ−ｓｅｎｓｅ ｓｔ
ａｔｉｏｎａｒｙの場合Ｒ（γ）＝Ｅ［Ｘ（ｔ）Ｘ（ｔ
＋γ）］で表示される。この際、ＥはＥｘｐｅｃｔａｔ
ｉｏｎ ｏｐｅｒａｔｏｒである。そして、デジタルフ
ィルター８、５０から伴奏信号と音源信号が印加される
相互相関器３０では印加された伴奏信号と音源信号を相
関演算し演算データとして第１平均算出部３５に印加さ
せると第１平均算出部３５で印加された演算データの平
均値を算出してノーマライザー４０に印加するようにな
る。このように自動相関器９、４５と相互相関器３０か
ら伴奏信号及び音源信号の演算データが印加されたノー
マライザー４０では印加された各演算データに基づいて
最初マイク信号源５５を介して受信された音源の点数を
算定するようになる。この動作の一例としては、相互相
関器３０から平均算出部３５を経て受けたデータを、自
動相関器４５から平均算出部３６を経て受けたデータで
割る方法等が挙げられる。このような過程によって算定
された点数は最終的に点数表示器７０に表示され歌を歌
った歌手に歌の点数を知らせるようになる。
での自動相関演算は、出力をＲ（γ）、入力をＸ（ｔ）
にしておくと、入力信号がｗｉｄｅ−ｓｅｎｓｅ ｓｔ
ａｔｉｏｎａｒｙの場合Ｒ（γ）＝Ｅ［Ｘ（ｔ）Ｘ（ｔ
＋γ）］で表示される。この際、ＥはＥｘｐｅｃｔａｔ
ｉｏｎ ｏｐｅｒａｔｏｒである。そして、デジタルフ
ィルター８、５０から伴奏信号と音源信号が印加される
相互相関器３０では印加された伴奏信号と音源信号を相
関演算し演算データとして第１平均算出部３５に印加さ
せると第１平均算出部３５で印加された演算データの平
均値を算出してノーマライザー４０に印加するようにな
る。このように自動相関器９、４５と相互相関器３０か
ら伴奏信号及び音源信号の演算データが印加されたノー
マライザー４０では印加された各演算データに基づいて
最初マイク信号源５５を介して受信された音源の点数を
算定するようになる。この動作の一例としては、相互相
関器３０から平均算出部３５を経て受けたデータを、自
動相関器４５から平均算出部３６を経て受けたデータで
割る方法等が挙げられる。このような過程によって算定
された点数は最終的に点数表示器７０に表示され歌を歌
った歌手に歌の点数を知らせるようになる。
【００１３】次は、伴奏信号と音源信号との類似性を比
較する相互相関についてより詳しく説明する。歌の実力
に対する採点は職業歌手が歌う時の歌の信号と使用者が
歌う時の歌の信号との類似性を比較することにある。即
ち、二つの波形が類似するほど歌が上手なことになる。
この相互相関は次のように表示される。与えられた二つ
のコンプレックスプロセス Ｘ（ｔ）及び Ｙ（ｔ）に対
して相互相関Ｒｘｙ（ｔ1、ｔ2）及び自動相関Ｒｘｘ
（ｔ1、ｔ2）は Ｒｘｙ（ｔ1、ｔ2）＝Ｅ［Ｘ（Ｔ1）、Ｙ（ｔ2）］ーーーーーー（１） Ｒｘｘ（ｔ1、ｔ2）＝Ｅ［Ｘ（Ｔ1）、Ｘ（ｔ2）］ーーーーーー（２） この場合ＥはＥｘｐｅｃｔａｔｉｏｎ ｏｐｅｒａｔｏ
ｒである。Ｘ（ｔ）及びＹ（ｔ）がＷｉｄｅーｓｅｎｓ
ｅ ｓｔａｔｉｏｎａｒｙであれば、Ｒｘｙ（ｔ1、
ｔ2）＝Ｒｘｙ（ｔ1ーｔ2）、Ｒｘｘ（ｔ1、ｔ2）＝Ｒ
ｘｘ（ｔ1ーｔ2）であり、普通はｔ1ーｔ2 をγで表現
してＲｘｙ（γ）、Ｒｘｘ（γ）とする。Ｒｘｙ（γ）
の意味はＸ（ｔ）とＹ（ｔ＋γ）の類似性、即ち、Ｘ信
号がγだけ繰り上げられたＹ信号との類似性と関連があ
る。Ｒｘｙ（γ）を利用すれば二つの信号の類似性を検
出し得る。例えば、Ｘ（ｔ）として歌手の歌の信号（即
ち、採点の基準となる信号）が、Ｙ（ｔ）として使用者
の歌の信号が各々与えられているとする場合、二つの信
号が全く同一であればＲｘｙ（０）は非常に大きな値を
有するようになる。
較する相互相関についてより詳しく説明する。歌の実力
に対する採点は職業歌手が歌う時の歌の信号と使用者が
歌う時の歌の信号との類似性を比較することにある。即
ち、二つの波形が類似するほど歌が上手なことになる。
この相互相関は次のように表示される。与えられた二つ
のコンプレックスプロセス Ｘ（ｔ）及び Ｙ（ｔ）に対
して相互相関Ｒｘｙ（ｔ1、ｔ2）及び自動相関Ｒｘｘ
（ｔ1、ｔ2）は Ｒｘｙ（ｔ1、ｔ2）＝Ｅ［Ｘ（Ｔ1）、Ｙ（ｔ2）］ーーーーーー（１） Ｒｘｘ（ｔ1、ｔ2）＝Ｅ［Ｘ（Ｔ1）、Ｘ（ｔ2）］ーーーーーー（２） この場合ＥはＥｘｐｅｃｔａｔｉｏｎ ｏｐｅｒａｔｏ
ｒである。Ｘ（ｔ）及びＹ（ｔ）がＷｉｄｅーｓｅｎｓ
ｅ ｓｔａｔｉｏｎａｒｙであれば、Ｒｘｙ（ｔ1、
ｔ2）＝Ｒｘｙ（ｔ1ーｔ2）、Ｒｘｘ（ｔ1、ｔ2）＝Ｒ
ｘｘ（ｔ1ーｔ2）であり、普通はｔ1ーｔ2 をγで表現
してＲｘｙ（γ）、Ｒｘｘ（γ）とする。Ｒｘｙ（γ）
の意味はＸ（ｔ）とＹ（ｔ＋γ）の類似性、即ち、Ｘ信
号がγだけ繰り上げられたＹ信号との類似性と関連があ
る。Ｒｘｙ（γ）を利用すれば二つの信号の類似性を検
出し得る。例えば、Ｘ（ｔ）として歌手の歌の信号（即
ち、採点の基準となる信号）が、Ｙ（ｔ）として使用者
の歌の信号が各々与えられているとする場合、二つの信
号が全く同一であればＲｘｙ（０）は非常に大きな値を
有するようになる。
【００１４】しかし、実際には二つの信号が同一ではな
いが短い時間の間に二つの信号のデータを収集してＲｘ
ｙ（０）を求めれば、その時刻付近で音程と拍子が類似
であるほど、｜Ｒｘｙ（０）｜はより大きな値を持つ確
率が高い。このように短い時間を単位にして｜Ｒｘｙ
（０）｜を一曲を歌う間に頻繁に求めてこれらの総平均
値を出して採点すれば音程及び拍子をよく考慮した採点
になるのであろう。実際には、カラオケシステムからの
信号は歌手の声のみなれず、いろいろな伴奏楽器の音を
も含んでいる場合が多い。このような場合は歌手の歌声
をＸ（ｔ）、その他を雑音と見なしｎ（ｔ）としておく
とカラオケ信号はＸ（ｔ）＋ｎ（ｔ）になり、この信号
との相互相関は、 Ｒ（ｘ＋ｎ）Ｙ（０）＝Ｒｘｙ（０）＋Ｒｎｙ（０）ーーーーーーー（３） と表現され、一般的な場合はＲｎｙ（０）＝０である。
従って、問題のないことが分かる。実際の場合はＤｉｇ
ｉｔａｌ ｆｉｌｔｅｒ等を介して可能な限りｎ（ｔ）
を抑制するほど有利である。即ち、ベースギターやシン
バル等の、人の音声帯域より低いか、あるいは高い帯域
を持つ信号等は前もってフィルターリングして除去する
ほど計算は容易になり、計算結果に対する信頼性も良く
なる。又、実際の場合カラオケ信号には歌手の声なしに
伴奏楽器の信号のみの場合が多いが、必ず歌手の歌声に
当たる伴奏のメロディーは存在するのでこれをＸ（ｔ）
と思えばいい。
いが短い時間の間に二つの信号のデータを収集してＲｘ
ｙ（０）を求めれば、その時刻付近で音程と拍子が類似
であるほど、｜Ｒｘｙ（０）｜はより大きな値を持つ確
率が高い。このように短い時間を単位にして｜Ｒｘｙ
（０）｜を一曲を歌う間に頻繁に求めてこれらの総平均
値を出して採点すれば音程及び拍子をよく考慮した採点
になるのであろう。実際には、カラオケシステムからの
信号は歌手の声のみなれず、いろいろな伴奏楽器の音を
も含んでいる場合が多い。このような場合は歌手の歌声
をＸ（ｔ）、その他を雑音と見なしｎ（ｔ）としておく
とカラオケ信号はＸ（ｔ）＋ｎ（ｔ）になり、この信号
との相互相関は、 Ｒ（ｘ＋ｎ）Ｙ（０）＝Ｒｘｙ（０）＋Ｒｎｙ（０）ーーーーーーー（３） と表現され、一般的な場合はＲｎｙ（０）＝０である。
従って、問題のないことが分かる。実際の場合はＤｉｇ
ｉｔａｌ ｆｉｌｔｅｒ等を介して可能な限りｎ（ｔ）
を抑制するほど有利である。即ち、ベースギターやシン
バル等の、人の音声帯域より低いか、あるいは高い帯域
を持つ信号等は前もってフィルターリングして除去する
ほど計算は容易になり、計算結果に対する信頼性も良く
なる。又、実際の場合カラオケ信号には歌手の声なしに
伴奏楽器の信号のみの場合が多いが、必ず歌手の歌声に
当たる伴奏のメロディーは存在するのでこれをＸ（ｔ）
と思えばいい。
【００１５】使用者の歌の実力を採点するにおいて考慮
すべき事項のまた一つは、｜Ｒｘｙ（０）｜は歌手の歌
の信号をＸ信号、使用者の歌声の信号をＹ信号とする場
合、Ｘ信号とＹ信号との類似性の外にＸ信号及びＹ信号
の振幅にも比例するという点である。従って、例えば使
用者の歌声が大きいほどＲｘｙ（０）の値は大きくなる
との点である。歌の実力を採点するにおいて、声量も一
つの基準に成り得るのでこのような現象を自然に利用す
ることも出来、逆に声量を採点の基準から除外したい時
はＲｘｙ（０）をＲｙｙ（０）、即ち、声量でノーマラ
イズする必要がある。勿論、Ｒｘｙ（０）は使用者の歌
声の信号Ｘの振幅にも比例し、また歌手の声量は各々の
曲ごとに違うので前もってＲｘｙ（０）を求めた後ノー
マライズする必要がある。また、｜Ｒｘｙ（０）｜ は
Ｘ信号及びＹ信号の位相に影響される。このような現象
からより頻繁にＲｘｙ（０）を求める必要があるが、位
相の影響を少なくする場合はＲｘｙ（０）をそう頻繁に
求めなくてもいいので計算量を減らすことが出来る。こ
のような目的の為に変形した相互相関を考案しこれを／
Ｒｘｙ（γ）とすれば、 ／Ｒｘｙ（γ）＝√Ａ Ａ＝［Ｅ｛Ｘ（ｔ）・Ｙ（ｔ＋γ）｝］2＋［Ｅ｛／Ｘ（ｔ）・Ｙ （ｔ＋γ）｝］2 ーーーーー（４） で表示される。この際、／Ｘ（ｔ）はＸ（ｔ）のＨｉｌ
ｂｅｒｔ ｔｒａｎｓｆｏｒｍ ｐａｉｒである。Ｈｉ
ｌｂｅｒｔ ｔｒａｎｓｆｏｒｍはＴｉｍｅ Ｄｏｍａ
ｉｎでは計算が煩わしいが、Ｆｒｉｑｕｅｎｃｙ Ｄｏ
ｍａｉｎでは計算が簡単であり、又、Ｒｘｙ（γ）はＦ
ｒｉｑｕｅｎｃｙ Ｄｏｍａｉｎで計算し易い場合が多
いので計算量にはあまり変化を与えないようになる。
すべき事項のまた一つは、｜Ｒｘｙ（０）｜は歌手の歌
の信号をＸ信号、使用者の歌声の信号をＹ信号とする場
合、Ｘ信号とＹ信号との類似性の外にＸ信号及びＹ信号
の振幅にも比例するという点である。従って、例えば使
用者の歌声が大きいほどＲｘｙ（０）の値は大きくなる
との点である。歌の実力を採点するにおいて、声量も一
つの基準に成り得るのでこのような現象を自然に利用す
ることも出来、逆に声量を採点の基準から除外したい時
はＲｘｙ（０）をＲｙｙ（０）、即ち、声量でノーマラ
イズする必要がある。勿論、Ｒｘｙ（０）は使用者の歌
声の信号Ｘの振幅にも比例し、また歌手の声量は各々の
曲ごとに違うので前もってＲｘｙ（０）を求めた後ノー
マライズする必要がある。また、｜Ｒｘｙ（０）｜ は
Ｘ信号及びＹ信号の位相に影響される。このような現象
からより頻繁にＲｘｙ（０）を求める必要があるが、位
相の影響を少なくする場合はＲｘｙ（０）をそう頻繁に
求めなくてもいいので計算量を減らすことが出来る。こ
のような目的の為に変形した相互相関を考案しこれを／
Ｒｘｙ（γ）とすれば、 ／Ｒｘｙ（γ）＝√Ａ Ａ＝［Ｅ｛Ｘ（ｔ）・Ｙ（ｔ＋γ）｝］2＋［Ｅ｛／Ｘ（ｔ）・Ｙ （ｔ＋γ）｝］2 ーーーーー（４） で表示される。この際、／Ｘ（ｔ）はＸ（ｔ）のＨｉｌ
ｂｅｒｔ ｔｒａｎｓｆｏｒｍ ｐａｉｒである。Ｈｉ
ｌｂｅｒｔ ｔｒａｎｓｆｏｒｍはＴｉｍｅ Ｄｏｍａ
ｉｎでは計算が煩わしいが、Ｆｒｉｑｕｅｎｃｙ Ｄｏ
ｍａｉｎでは計算が簡単であり、又、Ｒｘｙ（γ）はＦ
ｒｉｑｕｅｎｃｙ Ｄｏｍａｉｎで計算し易い場合が多
いので計算量にはあまり変化を与えないようになる。
【００１６】以上、本発明の一実施例に基づいて説明し
たが、本発明は上述実施例に限定されず、本発明の要旨
を逸脱しない範囲で種々変更することが出来る。即ち、
上記実施例ではカラオケシステムにおいての需要者の音
源の点数を算定する場合を例に挙げて説明したが、外国
語を学ぶための語学練習機において教授の音声を真似し
て発音しなければならない場合に適用すればより大きな
効果を収めることが出来る。
たが、本発明は上述実施例に限定されず、本発明の要旨
を逸脱しない範囲で種々変更することが出来る。即ち、
上記実施例ではカラオケシステムにおいての需要者の音
源の点数を算定する場合を例に挙げて説明したが、外国
語を学ぶための語学練習機において教授の音声を真似し
て発音しなければならない場合に適用すればより大きな
効果を収めることが出来る。
【００１７】
【発明の効果】上述のように本発明は伴奏信号と音源信
号との類似性を比較する相互相関器を利用して音源の点
数を算定することでより正確な歌の実力を算定すること
が出来る効果がある。
号との類似性を比較する相互相関器を利用して音源の点
数を算定することでより正確な歌の実力を算定すること
が出来る効果がある。
【図１】本発明の一実施例にかかるカラオケシステムに
おける歌の点数採点装置のブロック図である。
おける歌の点数採点装置のブロック図である。
５ カラオケシステム信号源 ７ Ａ／Ｄ変換器 ８、５０ デジタルフィルター ９、４５ 自動相関器 ３０ 相互相関器 ３５、３６、３７ 平均算出部 ４０ ノーマライザー ５５ マイク信号源 ６０ 増幅器 ７０ 点数表示器 ７５ システム制御器
Claims (2)
- 【請求項１】 カラオケシステムにおける歌の点数採点
装置において、 カラオケシステムはカラオケ伴奏信号源から第１アナロ
グ伴奏信号をデジタル化する第１Ａ／Ｄ変換器と、 上記Ａ／Ｄ変換器のデジタル伴奏信号の内第１バンド信
号のみを通過させる第１デジタルフィルターと、 マイク信号源からの第２アナログ信号を増幅する増幅器
と、 上記増幅器によって増幅された第２アナログ信号を第２
デジタル信号に変換する第２Ａ／Ｄ変換器と、 上記第２デジタル信号の内第２帯域信号を通過させる第
２デジタルフィルターと、 上記第１及び第２デジタルフィルターからの第１及び第
２帯域信号とが入力されて相互相関演算（ｃｒｏｓｓ−
ｃｏｒｒｅｌａｔｉｏｎ演算）を行う相互相関器（ｃｒ
ｏｓｓ−ｃｏｒｒｅｌａｔｏｒ）と、 上記相互相関器からの信号が入力され、この信号の平均
値を算出する第３平均算出部と、 上記第１及び第２デジタルフィルターの第１及び第２帯
域信号の各々に対して自動相関演算を行う第１及び第２
自動相関器（ａｕｔｏーｃｏｒｒｅｌａｔｏｒ）と、 上記第１及び第２自動相関器からの信号が入力され、こ
れらの信号の平均値を各々算出する第１及び第２平均算
出部と、 上記第１、第２及び第３平均算出部からの信号が入力さ
れ、これらの信号を正規化して歌の点数表示器に出力す
るノーマライザーとを備えたことを特徴とするカラオケ
システムにおける歌の点数採点装置。 - 【請求項２】 上記相互相関器によって演算される相互
相関関係式 ／Ｒｘｙ（γ）は； ／Ｒｘｙ（γ）＝√Ａ Ａ＝［Ｅ｛Ｘ（ｔ）・Ｙ（ｔ＋γ）｝］2＋［Ｅ｛／Ｘ
（ｔ）・Ｙ（ｔ＋γ）｝］2 （但し、ｔは時間、γはｔからの遅延時間、Ｘ，Ｙは伴
奏信号及び使用者の歌の信号、Ｅはｅｘｐｅｃｔａｔｉ
ｏｎ ｏｐｅｒａｔｏｒ、／Ｘ（ｔ）はＨｉｌｂｅｒｔ
ｔｒａｎｓｆｏｒｍ ｐａｉｒ）で表示されることを
特徴とする請求項第１記載のカラオケシステムにおける
歌の点数採点装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1019930012327A KR960007127B1 (ko) | 1993-06-30 | 1993-06-30 | 영상반주 기기의 채점장치 |
| KR12327 | 1993-06-30 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0756587A true JPH0756587A (ja) | 1995-03-03 |
| JP2874832B2 JP2874832B2 (ja) | 1999-03-24 |
Family
ID=19358542
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP6149643A Expired - Lifetime JP2874832B2 (ja) | 1993-06-30 | 1994-06-30 | カラオケシステムにおける歌の点数採点装置 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US5565639A (ja) |
| JP (1) | JP2874832B2 (ja) |
| KR (1) | KR960007127B1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008026836A (ja) * | 2006-07-25 | 2008-02-07 | Yamaha Corp | 音声の類似度を評価する方法、装置およびプログラム |
| JP2018021969A (ja) * | 2016-08-01 | 2018-02-08 | キヤノン株式会社 | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 |
Families Citing this family (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3293745B2 (ja) * | 1996-08-30 | 2002-06-17 | ヤマハ株式会社 | カラオケ装置 |
| US6229901B1 (en) | 1998-03-05 | 2001-05-08 | Nils Peter Mickelson | Auditory feedback device |
| US20070163425A1 (en) * | 2000-03-13 | 2007-07-19 | Tsui Chi-Ying | Melody retrieval system |
| US6703551B2 (en) * | 2001-05-17 | 2004-03-09 | Ssd Company Limited | Musical scale recognition method and apparatus thereof |
| JP4771323B2 (ja) * | 2001-05-17 | 2011-09-14 | 新世代株式会社 | 音階認識方法、音階認識装置、及び、記録媒体 |
| GB2403662B (en) * | 2003-07-09 | 2008-01-16 | Sony Comp Entertainment Europe | Game processing |
| US8150683B2 (en) * | 2003-11-04 | 2012-04-03 | Stmicroelectronics Asia Pacific Pte., Ltd. | Apparatus, method, and computer program for comparing audio signals |
| TWI282970B (en) * | 2003-11-28 | 2007-06-21 | Mediatek Inc | Method and apparatus for karaoke scoring |
| US7164076B2 (en) * | 2004-05-14 | 2007-01-16 | Konami Digital Entertainment | System and method for synchronizing a live musical performance with a reference performance |
| US7806759B2 (en) * | 2004-05-14 | 2010-10-05 | Konami Digital Entertainment, Inc. | In-game interface with performance feedback |
| US20060009979A1 (en) * | 2004-05-14 | 2006-01-12 | Mchale Mike | Vocal training system and method with flexible performance evaluation criteria |
| US7459624B2 (en) | 2006-03-29 | 2008-12-02 | Harmonix Music Systems, Inc. | Game controller simulating a musical instrument |
| US20090075711A1 (en) | 2007-06-14 | 2009-03-19 | Eric Brosius | Systems and methods for providing a vocal experience for a player of a rhythm action game |
| US8678896B2 (en) | 2007-06-14 | 2014-03-25 | Harmonix Music Systems, Inc. | Systems and methods for asynchronous band interaction in a rhythm action game |
| US7772480B2 (en) * | 2007-08-10 | 2010-08-10 | Sonicjam, Inc. | Interactive music training and entertainment system and multimedia role playing game platform |
| US8138409B2 (en) * | 2007-08-10 | 2012-03-20 | Sonicjam, Inc. | Interactive music training and entertainment system |
| US8148621B2 (en) * | 2009-02-05 | 2012-04-03 | Brian Bright | Scoring of free-form vocals for video game |
| US8465366B2 (en) | 2009-05-29 | 2013-06-18 | Harmonix Music Systems, Inc. | Biasing a musical performance input to a part |
| US8449360B2 (en) | 2009-05-29 | 2013-05-28 | Harmonix Music Systems, Inc. | Displaying song lyrics and vocal cues |
| US9981193B2 (en) | 2009-10-27 | 2018-05-29 | Harmonix Music Systems, Inc. | Movement based recognition and evaluation |
| US10357714B2 (en) | 2009-10-27 | 2019-07-23 | Harmonix Music Systems, Inc. | Gesture-based user interface for navigating a menu |
| US8550908B2 (en) | 2010-03-16 | 2013-10-08 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US8567258B2 (en) | 2010-06-10 | 2013-10-29 | Edward Belotserkovsky | Urine flow monitoring device and method |
| US8276465B2 (en) | 2010-06-10 | 2012-10-02 | Edward Belotserkovsky | Urine flow monitoring device and method |
| US8562403B2 (en) | 2010-06-11 | 2013-10-22 | Harmonix Music Systems, Inc. | Prompting a player of a dance game |
| WO2011155958A1 (en) | 2010-06-11 | 2011-12-15 | Harmonix Music Systems, Inc. | Dance game and tutorial |
| US9358456B1 (en) | 2010-06-11 | 2016-06-07 | Harmonix Music Systems, Inc. | Dance competition game |
| US9024166B2 (en) | 2010-09-09 | 2015-05-05 | Harmonix Music Systems, Inc. | Preventing subtractive track separation |
| US20140298174A1 (en) * | 2012-05-28 | 2014-10-02 | Artashes Valeryevich Ikonomov | Video-karaoke system |
| CN109905806A (zh) * | 2017-12-07 | 2019-06-18 | 北京雷石天地电子技术有限公司 | 智能调节音效的方法及系统 |
| CN109686376B (zh) * | 2019-01-08 | 2020-06-30 | 北京雷石天地电子技术有限公司 | 一种歌曲演唱评价方法及系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH087524B2 (ja) * | 1992-07-17 | 1996-01-29 | 株式会社日本ビデオセンター | カラオケ採点表示装置 |
-
1993
- 1993-06-30 KR KR1019930012327A patent/KR960007127B1/ko not_active Expired - Fee Related
-
1994
- 1994-06-30 JP JP6149643A patent/JP2874832B2/ja not_active Expired - Lifetime
- 1994-06-30 US US08/269,383 patent/US5565639A/en not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008026836A (ja) * | 2006-07-25 | 2008-02-07 | Yamaha Corp | 音声の類似度を評価する方法、装置およびプログラム |
| JP2018021969A (ja) * | 2016-08-01 | 2018-02-08 | キヤノン株式会社 | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR950001598A (ko) | 1995-01-03 |
| KR960007127B1 (ko) | 1996-05-27 |
| JP2874832B2 (ja) | 1999-03-24 |
| US5565639A (en) | 1996-10-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2874832B2 (ja) | カラオケシステムにおける歌の点数採点装置 | |
| Cleveland et al. | Aerodynamic and acoustical measures of speech, operatic, and Broadway vocal styles in a professional female singer | |
| Kuhn | A real-time pitch recognition algorithm for music applications | |
| US8626497B2 (en) | Automatic marking method for karaoke vocal accompaniment | |
| CN111681637A (zh) | 歌曲合成方法、装置、设备及存储介质 | |
| JP2004515808A (ja) | 演奏楽器の音情報を用いた音楽分析方法 | |
| CN110136730B (zh) | 一种基于深度学习的钢琴和声自动编配系统及方法 | |
| CN109903778B (zh) | 实时演唱评分的方法与系统 | |
| JPH11184490A (ja) | 規則音声合成による歌声合成方法 | |
| JP4091892B2 (ja) | 歌唱音声評価装置、カラオケ採点装置及びそのプログラム | |
| JP2004325744A (ja) | 音程判定装置 | |
| WO2022070639A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
| Marolt | Networks of adaptive oscillators for partial tracking and transcription of music recordings | |
| JP2017173655A (ja) | 音評価装置および音評価方法 | |
| JPH11338480A (ja) | カラオケ装置 | |
| CN109712634A (zh) | 一种自动声音转换方法 | |
| Sundberg | My research on the singing voice from a rear-view-mirror perspective | |
| Vurma | Timbre-induced pitch shift from the perspective of Signal Detection Theory: the impact of musical expertise, silence interval, and pitch region | |
| WO2007088820A1 (ja) | カラオケ装置及び音声処理方法 | |
| JP4108850B2 (ja) | 歌唱による標準的なカロリー消費量を試算する方法およびカラオケ装置 | |
| JPH1026994A (ja) | カラオケ採点装置 | |
| JPS59204095A (ja) | 楽音ピツチ可変装置 | |
| JP2008040258A (ja) | 楽曲練習支援装置、動的時間整合モジュールおよびプログラム | |
| JP2000003200A (ja) | 音声信号処理装置及び音声信号処理方法 | |
| JP2008015212A (ja) | 音程変化量抽出方法、ピッチの信頼性算出方法、ビブラート検出方法、歌唱訓練プログラム及びカラオケ装置 |