JPH01237754A - 人工神経回路網 - Google Patents

人工神経回路網

Info

Publication number
JPH01237754A
JPH01237754A JP63320728A JP32072888A JPH01237754A JP H01237754 A JPH01237754 A JP H01237754A JP 63320728 A JP63320728 A JP 63320728A JP 32072888 A JP32072888 A JP 32072888A JP H01237754 A JPH01237754 A JP H01237754A
Authority
JP
Japan
Prior art keywords
neural network
terminal
signal
circuit network
capacitor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP63320728A
Other languages
English (en)
Inventor
Charles A Lish
チャールス・アンドリュー・リッシュ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Philips Gloeilampenfabrieken NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Philips Gloeilampenfabrieken NV filed Critical Philips Gloeilampenfabrieken NV
Publication of JPH01237754A publication Critical patent/JPH01237754A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/06Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons
    • G06N3/063Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons using electronic means
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/06Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons
    • G06N3/063Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons using electronic means
    • G06N3/065Analogue means

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Neurology (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Analogue/Digital Conversion (AREA)
  • Networks Using Active Elements (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 発明の背景 本発明は、人工神経回路網(artificial n
euralnetwork)によって計算し、かつ、信
号処理、フィルタリング及び画像や音声パターン認識の
如き用途に有用な分野に関するものである。特に本発明
は、加重(重み付けした)電圧値を蓄積するコンデンサ
のアレイから成り、かつ、これらのコンデンサにおける
加重電荷に対して改良ダイナミックリフレッシュ可能出
力を有しているアナログ式の神経回路網に関するもので
ある。
人工神経回路網は、人間の神経網に近付けるバーホーマ
ンスレベルを達成する試み、特に音声及び画像認識の如
き分野において多年にわたり研究されている。これらの
回路網は並列に作動する多数の非線形計算素子から成り
、しかも生物学上の神経網に擬態化させるパターンに配
置している。
これらの計算素子は、通常作動中にパーホーマンスを改
善すべく適合又は変更される加重部によって接続される
。人工神経回路網の分野に関連する他の背景情報につい
ては、1987年4月にリチャード・ピー・リップマン
によりI[EEE ASSP Magazineに発表
された” An Introduction to C
omputingWith Neural Nets”
に記載されている。
神経回路網は、可変加重部を有するリンクで接続した多
数の計算素子から成る美大な数の並列回路網を用いて多
くの競合する仮説を同時に探究することができる。計算
素子(ノード)は一般には非線形のものであり、しかも
これらの素子の代表的なものにはアナログデバイスがあ
る。最も簡単なノードはN個の加重人力の和をとって、
その加算結果を非線形デバイスに通すようにする。神経
回路網に用いるアルゴリズムは、関連加重値を適宜適合
させて、現時点の結果に基づくシステムのパーホーマン
スを改善せしめるようにすることができる。適合又は学
習能力はこれらの回路網の重要な特徴である。
コンデンサのアレイから成り、これらのコンデンサに個
別の加重電荷が蓄積される神経回路網に関する重大な問
題は、電荷がコンデンサから漏れて、これにより誤った
加重係数値が作られると云うことにある。このような欠
点を克服するために、包囲した超冷却環境内(例えば、
液体窒素を充填したデユワ−瓶内)にて装置を作動させ
て、神経回路網のコンデンサから電荷の漏れを最少とす
ることが提案されている。他に、コンデンサの電荷、即
ち電圧を長期間維持するように極めて大きなコンデンサ
を用いることも提案された。これらの解決策はいずれも
不都合であることは明らかである。
発明の概要 本発明の目的はコンデンサの電荷の漏洩問題に対する以
前に提案された解決策の欠点をなくすべく新規に改良し
た神経回路網を提供することにある。
本発明の他の目的は、神経回路網のコンデンサに蓄積さ
れる加重データをダイナミックにリフレッシユする装置
を有しているアナログ式の神経回路網を提供することに
ある。
本発明によれば、コンデンサのアレイを具えているアナ
ログ式の神経回路網における前記各コンデンサを加重電
圧値に充電すると共に、これらの各コンデンサが、これ
らのコンデンサを個別の各コンデンサに関連する半導体
ゲート素子を介して加重電圧源に周期的に結合させるこ
とによりリフレッシュされる電荷を有するようにする。
コンデンサにおける加重電圧は、これらのコンデンサの
各1つにゲート電極が個別に接続される一組のMOSF
ETの抵抗値を制御する。
本発明によれば、神経回路網に以前に提案されていたも
のよりも小容量のコンデンサを用いることができ、又こ
のような回路網を超冷却ハウジング内に装着する必要も
ない。さらに、本発明による神経回路網は従来提案され
ていたものよりも遥かにコンパクトで、しかも高効率で
ある。
実施例の説明 以下図面につき本発明を説明する。
先ず本発明をそれが第1図に示す模範的なシステム、例
えば音声認識装置の一部として用いることができるもの
として説明する。後に詳述するアナログ式の人工神経回
路網lOは入力データXi(ここにi=l、n)を受信
するための複数個の入力ラインXI + ×2+  ・
・・・・・×oを有している。本発明を単一層の回路網
の例につき説明するが、本発明は多層の神経回路網にも
適用し得ることは明らかである。
第1図のシステムのアナログ神経回路網部分は、その回
路網のアルゴリズムに依存するアナログまたはデジタル
値をとり得るXの値を受信する。システムの学習段階で
は、各々が一組の入力値(X、)を有している一組のト
レーニングパターンを神経回路網10の人力ラインx1
 + ×2+  ・・・・・・X、及びプレプロセッサ
11の入力端子に並列グループにてパターン順次で供給
する。さらに、−組のターゲツト値dj(ここにj=1
.m)も、プレプロセッサ22により読み取り可能なデ
ジタル形態に変換されてライン23を介してマイクロプ
ロセッサ13に供給される実際の回路網出力と一緒にマ
イクロプロセッサ13の第1組の入力端子12にパター
ン順次で供給する。マイクロプロセッサ13は、先ずプ
レプロセッサ11により読み取り可能なデジタル形態に
変換されたXi の人力値も第2組の入力端子14にて
受信する。
加重(重み付け)情報又はデータはRAM 15に記憶
され、このRAMからリサイクル可能プログラムカウン
タ16の制御下で読み出される「加重」データはデジタ
ル/アナログ変換器(DAC> 17に供給される。D
AC17は「加重」データを出力ライン18を経てアナ
ログ神経回路網10におけるコンデンサアレイ (図示
せず)に順次供給する。
プログラムカウンタ16はデコーダ19の動作も同時に
前進させ、このデコーダは出力ラインSlj +S2J
+ ・・・S、、j・・・S、、、を経て神経回路網1
0におけるスイッチング間口5FBTのアレイ(図示せ
ず)を順次附勢し、これらのスイッチングM[]SF[
ETは神経回路網のコンデンサアレイにおける各コンデ
ンサへの加重電圧の付与を制御する。
神経回路網10におけるコンデンサアレイに対する加重
データはRAM15に記憶され、かつ、このデータはこ
れがプログラムカウンタ16によってRAM15から読
み出されるのと同時にマイクロプロセッサ13によって
更新される。従って、RAM15に記憶された加重デー
タは、このデータがプログラムカウンタ160制御下で
DACに供給されると草々に更新される。端子20はク
ロックパルスをプログラムカウンタ16と、遅延装置2
1を介してデコーダ19とに供給し、遅延装置21はデ
コーダ19がスイッチングMO3FBTをストローブす
る前にDAC出力電圧に対する整定時間を十分にとるた
めのものである。
プログラムカウンタ、好ましくはリサイクル可能なカウ
ンタ16は、RAM15の各アドレスを読み出して、加
重情報を神経回路網に供給して、この神経回路網におけ
るコンデンサに蓄積されている加重電荷を逐次動作でリ
フレッシュするようにする。プログラムカウンタはデコ
ーダ19の動作も同時に進め、このデコーダはRAM1
5からの加重情報の読み出しに応答して、ゲート信号を
出力ラインSlj +S2j+  ・・・Snj・・・
S工に順次供給する。
これらの出力ラインは神経回路網10における個々のコ
ンデンサに関連する半導体ゲート素子の個々の制御電極
に結合させる。
DAC17からコンデンサに供給される加重電圧は神経
回路網10における個々の関連するMO3F[ET(図
示せず)の抵抗値を決定する。プログラムカウンタはリ
サイクルし、かつ、RAM  15及びデコーダ19を
アドレスする信号を供給し続けるため、RAMに記憶さ
れ、かつマイクロプロセッサ13によって更新される加
重データはDAC’17を介して神経回路網10のコン
デンサに絶えず供給される。
従って、コンデンサにおける加重電圧は絶えずリフレッ
シュされると共に多重速度で更新され、この速度はコン
デンサの電圧をRAM15に記憶させた加重データによ
り決められるような正しい加重値に維持、即ちコンデン
サの電荷の漏れ速度およびリフレッシュ間隔により決定
される公差内に維持するのに十分な速度とする。
学習段階の開始時にアナログ神経回路網におけるコンデ
ンサは、成る程度の初期ランダム値の加重電圧を有して
いる。人力値を受信した後に、神経回路網は出力ライン
V++y2+・・・y5に出力(y、)を発生するよう
になる。これらのy出力値はプロセッサ22に供給され
る。プロセッサ22は神経回路網のアナログ出力ライン
を走査し、かつ、受信したデータ信号を一連のデジタル
数に変換する。
これらのデジタル数は、データライン23を経てマイク
ロプロセッサに読み取らせるのに都合の良いフォーマッ
トに配列する。
ついで、ライン23によりマイクロプロセッサ13に供
給されるデジタルのy値をマイクロプロセッサ13にて
入力ライン12から供給されるターゲツト値dj と比
較する。マイクロプロセッサ13は上述した比較による
結果と一緒に人力のX値を用いて、新規の加重値を計算
し、この加重値をRAM15にロードし、ついでこのR
AMはアナログ神経回路網における加重値を調整する。
このような作用をトレーニングセ・ットにおけるすべて
のパターンに対して逐次繰り返し、全出力値のターゲツ
ト値との差が予め特定化した誤り公差内におさまるまで
繰り返す。このようにして回路網はパターングループを
学習したことになる。
要約するに、マイクロプロセッサはプレプロセッサ22
のy値を人カバターンが判っている所定のトレーニング
セットに対する所望のターゲツト値と比較する。ついで
加重値を調整して、神経回路網の出力をターゲツト値に
さらに近付けるように調和させる。この操作をトレーニ
ングセットにおける種々のパターンに対して繰り返し、
神経回路網が成る特定の誤り公差内で完全なパターンに
応答し得るようになるまで継続させる。第1図の実施例
では単層の回路網につき説明したが、多層の神経回路網
の場合に有効なアルゴリズムはルーメルハル) (Ru
melhart)の逆伝搬法である。
神経回路網がデジタル制御下にてパターンセットを学習
した後には、この回路網は最早デジタルプロセッサ段及
び学習アルゴリズムのソフトウェアとインターフェース
する必要がなくなる。この際、アナログ神経回路網はダ
イナミックリフレッシュの下で本質的に単独であり、し
かもこの回路網は、この際本来の高速アナログ動作をし
て、学習パターンを旧又は新規のデータセットに供給す
ることかできる。この処理の段階の最中に、神経回路網
の作動が学習段階の期間中に行ったデジタル処理によっ
てスローダウンされることはない。
処理段階では、学習した加重値を神経回路網にダイナミ
ックにリフレッシュさせ、デジタル式の学習ハードウェ
アは使用しない。ダイナミックリフレッシュアナログ回
路網はこの際孤立しており、これは学習段階中に取得し
た加重情報に従って新規の入カバターンを極めて迅速に
類別するように作動させることができる。
第2図は神経回路網10の一部分を多少詳細に示したも
のである。この回路網はタップ加重に対応する電圧とし
て加重値を蓄積するコンデンサーJ+C2J+  ・・
・Chjのアレイを具えている。図示の各コンデンサは
大地と、各半導体ゲート素子25゜26、・・・27を
経てDAC17の出力ライン18との間に接続する。半
導体ゲート素子はMO3FIETとすることができ、こ
れらの素子のゲート電極はデコーダ19の各出力ライン
SIJ +”’2j+  ・・・Snjに接続する。各
アナログ神経素子もそれぞれ1.IO3FET 28 
29、・・・30で構成する。m個の神経素子の出力が
y」であり、ここにj=l、mとする。
MOSFET28. 29及び30は各人力ラインX、
×2及び×。と演算増幅器31の反転入力端子との間に
接続する。MO3F[ET 28 、 2’ 9および
30のゲート電極はコンデンサCIJ +C2J+  
及びCI、jとゲー)MOSFET 25 、 26及
び27との各接続点に接続する。MOSFET 28〜
30は抵抗性加重部として機能し、各抵抗加重部の抵抗
値は各コンデンサー。
〜CnJから受電される印加ゲート電圧により制御され
るか、又は決定される。
演算増幅器31は大地に接地される非反転(+)入力端
子を有しており、この演算増幅器の出力端子と反転(−
)入力端子との間には抵抗値がLの帰還抵抗32を接続
する。演算増幅器は多くの最新の神経回路網システムに
て一般的であるように、S形(sigmoidal)関
数を呈する比較的低利得の増幅器とするのが好適である
。演算増幅器31の出力端子は端子33に接続し、この
端子からyj(j=1.m)信号を第1図のプレプロセ
ッサ22に供給する。
MOSFET 28〜30をトリオード領域で作動させ
ることにより、これらのMOSFETは可変抵抗として
ほぼ機能するようになり、これらの各MOSF8Tはそ
のゲート電圧によって決定される加重抵抗値を呈し、斯
かるゲート電圧はそれに接続した関連するコンデンサC
+j −cfi、に蓄積された加重電圧によって決定さ
れる。入力信号X、、 X2・・・×7は入力端子34
,35.・・・36に供給され、かつ、それぞれ直列に
配置した!、IO3FET 28 、 29 、・・・
30の抵抗値によって決定されるような個別の加重係数
により変更される。S形のレスポンス特性を呈する演算
増幅器31は加重変更した入力信号×1を加算する。
演算増幅器31の出力端子に現れる信号yjはつぎのよ
うに表わすことができる。
1j 以下同様である。各別の抵抗値R0に対する抵抗値Rr
の比は各別の人力信号X、の各々に付与する加重係数w
1を決定する。抵抗値Rfは帰還抵抗32の抵抗値であ
る。関数fはほぼS形量数であるが、これは他の任意の
所望な関数とすることができる。
加重電圧はデコーダ19のS、」出力ラインをストロー
ブすることによりコンデンサに蓄積される。
RAM15に記憶された加重データはプログラムカウン
タ16によって逐次アドレスされて、DAC17の出力
ライン18に一連のアナログ電圧レベルを発生する。こ
れと同時にプログラムカウンタはデコーダ19をトリガ
して、各出力ラインSt。
を逐次附勢することによりゲー)MOSFET 25〜
27のゲート電極を順序附勢して、これらのMOSFE
Tを逐次ターン・オンさせる。
ゲー)MOSFET 25〜27がターン・オンする度
毎に加重アナログ電圧はRAM15から0ACI7及び
ライン18を経て関連するコンデンサC目に供給される
ため、これらコンデンサに蓄積されていた加重電圧はリ
フレッシュされる。正しいアナログ電圧は逐次適切なコ
ンデンサに発送される。プログラムカウンタは絶えずリ
サイクルして、コンデンサにおける加重電圧をリフレッ
シュし、かつ、連続するりフレッシニ期間の間にコンデ
ンサにおける電圧降下を成る割合で最小とすることによ
り、コンデンサ電圧を回路網の誤り公差内に維持せしめ
る。所要に応じMOSFET 28〜30と共に、デュ
アル人力−デュアル出力演算増幅器を用いる周知の平衡
形構造の如き標準の直線化技法を用いることができる。
これにより励起及び禁止(+又は−)入力及び出力をさ
らに融通性をも°って形成することもできる。
本発明は上述した例のみに限定されるものではなく、幾
多の変更を加え得ること勿論で′ある。
【図面の簡単な説明】
第1図は音声パターン認識の目的に使用し得るアダプテ
ィブ方式の一部としての本発明による人工神経回路網を
概略的に示すブロック線図;第2図は第1図のアナログ
式神経回路網の一部分を詳細に示すブロック線図である
。 10・・・人工神経回路網 11・・・プレプロセッサ 13・・・マイクロプロセッサ 15・・・RAM 16・・・プログラムカウンタ 17・・・デジタル/アナログ変換器 19・・・デコーダ 20・・・クロックパルス端子 21・・・遅延装置   22・・・プレプロセッサ2
5.26.27・・・ゲートλ10sFET (半導体
ゲート素子)

Claims (1)

  1. 【特許請求の範囲】 1、複数個相互接続した能動素子を具えている人工神経
    回路網において、相互接続した各素子対間のデータ相互
    接続部が電圧制御インピーダンス手段を具え、これらの
    インピーダンス手段の各値が前記相互接続部の加重値を
    表わし、前記インピーダンス手段の制御端子を各別のノ
    ードを介して各キャパシタンスに接続し、前記各ノード
    と他の端子との間に各伝送ゲートの導通路を結合させ、
    前記他の端子を前記伝送ゲートの内の少なくとも複数個
    の他の伝送ゲートに共通とし、前記伝送ゲートを逐次使
    用可能とするために伝送ゲートの内の前記複数個の他の
    伝送ゲートの制御端子に結合させる制御手段を設け、該
    手段により前記他の端子に信号を供給して該当キャパシ
    タンスに蓄積されている電荷をリフレッシュさせるよう
    にしたことを特徴とする人工神経回路網。 2、前記制御手段が、加重値を表わすデジタルデータを
    記憶するメモリと、該メモリを周期的にアドレスするカ
    ウンタと、前記メモリによって供給されるデジタルデー
    タをアナログ信号に変換して、該アナログ信号を前記他
    の端子に伝送するデジタル/アナログ変換器と、該当す
    る伝送ゲートを逐次使用可能状態にするために前記カウ
    ンタに結合させるデコーダとを具えていることを特徴と
    する請求項1に記載の人工神経回路網。 3、前記カウンタ及びデコーダをクロック信号入力端子
    に結合させ、該クロック信号入力端子と前記デコーダと
    の間にクロック信号を遅延させる遅延手段を設けたこと
    を特徴とする請求項2に記載の人工神経回路網。 4、前記各インピーダンス手段が電界効果トランジスタ
    の導通チャネルを含むことを特徴とする請求項1に記載
    の人工神経回路網。 5、前記各伝送ゲートが電界効果トランジスタの導通チ
    ャネルを含むことを特徴とする請求項1〜4のいずれか
    に記載の人工神経回路網。 6、前記各能動素子が増幅器を含むことを特徴とする請
    求項1、4または5のいずれかに記載の人工神経回路網
    。 7、前記神経回路網に、相互接続素子に内部発生信号を
    供給する入力端子を設け、該入力端子に出力信号伝送用
    の出力端子を関連させ、前記回路網に入力信号受信用の
    データ処理手段も設け、出力信号を入力信号とターゲッ
    ト信号とに関連させて、該当する出力信号が該当ターゲ
    ット信号に応じるか、否かを決定すると共に、該決定で
    の不適合に対してメモリに蓄積されているデータを更新
    させるようにしたことを特徴とする請求項2または3の
    いずれかに記載の人工神経回路網。
JP63320728A 1987-12-23 1988-12-21 人工神経回路網 Pending JPH01237754A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US137111 1987-12-23
US07/137,111 US4866645A (en) 1987-12-23 1987-12-23 Neural network with dynamic refresh capability

Publications (1)

Publication Number Publication Date
JPH01237754A true JPH01237754A (ja) 1989-09-22

Family

ID=22475877

Family Applications (1)

Application Number Title Priority Date Filing Date
JP63320728A Pending JPH01237754A (ja) 1987-12-23 1988-12-21 人工神経回路網

Country Status (4)

Country Link
US (1) US4866645A (ja)
EP (1) EP0322071A3 (ja)
JP (1) JPH01237754A (ja)
KR (1) KR890010751A (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0215718A (ja) * 1988-07-01 1990-01-19 A T R Jido Honyaku Denwa Kenkyusho:Kk 神経回路網モデルを用いた雑音除去装置
JPH02226383A (ja) * 1989-02-28 1990-09-07 Fujitsu Ltd ニューロコンピュータの集中制御方式
JPH03175565A (ja) * 1989-12-04 1991-07-30 Matsushita Electric Ind Co Ltd 並列計算機
JPH03214373A (ja) * 1990-01-19 1991-09-19 Matsushita Electric Ind Co Ltd ニューロコンピュータ
US5386149A (en) * 1991-10-22 1995-01-31 Mitsubishi Denki Kabushiki Kaisha Data synapse expressing unit capable of refreshing stored synapse load
US5696883A (en) * 1992-01-24 1997-12-09 Mitsubishi Denki Kabushiki Kaisha Neural network expressing apparatus including refresh of stored synapse load value information
JP2741793B2 (ja) * 1991-10-17 1998-04-22 川崎製鉄株式会社 ニューラルネットワークプロセッサ
JPWO2010106587A1 (ja) * 2009-03-18 2012-09-13 パナソニック株式会社 ニューラルネットワークシステム

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4926180A (en) * 1988-03-25 1990-05-15 Trustees Of Columbia University In The City Of New York Analog to digital conversion using correlated quantization and collective optimization
JP2595051B2 (ja) * 1988-07-01 1997-03-26 株式会社日立製作所 半導体集積回路
JPH0232679A (ja) * 1988-07-22 1990-02-02 Hitachi Ltd ニューラルネットによるデータ通信方法および装置
US5333239A (en) * 1988-09-12 1994-07-26 Fujitsu Limited Learning process system for use with a neural network structure data processing apparatus
US5083285A (en) * 1988-10-11 1992-01-21 Kabushiki Kaisha Toshiba Matrix-structured neural network with learning circuitry
US5697369A (en) * 1988-12-22 1997-12-16 Biofield Corp. Method and apparatus for disease, injury and bodily condition screening or sensing
US5293459A (en) * 1988-12-23 1994-03-08 U.S. Philips Corporation Neural integrated circuit comprising learning means
US5010512A (en) * 1989-01-12 1991-04-23 International Business Machines Corp. Neural network having an associative memory that learns by example
US4961005A (en) * 1989-04-25 1990-10-02 Board Of Trustees Operating Michigan State University Programmable neural circuit implementable in CMOS very large scale integration
US5274745A (en) * 1989-07-28 1993-12-28 Kabushiki Kaisha Toshiba Method of processing information in artificial neural networks
US5101361A (en) * 1989-09-29 1992-03-31 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Analog hardware for delta-backpropagation neural networks
JPH03167655A (ja) * 1989-11-28 1991-07-19 Toshiba Corp ニューラルネットワーク
US5255346A (en) * 1989-12-28 1993-10-19 U S West Advanced Technologies, Inc. Method and apparatus for design of a vector quantizer
US5167006A (en) * 1989-12-29 1992-11-24 Ricoh Company, Ltd. Neuron unit, neural network and signal processing method
US5371835A (en) * 1990-02-02 1994-12-06 Kabushikikaisha Wacom Inductively coupled neural network
KR930002999B1 (ko) * 1990-04-03 1993-04-16 정호선 랭크필터
US5223750A (en) * 1990-06-04 1993-06-29 Matsushita Research Institute Tokyo, Inc. Artificial neural function circuit having organic thin film elements
DE4020001C2 (de) * 1990-06-24 1995-01-26 Werner Dr Ing Brockmann Schaltungsanordnung einer Neuronenschaltung und eines damit aufgebauten neuronalen Netzes
JPH04280387A (ja) * 1990-07-02 1992-10-06 General Electric Co <Ge> ニューラル・ネット層を含むシステム
US5115492A (en) * 1990-12-14 1992-05-19 General Electric Company Digital correlators incorporating analog neural network structures operated on a bit-sliced basis
US5140531A (en) * 1990-08-01 1992-08-18 General Electric Company Analog neural nets supplied digital synapse signals on a bit-slice basis
US5167008A (en) * 1990-12-14 1992-11-24 General Electric Company Digital circuitry for approximating sigmoidal response in a neural network layer
US5222193A (en) * 1990-12-26 1993-06-22 Intel Corporation Training system for neural networks and the like
IT1244912B (it) * 1991-01-31 1994-09-13 Texas Instruments Italia Spa Sistema di apprendimento per rete neuronica di opportuna architettura fisicamente inseribile nel processo di apprendimento.
IT1244910B (it) * 1991-01-31 1994-09-13 Texas Instruments Italia Spa Cella convertitrice tensione-corrente, regolabile, realizzata mediante uno stadio differenziale, a transistori mos. in particolare per formare sinapsi di reti neuroniche e combinazione di tali celle per formare il corredo di sinapsi di un nucleo neuronico.
US5248956A (en) * 1991-04-05 1993-09-28 Center For Innovative Technology Electronically controllable resistor
US5204872A (en) * 1991-04-15 1993-04-20 Milltech-Hoh, Inc. Control system for electric arc furnace
US5195170A (en) * 1991-08-12 1993-03-16 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Neural-network dedicated processor for solving assignment problems
FR2688329A1 (fr) * 1992-03-05 1993-09-10 Mimetics Procede de reconnaissance de formes au moyen d'un reseau neuronal, systeme et dispositif mettant en óoeuvre ce procede.
US5327228A (en) * 1992-07-30 1994-07-05 North American Philips Corporation System for improving the quality of television pictures using rule based dynamic control
TW230246B (ja) * 1993-03-03 1994-09-11 Philips Electronics Nv
US5479574A (en) * 1993-04-01 1995-12-26 Nestor, Inc. Method and apparatus for adaptive classification
FR2691821B1 (fr) * 1993-05-28 1995-04-21 Gold Star Electronics Réseau neuronal à couches multiples programmable.
US6513023B1 (en) 1999-10-01 2003-01-28 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Artificial neural network with hardware training and hardware refresh
US7451065B2 (en) * 2002-03-11 2008-11-11 International Business Machines Corporation Method for constructing segmentation-based predictive models
CN101894583B (zh) * 2010-07-08 2016-03-02 矽创电子股份有限公司 节省电路面积的记忆单元
US8266085B1 (en) 2012-02-06 2012-09-11 The United States Of America As Represented By The Secretary Of The Army Apparatus and method for using analog circuits to embody non-lipschitz mathematics and properties using attractor and repulsion modes
KR101644736B1 (ko) 2015-01-14 2016-08-10 서울대학교산학협력단 Mos 커패시터를 이용한 전기장 측정 장치 및 방법
GB2579120B (en) * 2018-11-20 2021-05-26 Cirrus Logic Int Semiconductor Ltd Inference system
WO2026013543A1 (en) * 2024-07-08 2026-01-15 Irreversible Inc. Method and apparatus for an analog neural network

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT1002272B (it) * 1973-12-27 1976-05-20 Honeywell Inf Systems Sistema di ricarica in memoria a semiconduttori
JPS5576393A (en) * 1978-12-04 1980-06-09 Hitachi Ltd Matrix drive method for guestthostttype phase transfer liquid crystal
US4660166A (en) * 1985-01-22 1987-04-21 Bell Telephone Laboratories, Incorporated Electronic network for collective decision based on large number of connections between signals
US4760437A (en) * 1986-01-03 1988-07-26 American Telephone And Telegraph Company, At&T Bell Laboratories Neural networks
US4731747A (en) * 1986-04-14 1988-03-15 American Telephone And Telegraph Company, At&T Bell Laboratories Highly parallel computation network with normalized speed of response
US4737929A (en) * 1986-04-14 1988-04-12 American Telephone And Telegraph Company, At&T Bell Laboratories Highly parallel computation network employing a binary-valued T matrix and single output amplifiers
US4755963A (en) * 1986-04-14 1988-07-05 American Telephone And Telgraph Company, At&T Bell Laboratories Highly parallel computation network with means for reducing the algebraic degree of the objective function
US4752906A (en) * 1986-12-16 1988-06-21 American Telephone & Telegraph Company, At&T Bell Laboratories Temporal sequences with neural networks

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0215718A (ja) * 1988-07-01 1990-01-19 A T R Jido Honyaku Denwa Kenkyusho:Kk 神経回路網モデルを用いた雑音除去装置
JPH02226383A (ja) * 1989-02-28 1990-09-07 Fujitsu Ltd ニューロコンピュータの集中制御方式
JPH03175565A (ja) * 1989-12-04 1991-07-30 Matsushita Electric Ind Co Ltd 並列計算機
JPH03214373A (ja) * 1990-01-19 1991-09-19 Matsushita Electric Ind Co Ltd ニューロコンピュータ
JP2741793B2 (ja) * 1991-10-17 1998-04-22 川崎製鉄株式会社 ニューラルネットワークプロセッサ
US5386149A (en) * 1991-10-22 1995-01-31 Mitsubishi Denki Kabushiki Kaisha Data synapse expressing unit capable of refreshing stored synapse load
US5696883A (en) * 1992-01-24 1997-12-09 Mitsubishi Denki Kabushiki Kaisha Neural network expressing apparatus including refresh of stored synapse load value information
JPWO2010106587A1 (ja) * 2009-03-18 2012-09-13 パナソニック株式会社 ニューラルネットワークシステム
US8694451B2 (en) 2009-03-18 2014-04-08 Panasonic Corporation Neural network system

Also Published As

Publication number Publication date
US4866645A (en) 1989-09-12
EP0322071A2 (en) 1989-06-28
KR890010751A (ko) 1989-08-10
EP0322071A3 (en) 1990-03-14

Similar Documents

Publication Publication Date Title
JPH01237754A (ja) 人工神経回路網
US10692570B2 (en) Neural network matrix multiplication in memory cells
JP7119109B2 (ja) 重み更新回路および推論回路を別個に有する抵抗型処理ユニット・アーキテクチャ
US4807168A (en) Hybrid analog-digital associative neural network
Indiveri et al. A VLSI array of low-power spiking neurons and bistable synapses with spike-timing dependent plasticity
US4951239A (en) Artificial neural network implementation
US5087826A (en) Multi-layer neural network employing multiplexed output neurons
US5067095A (en) Spann: sequence processing artificial neural network
Lee et al. Hardware annealing in analog VLSI neurocomputing
US20140351190A1 (en) Efficient hardware implementation of spiking networks
US10366326B2 (en) Unit having an artificial neuron and a memristor
JP2021047530A (ja) 処理装置および推論システム
JPH0467259A (ja) 情報処理装置
US20220138546A1 (en) Expandable neuromorphic circuit
JPH06274661A (ja) シナプス回路およびそれを用いたニューラルネットワークシステム
US5146542A (en) Neural net using capacitive structures connecting output lines and differentially driven input line pairs
Indiveri Synaptic plasticity and spike-based computation in VLSI networks of integrate-and-fire neurons
JPH07141313A (ja) 神経回路素子
Pelayo et al. VLSI implementation of a neural model using spikes
JPH04281584A (ja) 複数の入力信号の重みづけられた複数の加算を行う装置
JPH06187472A (ja) アナログニューラルネットワーク
Menschik et al. Model-and scale-independent performance of a hippocampal CA3 network architecture
Shastri et al. Learning structured representations
Wang A modular analog CMOS LSI for feedforward neural networks with on-chip BEP learning
KR102514655B1 (ko) 스파이크 신호를 병렬처리하는 뉴로모픽 장치