バックプロパゲーション学習法

ニューラルネットワークの学習方法におけるバックプロパゲーション学習法の理解のためー

  • 教師あり学習法
  • 出力された結果と既知の結果を比較して、どのくらい一致してるか数値で表し(エラー)、その差を最小限にするように最適化する
  • エラーの測定法として、平均自乗誤差を利用するのが一般的
  • 重みの初期値は小さな乱数

調整方法は2つ
  • 一つの入力値と出力値の組から重みの調整をして、次の組に移るやり方
  • 全ての組の累積エラーから重みを調整するプロセスを繰り返すやり方

エラーの計算

  • 平均自乗誤差

重みの調節

  • 重み調整分=学習率×エラー×出力値
  • 学習率は0.25らへんが一般的

モーメンタイム

  • はずみをつけるっと言う意味
  • エラーの差が局所的な最小値に収束するのを防ぐ手法の一つ
  • 重み調整分=学習率×エラー×出力値+モーメンタイム因数×前回の重み調整分
  • モーメンタイム因数は、0.0~1.0が通常



  • 最終更新:2011-06-19 00:08:08

このWIKIを編集するにはパスワード入力が必要です

認証パスワード