改良型オンライン準ニュートン法によるニューラルネットワークの学習

摘要

あらまし　本研究では準ニュートン法に基づくニューラルネットワークの新たな学習法を提案する．従来，準ニュートン法はこう配法に基づく強力な収束特性をもつバッチ学習法であった．近年，大規模なデータを扱う問題への応用としてオンライン準ニュートン法が提案された．本研究ではオンライン準ニュートン法の学習データの与え方を改良することで，準ニュートン法の収束特性を向上させた学習法を提案する．