損失関数またはコスト関数
損失関数またはコスト関数は、1つのイベントまたは1つ以上の変数の値を、そのイベントに関連付けられたいくつかの「コスト」を直感的に表す実数にマッピングする関数です。
最適化問題では、損失関数を最小化することを目指します。損失関数の形式は、問題の性質と数学的な必要性に基づいて選択されます。
様々なシナリオにおける損失関数の違いは次のとおりです。
-
2項分類: クロス・エントロピ関数。
-
マルチクラス分類: マルチ・クロス・エントロピ損失関数。
-
回帰: 2乗誤差関数。