ざっくりと最適化についてまとめる（少し詳しい目次程度）。 手法間のつながりとか流れを確認する用なので、内容には踏み込まない。 証明や細かい解説は書籍を参照すること*1。 間違いがあればご指摘ください。 勾配法 最急降下法 今いる地点の勾配（1階微分…

前回の記事で、固有値と固有ベクトルについて書いた。 hotoke-x.hatenablog.com この記事中にある正方行列の対角化を式変形すると、行列のスペクトル分解（固有値分解）が得られ、これを使って2次形式の標準形が得られる。 正方行列のスペクトル分解（固有値…