したいこと
Pythonのライブラリsklearnの一般的な知識を知りたいです。
- 例えばRandomForestRegressorの尤度関数・損失関数・最適化がどのような手法で行われているのかを知りたいです
- 例えばRandomForestRegressorの尤度関数・損失関数・最適化をカスタマイズする方法・そもそもできるのかを知りたいです。
- 勾配降下法以外にも最適化手法はあると思うのですがその点に関して機械学習全体とsklearnとの関係性を大きな視点で説明していただけないでしょうか
- 尤度関数の設定 → 損失関数の設定 → 最適化手法の決定 という流れで機械学習は行うものだという認識なのですがこれは間違っていますか?
試したこと
- 公式ドキュメントを見ました。例えば線形モデルについては尤度関数についてはある程度記述がありました。 しかし最適化手法については見つけることができませんでした。実装を見て理解するしかないのでしょうか。
参考サイト
Implementing custom loss function in scikit learn
sklearn.ensemble.RandomForestRegressor
1.1.12. Generalized Linear Regression