External Memory

プログラミング周辺知識の備忘録メイン

機械学習その他

機械学習におけるハイパーパラメータ最適化自動化について

機械学習においてハイパーパラメータをうまく調節するのは 面倒で時間がかかる作業である。 この最適化を自動化して、良い成果を得ている論文を見つけた。(おそらく有名な論文) https://papers.nips.cc/paper/4522-practical-bayesian-optimization-of-mac…

重み初期設定と活性化関数による学習速度の改善

前回の3層ニューラルネットワーク構造の学習の検討において 学習速度の速度の問題が目についた。 http://taka74k4.hatenablog.com/entry/2017/08/03/120000 今回は学習速度の改善を試みた。過適合による学習速度の低下ではなく、始めから学習速度は遅かった…

以前の機械学習検討の改善(hidden layer追加など)

前回の TensorFlowの機械学習を利用した擬似星の等級の計算 - External Memory でTensorFlowを用いた星の等級の見積りを試しで行ったが、 正答率があまり良くなかった。 今回はhidden layerを追加して前回の2層から3層に変更して見積りを行った。 それぞれの…

TensorFlowの機械学習を利用した擬似星の等級の計算

Tensorflowの使い方と深層学習(というより機械学習)の勉強の導入として、 単純モデルを利用したプログラムを作った。 参考にしたのは以下TensorFlowホームページのGET STARTEDページ Getting Started | TensorFlow 今回題材として用いたのは星の等級の計算…