プログラミング初心者の勉強日記

情報科学専攻です. 機械学習と競技プログラミングについて日々勉強しています.

MENU

2017-01-01から1年間の記事一覧

パターン認識と機械学習 : 線形回帰 線形基底関数

線形回帰 線形基底関数 今回はビショップ本の第3章の線形回帰モデルです. その中でも基底関数のお話. 第3章からは教師あり学習の話になります. その中でも回帰の問題を取り扱っています. 回帰問題とは、入力をD次元ベクトルとし、そのベクトルから1つあるい…

交差検定

交差検定 今回はモデル選択の時に使われる手法の、交差検定について軽くまとめて実装して見たいと思います. 交差検定 交差検定について 交差検定の実装例 交差検定について 訓練とテストに使えるデータには限りがありますが、良いモデルを選択するために得ら…

パターン認識と機械学習 : 多項式曲線フィッティング

多項式フィッティング ビショップ本で最初に取り扱っている多項式曲線フィッティングについての備忘録です. (ビショップ本では、この単純な回帰から多くの重要な概念を説明したいらしい.) 多項式フィッティング 多項式フィッテイングとは 多項式フィッテイ…

テイラー展開

テイラー展開 最適化数学でテイラー展開がたくさん出てきたのでとりあえず実装してみることにしました. 今回はサインカーブを使おうと思います. テイラー展開 1. テイラー展開とは 2. 実装例 1. テイラー展開とは 関数のある一点での導関数の無限和で表され…

勾配法

「これなら分かる最適化数学」を読み始めたので、最適化についても紹介していこうと思います. これなら分かる最適化数学―基礎原理から計算手法まで作者: 金谷健一出版社/メーカー: 共立出版発売日: 2005/09/01メディア: 単行本購入: 29人 クリック: 424回こ…

パターン認識と機械学習 : ガウス分布と条件付きガウス分布

ガウス分布と条件付きガウス分布 今回は、ビショップ本の2章のメインとも言えるガウス分布についてです. ガウス分布については結構な量があるのでいくつかに分けてまとめていきたいと思います. ガウス分布と条件付きガウス分布 1. ガウス分布について 多変量…

パターン認識と機械学習 : ベータ分布

ベータ分布 第2章の確率分布の一番最初に紹介されているベータ分布についての備忘録です. ベータ分布 ベータ分布を考える理由 ベータ分布について ベータ分布の実装例 ベータ分布を考える理由 ベルヌーイ分布と二項分布のパラメータを最尤推定で求めた結果は…

パターン認識と機械学習 : ベルヌーイ分布

ベルヌーイ分布 第2章の確率分布の一番最初に紹介されているベルヌーイ分布についての備忘録です. ベルヌーイ分布 ベルヌーイ分布について ベルヌーイ分布の実装例 ベルヌーイ分布について 二値確率変数 (binary random variable, 以下二値 r.v.) が1つの場…

機械学習の入門におすすめの参考書

この記事の対象読者 「最近機械学習って流行ってるけど何からやればいいのか分からない...」 「純粋に機械学習って難しそう... 」 「機械学習勉強したいんだけど、本屋や図書室行っても機械学習関連の本がありすぎて困る...」 と言う方は多いのではないでし…

論文サーベイ part2

今回は「Face Recognition Face2vec Based on Deep Learning : Small Database Case」 出展 : Automatic Control and Computer Sciences 2017 概要:異なった状態の画像に対して訓練され、その各々のデータ数は少ない、認識率をあげるには約100万の画像が必…

論文サーベイ part1

サーベイした論文の内容が後からみてわかるように自分なりにまとめていこうと思います. Abstract, Introduction, Conclusionはどの論文に対しても簡潔にまとめたものを公開し、興味があるものだけ中身を精読していこうと思います. 今回は「Recurrent Neural …