https://d.tflare.com/categories/%E6%A9%9F%E6%A2%B0%E5%AD%A6%E7%BF%92/ Recent content in 機械学習 on Hiroyuki Abeの日記 Hugo ja-jp Copyright (c) 2006 - 2026, Hiroyuki Abe Sun, 01 Oct 2017 19:49:00 +0900 https://d.tflare.com/2017/10/01/194900/ Sun, 01 Oct 2017 19:49:00 +0900 https://d.tflare.com/2017/10/01/194900/ <h1 id="基礎から学ふ機械学習本の独習による勉強">基礎から学ぶ機械学習（本の独習による勉強）</h1> <p>統計学・機械学習の勉強について以下を参考にして勉強する計画を立てました。 431日の計画ができました。</p> <p>初級者向けは、コンピューターで「脳」がつくれるか以外を実施で、今月中に完了を目指します。</p> <p>中級者向けは1冊 半月 or 1ヶ月用意しています。</p> <p>初級者向けは行けると思いますが、<br> 中級者向けは読む前に必要な前提知識もあり、かなり厳しいと考えています。<br> 勉強を進めます。</p> <p><a href="http://tjo.hatenablog.com/entry/2017/03/22/190000">データサイエンティストもしくは機械学習エンジニアを目指すならお薦めの初級者向け6冊＆中級者向け15冊（2017年春版）</a></p> https://d.tflare.com/2017/09/16/071300/ Sat, 16 Sep 2017 07:13:00 +0900 https://d.tflare.com/2017/09/16/071300/ <h1 id="一から始める機械学習kaggleで学ぶ機械学習">一から始める機械学習（Kaggleで学ぶ機械学習）</h1> <p>機械学習の研修用の資料を作成しました。 <a href="https://d.tflare.com/2017/08/19/062700/">一から始める機械学習（機械学習概要）</a>の続編でKaggleを使用した実践編です。</p> <h2 id="プレゼン">プレゼン</h2> <p><a href="https://www.edocr.com/v/vlzyelxe/tflare/Kaggle_-Machine-learning-to-learn-at-Kaggle">https://www.edocr.com/v/vlzyelxe/tflare/Kaggle_-Machine-learning-to-learn-at-Kaggle</a></p> <h2 id="qiita">Qiita</h2> <p><a href="http://qiita.com/taki_tflare/items/8850ac5ba8b504a171aa">http://qiita.com/taki_tflare/items/8850ac5ba8b504a171aa</a></p> https://d.tflare.com/2017/08/19/062700/ Sat, 19 Aug 2017 06:27:00 +0900 https://d.tflare.com/2017/08/19/062700/ <h1 id="一から始める機械学習機械学習概要">一から始める機械学習（機械学習概要）</h1> <p>機械学習の研修用の資料を作成しました。 タイトル通り機械学習に今まで触れたことのない人を対象にしています。</p> <h2 id="プレゼン">プレゼン</h2> <p><a href="https://www.edocr.com/v/zy1dq0dz/tflare/Machine-Learning-Overview">https://www.edocr.com/v/zy1dq0dz/tflare/Machine-Learning-Overview</a></p> <h2 id="qiita">Qiita</h2> <p><a href="http://qiita.com/taki_tflare/items/42a40119d3d8e622edd2">http://qiita.com/taki_tflare/items/42a40119d3d8e622edd2</a></p> https://d.tflare.com/2017/06/04/192600/ Sun, 04 Jun 2017 19:26:00 +0900 https://d.tflare.com/2017/06/04/192600/ <h1 id="ai機械学習しようソース論文輪読会unrealに出席してきましたpart2">AI&amp;機械学習しよう！　ソース＆論文輪読会（UNREAL）に出席してきました。part2</h1> <p><a href="http://do2dle.connpass.com/event/57366/">AI&amp;機械学習しよう！　ソース＆論文輪読会（UNREAL）</a>に出席してきました。</p> <p>飯塚さんの「強化学習による 「Montezuma&rsquo;s Revenge」への挑戦」の発表について個人的なまとめを記載します。</p> <h2 id="montezumas-revengeとは">Montezuma&rsquo;s Revengeとは</h2> <p>DeepMindが強化学習の評価に利用するAtari2600ゲームの一つ 平均得点が人間に対し0%と強化学習における最難関ゲームの一つだった。(2016年6月まで)</p> <h2 id="得点が取れない原因">得点が取れない原因</h2> <ol> <li>キャラが直ぐに死んでしまい、先に進めない</li> <li>得点頻度が少なく、学習機会が少ない</li> </ol> <h2 id="どのように対応したか">どのように対応したか</h2> <p>A3C + Unifying Count-Based Exploration and Intrinsic Motivation + On-highscore-learningで対応</p> <h3 id="unifying-count-based-exploration-and-intrinsic-motivation">Unifying Count-Based Exploration and Intrinsic Motivation</h3> <p>DeepMindの論文で概要は以下 ゲーム状態の頻度に基づいて、特典を与えることで報酬を与えるもの。 頻度が高い画面は得点を低くし、頻度が低い画面の得点を高くすることで、多くの画面に行くことのモチベーションを上げるもの</p> <h3 id="on-highscore-learning">On-highscore-learning</h3> <p>飯塚さんのオリジナルのアイデアで得点を得るまでの直前のステップで学習をさせるもの 他のコードも入っていたが、上記コードの効果が最大であった。</p> <h2 id="どのような結果が出たか">どのような結果が出たか</h2> <p>上記対応によりDeepMind論文未記載の部屋に到達</p> <h2 id="今後の課題展望">今後の課題・展望</h2> <ol> <li>現在は前処理でモノクロ化を行っているが、人間もカラーのほうが、現在場所がわかりやすいので、 カラー画像の学習も必要では</li> <li>人間もマップを見ないとどの部屋にいて、どの戦略が必要かわかりにくい、AIもマップが必要では</li> </ol> <h2 id="個人的な感想">個人的な感想</h2> <ol> <li> <p>会場で話が出ていて気になったのが、機械学習では一つのハイパーパラメータですべて解決しようとすることが多いが、次のステップでは、それだけではだめで、例えばMontezuma&rsquo;s Revengeの場合、部屋ごとに学習が必要ではないかという話が出ていた。 　</p> </li> <li> <p>個人的に考えていたのが、Montezuma&rsquo;s Revengeをクリアするにはどうすればよいのかということで、Montezuma&rsquo;s Revengeにはパズル的な要素が存在するため、特定のルートを通らないとクリアできないようになっていたはず、そのため現在のスコアを追い求めるスタイルだけでは、クリアが難しいのではと感じた。 （人でもクリアにはマップを用意して実施する必要があり、同じことをやる必要があるなと考えていた。）</p> </li> <li> <p>Montezuma&rsquo;s Revengeは以下により小さな子どもにはクリアが難しいゲームである。子どもの成長によりクリアできる可能性が上がってくるがその成長により得られる能力のどこが効果的に機能しているのか調べれば、ヒントが得られるかもしれないと考えている。</p> </li> <li> <p>すぐに死ぬ等の操作が難しい</p> </li> <li> <p>パズル性が難しい。</p> </li> </ol> https://d.tflare.com/2017/06/04/072700/ Sun, 04 Jun 2017 07:26:00 +0900 https://d.tflare.com/2017/06/04/072700/ <h1 id="ai機械学習しようソース論文輪読会unrealに出席してきましたpart1">AI&amp;機械学習しよう！　ソース＆論文輪読会（UNREAL）に出席してきました。part1</h1> <p><a href="http://do2dle.connpass.com/event/57366/">AI&amp;機械学習しよう！　ソース＆論文輪読会（UNREAL）</a>に出席してきました。</p> <p>三好さんのUNREALの発表について個人的なまとめを記載します。</p> <h2 id="unreal">UNREAL</h2> <p>強化学習のA3CアルゴリズムをベースにExperience Replayを効果的に使った補助タスクを組み合わせて3D迷路でx10倍の高速化を実現</p> <h3 id="unrealへの流れ">UNREALへの流れ</h3> <p>DQN(2013年)→A3C(2016年)→UNREAL(2016年)</p> <p>A3C：複数の環境を非同期に並列で動かし高速化</p> <p>UNREAL：A3CにExperience Replayを効果的に使った以下の補助タスクを導入し、さらに学習を高速化させる。</p> <p>＊最近はA3Cをベースとした論文が多数出ている</p> <ol> <li>Pixel Control</li> <li>Reward Prediction</li> <li>Value Function Replay</li> </ol> <h3 id="pixel-control">Pixel Control</h3> <p>画面のピクセル値の変化を擬似報酬とする補助タスク 画面を20✕20のピクセルグリットに分け、グリット毎にQ学習を行う。</p> <p><a href="https://www.youtube.com/watch?v=xHK0qBeH3-I">https://www.youtube.com/watch?v=xHK0qBeH3-I</a></p> <p>上記のPCがピクセルグリットに分けたもの、 上記のPC Qがグリット毎にQ学習を実行した結果</p> <p>このPixel Controlが3つの中で一番効果が高い。</p> <h3 id="個人的な感想">個人的な感想</h3> <p>Pixel Controlが効果的な結果を上げているので<br> 例えばAtari breakout（ブロック崩し）ではA3Cと比べて効果を上げるのが難しいのではないかと感じた。<br> Pixel Controlは情報の圧縮をしているようなもので、<br> breakoutは単純で、既に圧縮されているようなものなので、効果はそこまででもないのかと<br> 逆に圧縮が効くような場合は速度に大きな効果を上げるものであると感じた。</p> <p>以下は少し上記の話とは外れるが、<br> ゲームの上手い人は情報の圧縮の仕方がうまく、良いゲームはそれを発見させる用にできている。<br> 例えばゲームによっては、面の背景が同じ色の場合は同じ方法論でいける箇所、面の背景が異なった色になっている場合は違う考え方をしなければいけないというサインが存在している場合がある。</p> <p>面の背景色が違うというのはゲームからのヒント、ゲームの上手い人はこれをとらえ、同じ背景色の場合、前と同じ戦略が使えないか考え、違う背景色がでた場合、前と違う戦略を使わなければ行けないのか考える。しかしゲームの下手な人は違いを考えずに動き、失敗する。</p> <p>これは試したことで得られた情報をいかに有効に活用し、<br> また活用しないかということを突き詰めれば、<br> 現在人より劣った結果しかでていないゲームで高得点をあげられるのではと考えている。<br> またゲームの初期状態の教育に、転移学習を使えれば有効なのかとも考えている。</p> https://d.tflare.com/2017/02/26/155900/ Sun, 26 Feb 2017 15:59:00 +0900 https://d.tflare.com/2017/02/26/155900/ <p><a href="http://ps.nikkei.co.jp/ibmwatson1603/p2.html">日本初!保険金支払審査への導入で見えてきたIBM Watsonの実力 提供：日本IBM</a></p> <p>上記を見たので、保険金支払への機械学習導入はどのような感じでできるか、少し考えてみた。 詳細な落とし込みは書いていません。 軽く考えた概要のみです。</p> <h2 id="生命保険-保険金支払をざっくりまとめると">生命保険 保険金支払をざっくりまとめると</h2> <p>生命保険の保険金支払はざっくりいうと以下の手順で行われる。</p> <ol> <li>保険契約者の保険金請求</li> <li>保険会社から保険契約者への必要書類の算出</li> <li>必要書類の確認、送付依頼</li> <li>保険契約者から保険会社への必要書類の送付</li> <li>送られてきた書類を元に機械的な査定を実行(機械査定)</li> <li>書類、機械的な査定、必要に応じた病院等への紹介などを元にした人的な査定(人的査定)</li> <li>支払</li> </ol> <h2 id="機械学習を導入するとしたら人的査定のサポートに使う">機械学習を導入するとしたら人的査定のサポートに使う</h2> <p>機械学習を導入するとしたら3. 6の人的なサポートに用いるというのが考えられる。<br> 保険会社がシステムで行うのが2.4.5.7<br> 保険会社が人で行うのが3.6</p> <p>現在システムで行っている箇所に機械学習を導入することで得られるメリットは少ないため（普通にロジックを組んだほうが、コストも低く、結果も固定である。機械査定へ機械学習を使用するのはどうなのか？については別途記載）</p> <p>3(必要書類の確認、送付依頼)はそこまで難しくないため、それほどのメリットが得られないため、<br> やるとしたら6(人的な査定)になると考える。</p> <h2 id="人的査定のサポートで何ができる">人的査定のサポートで何ができる？</h2> <p>人的査定で機械学習を使うのであれば、<br> 以前の似たような入力があった場合は支払をしていましたよ。とか<br> 病院への確認をしていましたよ。等の表示をしてあげる。<br> ということしかできないだろう。<br> しかし、上記を行うことで人が行うとどうしても発生してしまう結果が安定しないということが改善できることが大きいと考える。</p> <h2 id="人的査定のサポートの効果は">人的査定のサポートの効果は？</h2> <p>これについては、4の機械的な査定をどの程度行っているかによって<br> 得られるものが大幅に変わってくる。<br> リンク先の資料では、システム的に判定できるのが2割のシステムに導入したようだ。</p> <blockquote> <p>「お客さまから頂く請求件数は年間約200万件あり、システム的に判定できるのは２割、残りの８割は人による判断が必要です」</p> </blockquote> <p>このようにシステム的に判定できる割合が少なく、請求件数が多いところいには大きな価値があると考えられる。<br> 逆にシステム投資を十分していて、システムで8割判断ができてしまえば、使えるのは残り2割となってしまい効果は薄い。</p> <h2 id="機械査定へ機械学習を使用するのはどうなのか">機械査定へ機械学習を使用するのはどうなのか？</h2> <p>人が条件を全て決めれるものであれば、機械学習を使わずプログラミングしたほうが良い結果が出る。</p> <p>ただし、この条件が複雑になりだすと特に保守において問題が出始めると考えられる。<br> （特定の人しかいじれないものとなりその人がいなくなると保守が困難になる等）</p> <p>複雑な条件となった場合は機械学習の強みが活かせるため、機械学習を行わない部分と行う部分を分け、併用することを考えるのもありと考える。</p> https://d.tflare.com/2017/01/26/202848/ Thu, 26 Jan 2017 20:28:48 +0900 https://d.tflare.com/2017/01/26/202848/ <h1 id="機械学習-適用事例と実装の選択肢と機械学習系エントリ">機械学習 適用事例と実装の選択肢と機械学習系エントリ</h1> <h2 id="機械学習-適用事例と実装の選択肢書きました">機械学習 適用事例と実装の選択肢書きました。</h2> <p><a href="https://speakerdeck.com/tflare/machine-learning-application-case-and-implementation-options">機械学習 適用事例と実装の選択肢</a></p> <p>機械学習の基本的な用語、ロボアドバイザー、AmazonGOについて、<br> また実装の選択肢として、機械学習ライブラリ、Microsoft Azure Machine Learning等のクラウドの利用、ネットでサービスとして提供されているサービスの利用などをまとめました。</p> <p>他Qiitaで機械学習関連のエントリーを書いています。 参考にいただけますと幸いです。</p> <h2 id="ilsvrcとは何か">ILSVRCとは何か？</h2> <p><a href="http://qiita.com/taki_tflare/items/40bd1313d85513b4b861">ILSVRCとは何か？</a></p> <h2 id="機械学習深層学習で画像関連をやってみたい場合はじめに抑えておいた方がよいものは何か">機械学習(深層学習)で画像関連をやってみたい場合はじめに抑えておいた方がよいものは何か</h2> <p><a href="http://qiita.com/taki_tflare/items/40bd1313d85513b4b861">機械学習(深層学習)で画像関連をやってみたい場合はじめに抑えておいた方がよいものは何か</a></p> <h2 id="pythonで体験する深層学習-2章輪講用資料">Pythonで体験する深層学習 2章(輪講用資料)</h2> <p><a href="http://qiita.com/taki_tflare/items/b3032980568d6ea69d84">Pythonで体験する深層学習 2章(輪講用資料)</a></p>