ヤマムギ

growing hard days.

*

Developers Summit 2018 「将棋プログラムPonanzaにおける強化学習、ディープラーニングとその先」を聞きました

      2018/02/17


以下は、思ったことや気になったことをメモしていますので、必ずしも登壇者の発表内容やご意見ではないことを、ご承知おきください。

スピーカーはHEROZの大渡さん

HEROZ Kishinという独自AIを活用したソリューションを提供されている。

ゲームAI大会というのがあるんですね。
きっとその名前のとおりの大会なのでしょうね。

将棋プログラム


ミニマックス法ベースのアルゴリズムで出来ている、
お互いが最善の行動をした場合の評価を計算していく、
パラメータ数が数千万ぐらいあるので人間が手計算するのは不可能、とのこと。

Ponanzaと他プログラムとの違い

コードが短くて読みやすい。1万行ぐらい。
なので実戦検証のプログラムが充実してトライアンドエラーが早くまわせた。

ディープラーニング


一言で言うと「大量の足し算と掛け算の集合」らしい。なるほど。
AlphaGoZeroは盤面の履歴から最善手の予測と勝率の予測をニューラルネットワークで同時に計算している。
Ponanzaもニューラルネットワーク導入後はAlphaGoZeroと同じ。
ライブラリにTensorFlowを使っている。

これまでの将棋のプログラムは秒間600万局面を探索して理詰めで評価する。ニューラルネットは計算局面は少なく鋭い感性を持っている。

Alpha ZeroはAlpha Go Zeroを汎用的に見直したプログラム。

ニューラルネットで多様性な結果が本当にうまれるのかは、はい、疑問ですね。
でも多様性な結果が生まれるらしい。

ニューラルネットワークやモンテカルロ木探索の限界は思われていたよりずっと高かったらしい。

簡単に書けるようなるというのは本当にそうなんだろうなと思います。
今日のセッションにあったような技術面での話は意識することなく普段使いしていくんだろうなあと思いました。

AIがAI作ったとか聞いたら、もうAIとか作れなくてもよくて、使えればいいんだな。
なので多くの人が知るべきなのは統計学よりも、何をどう使えばどんな結果になるか、場面に応じたうまい使い方は?ってことになるんじゃないでしょうか。

@yamamanx

開発ベンダー5年、ユーザ企業システム部門通算9年、ITトレーナー1年目のSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。

このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。

また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。

 - study

ad

ad

  関連記事

久しぶりにMonotaROさんの話しを聞いて興奮した「MonotaRO Tech Talk #6 (大阪梅田オフィスオープン記念)」

エンジニア人生というか、普通に仕事に対する考え方とか、自分に大きな影響を与えてく …

「Talend ハンズオンセミナー」に行ってきました

Talendとは データの整備・統合 ビッグデータ対応 ストリーミングデータ ア …

AWS Summit 2016 Tokyoに参加してきました (Day3)

飛天3日目です。 JAWS-UGブースのすぐ前にあったこのお水がめちゃめちゃおい …

「JAWS-UG 四国クラウドお遍路」からの特急南風にて変わり続けなければならないなあと思った

「JAWS-UG 四国クラウドお遍路」というAWSのユーザーグループJAWS-U …

「【Twilio x kintone 合同ハンズオン in 大阪】Twilio Studioとkintoneで電話受付システムをつくろう」に行ってきました

「【Twilio x kintone 合同ハンズオン in 大阪】Twilio …

JAWS DAYS 2018 振り返り(特にコミュニティフレンドシップ)

JAWS DAYS 2018を振り返りたいと思います。 やったこと コミュニティ …

Developers Summit 2018 「NRIの働き方改革 – 開発スタイルから文化まで変えた軌跡 -」を聞きました

以下は、思ったことや気になったことをメモしていますので、必ずしも登壇者の発表内容 …

JAWS DAYS 2018で初めてのランチタイムセッションをやってみました

日本のAWSユーザーグループはJAWS-UGと言います。 JAWS-UGでは年に …

TwilioJP-UG大阪 第二回 勉強会「Report SIGNAL2016」に行ってきました

TwilioJP-UG大阪 第二回 勉強会「Report SIGNAL2016」 …

「JAWS DAYSに行きたくても行けなかった人に捧ぐ!AWSユーザーが教えてくれるAWSにまつわる最新事情」で運営と発表をしました

JAWS DAYS 2017のre:Capを大阪で開催しました。 JAWS DA …