ヤマムギ

growing hard days.

*

Developers Summit 2018 「将棋プログラムPonanzaにおける強化学習、ディープラーニングとその先」を聞きました

      2018/02/17

以下は、思ったことや気になったことをメモしていますので、必ずしも登壇者の発表内容やご意見ではないことを、ご承知おきください。

スピーカーはHEROZの大渡さん

HEROZ Kishinという独自AIを活用したソリューションを提供されている。

ゲームAI大会というのがあるんですね。
きっとその名前のとおりの大会なのでしょうね。

将棋プログラム


ミニマックス法ベースのアルゴリズムで出来ている、
お互いが最善の行動をした場合の評価を計算していく、
パラメータ数が数千万ぐらいあるので人間が手計算するのは不可能、とのこと。

Ponanzaと他プログラムとの違い

コードが短くて読みやすい。1万行ぐらい。
なので実戦検証のプログラムが充実してトライアンドエラーが早くまわせた。

ディープラーニング


一言で言うと「大量の足し算と掛け算の集合」らしい。なるほど。
AlphaGoZeroは盤面の履歴から最善手の予測と勝率の予測をニューラルネットワークで同時に計算している。
Ponanzaもニューラルネットワーク導入後はAlphaGoZeroと同じ。
ライブラリにTensorFlowを使っている。

これまでの将棋のプログラムは秒間600万局面を探索して理詰めで評価する。ニューラルネットは計算局面は少なく鋭い感性を持っている。

Alpha ZeroはAlpha Go Zeroを汎用的に見直したプログラム。

ニューラルネットで多様性な結果が本当にうまれるのかは、はい、疑問ですね。
でも多様性な結果が生まれるらしい。

ニューラルネットワークやモンテカルロ木探索の限界は思われていたよりずっと高かったらしい。

簡単に書けるようなるというのは本当にそうなんだろうなと思います。
今日のセッションにあったような技術面での話は意識することなく普段使いしていくんだろうなあと思いました。

AIがAI作ったとか聞いたら、もうAIとか作れなくてもよくて、使えればいいんだな。
なので多くの人が知るべきなのは統計学よりも、何をどう使えばどんな結果になるか、場面に応じたうまい使い方は?ってことになるんじゃないでしょうか。


最後までお読みいただきましてありがとうございました!

「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。

「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第2版」という本を書きました。

「ポケットスタディ AWS認定 デベロッパーアソシエイト [DVA-C02対応] 」という本を書きました。

「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。

「AWSではじめるLinux入門ガイド」という本を書きました。

 - study

ad

ad

  関連記事

JINS MEME DEVELOPER HANDS-ON #5に行ってきました

世界初、自分を見るアイウェアの「JINS MEME」のSDK勉強会に行ってきまし …

「コミュニティリーダーズサミット in 高知 2023初鰹編」に参加しました

始まりました! 今回のテーマは「旗を立てる ~Raise Your Flag~」 …

久しぶりにMonotaROさんの話しを聞いて興奮した「MonotaRO Tech Talk #6 (大阪梅田オフィスオープン記念)」

エンジニア人生というか、普通に仕事に対する考え方とか、自分に大きな影響を与えてく …

Java SE 7 Silver模擬テストの結果気になる問題をメモ 2015/2/13

違う種類の模擬テスト1回目。 90問中77問正解。 正解率85%。 まだまだ不安 …

「大阪 Figma Meeting #01」に参加しました

大阪 Figma Meeting #01に参加しました。 Figma触ったことな …

Java SE 7 Silver対策勉強をしながらメモ 2015/2/2

本日はクラス定義とオブジェクト。 一気に範囲が広がった感。 いつものごとくマーク …

「JAWS-UG千葉支部オンライン#9 AWS re:Invent 2020 re:Cap&LT大会」に参加しました

今日は千葉支部におじゃましました。 re:Invent2020振り返り 〜はじめ …

Developers Summit 2024「技術を超えた成長へ:エンジニアとしてのマインドセットと学びの旅」を見ました

NECソリューションイノベータ株式会社 田中 拓摩さん SAP基幹システムのAW …

Developers Summit 2024「マーケットインアプローチで挑む新規プロダクトの立ち上げ」を見ました

株式会社ベリサーブ 研究企画開発部 サービス開発課 田中 志弥さん ソフトウェア …

「神戸Pythonの会 #2 meetup」に行ってきました

「神戸Pythonの会 #2 meetup」に行ってきました。 所感など Ato …