ヤマムギ

growing hard days.

*

Developers Summit 2018 「将棋プログラムPonanzaにおける強化学習、ディープラーニングとその先」を聞きました

      2018/02/17

以下は、思ったことや気になったことをメモしていますので、必ずしも登壇者の発表内容やご意見ではないことを、ご承知おきください。

スピーカーはHEROZの大渡さん

HEROZ Kishinという独自AIを活用したソリューションを提供されている。

ゲームAI大会というのがあるんですね。
きっとその名前のとおりの大会なのでしょうね。

将棋プログラム


ミニマックス法ベースのアルゴリズムで出来ている、
お互いが最善の行動をした場合の評価を計算していく、
パラメータ数が数千万ぐらいあるので人間が手計算するのは不可能、とのこと。

Ponanzaと他プログラムとの違い

コードが短くて読みやすい。1万行ぐらい。
なので実戦検証のプログラムが充実してトライアンドエラーが早くまわせた。

ディープラーニング


一言で言うと「大量の足し算と掛け算の集合」らしい。なるほど。
AlphaGoZeroは盤面の履歴から最善手の予測と勝率の予測をニューラルネットワークで同時に計算している。
Ponanzaもニューラルネットワーク導入後はAlphaGoZeroと同じ。
ライブラリにTensorFlowを使っている。

これまでの将棋のプログラムは秒間600万局面を探索して理詰めで評価する。ニューラルネットは計算局面は少なく鋭い感性を持っている。

Alpha ZeroはAlpha Go Zeroを汎用的に見直したプログラム。

ニューラルネットで多様性な結果が本当にうまれるのかは、はい、疑問ですね。
でも多様性な結果が生まれるらしい。

ニューラルネットワークやモンテカルロ木探索の限界は思われていたよりずっと高かったらしい。

簡単に書けるようなるというのは本当にそうなんだろうなと思います。
今日のセッションにあったような技術面での話は意識することなく普段使いしていくんだろうなあと思いました。

AIがAI作ったとか聞いたら、もうAIとか作れなくてもよくて、使えればいいんだな。
なので多くの人が知るべきなのは統計学よりも、何をどう使えばどんな結果になるか、場面に応じたうまい使い方は?ってことになるんじゃないでしょうか。


最後までお読みいただきましてありがとうございました!

「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。

「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第3版」という本を書きました。

「ポケットスタディ AWS認定 デベロッパーアソシエイト [DVA-C02対応] 」という本を書きました。

「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。

「AWSではじめるLinux入門ガイド」という本を書きました。

 - study

ad

ad

  関連記事

「AWS認定 デベロッパーアソシエイトの試験に出るかもなデモ見せあいっこ(ヤマムギvol.12)」を開催しました

デモ勉強会を開催しました! 2021/4/7にヤマムギ12回目の勉強会「AWS認 …

Developers Summit 2018 「Spinnakerで実現するデプロイの自動化」を聞きました

以下は、思ったことや気になったことをメモしていますので、必ずしも登壇者の発表内容 …

「AWS re:Invent報告会 by Yappli」で機械学習を始めてみようという気になった

YappliさんとSpeeeさん合同のre:Invent報告会におじゃましました …

隣の芝生は青かった?!VoiceUI/UXデザイナーがスキル解剖して気づいたいくつかのこと(Alexa Day 2019でのブログ)

以下は、気になったことのメモとか感想を書いています。 登壇者、発表者、主催企業な …

「AWS Expert Online 13 / JAWS-UG浜松 AWS勉強会 2021#1」に参加しました

本日のAWS Expert Onlineのテーマは「今日から始める、イベントドリ …

docomo雑談APIのAPIキーを発行する

docomo雑談 APIのキー取得の方法です。 (2017年8月13日時点の情報 …

JAWS-UG北陸新幹線 ( 福井開催 )に参加しました

福井駅前で、JAWS-UG北陸新幹線が開催されましたので参加しました! 大阪駅か …

Developers Summit 2024「LLMを活用してオンライン薬局のオペレーションを自動化した話」を見ました

PharmaX株式会社 エンジニアリング責任者 上野 彰大さん オンライン薬局、 …

「Fin-JAWS 第13回 PCI DSS と AWS の混ぜご飯」リモート開催に参加しました

Youtube Liveでリモート開催の「Fin-JAWS 第13回 PCI D …

JAWS DAYS 2018 振り返り(特にコミュニティフレンドシップ)

JAWS DAYS 2018を振り返りたいと思います。 やったこと コミュニティ …