ヤマムギ

growing hard days.

*

[JapanTaxi] Athena 指向アナリティクス 〜真面目に手を抜き価値を得よ〜(AWS Summit Tokyo 2017)を聞いてきました

      2017/06/05

Athenaのユースケースとして聞きにいきましたが、最近触ってるRe:dashも登場しました。

S3 + Athena + QuickSight or Re:dash or OtherBI はシンプルな構成としてトライしてみたいなと思いまして、こちらの記事で個人の月次データでやってみました。
TuneCoreの売上データCSVをS3に格納してAthenaのクエリをRe:dashのデータソースにして可視化する

以下は当日セッションを聞いてのメモです。

Japan Taxiのサービスの概要と歴史

  • 全国タクシー アプリの開発
  • アプリからタクシーを呼ぶことが出来る
  • カード決済も可能
  • 予約も可能
  • 目的地を入れることで運賃計算も可能
  • 位置情報サービス、移動で人を幸せにする
  • タクシー会社が内製しているアプリ
  • 提携タクシー事業社322社
  • 乗務員向けアプリ
  • 運行管理
  • 2011年ローンチし、2016年にリニューアル
  • AWS , Azure GCPを用途に応じて使い分けているハイブリッドインフラ
  • EC2 , RDS. Lambda, Beanstalk , ELB , S3 , SQS , SES , CloudFront
  • 監視はDatadog

Athenaを選ぶ理由

  • 課金対象がスキャン量のみ
  • S3がそのままデータソースなのでS3資産をそのまま使える
  • ログは全て(Windows,Linux,SQLServer,FileStorage)S3に集める
  • S3の設定がAthenaを意識されてなくても大きな問題はない

使用例

  • データ量 : 1.5GB/daily + app log , 5年分
  • 緯度経度データなどをRe:dashを使ってマップで見てる
  • Re:dashのデータソースをAthenaにしている
  • 状態監視はre:dashのalert

予約注文の課題の可視化

  • Re:dashとAthenaでリアルタイム監視
  • 受けられなかった予約注文を可視化
  • 目的は注文ロスの排除

時系列データの可視化

  • 注文ピークタイムの計測

最後までお読みいただきましてありがとうございました!

「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。

「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第3版」という本を書きました。

「ポケットスタディ AWS認定 デベロッパーアソシエイト [DVA-C02対応] 」という本を書きました。

「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。

「AWSではじめるLinux入門ガイド」という本を書きました。

 - AWS , , , ,

ad

ad

  関連記事

サイトのHTTPステータスを5分おきにチェックして200以外ならSlackに通知する

すいません。ここ最近出費が重なりまして、某監視サービスのプランを有料プランからF …

AWS CloudWatch LogsエージェントでAmazon EC2上のNginxのaccess.log , error.log , php-fpm error.log , Linuxのmessages , secureログを収集する

参考ページ クイックスタート: 実行中の EC2 インスタンスに CloudWa …

AWS Summit Tokyo 2017 Day3 開場~基調講演~Dev Day Night

AWS Summit Tokyo 2017 参加2日目のDay3です。 基調講演 …

AWS EC2 インスタンスステータスのチェックで失敗して起動しなくなり復旧

EC2のインスタンスに接続出来なくなったので、AMIから作成してElastic …

Rocket.ChatにAPIで投稿するテスト(Postman)

トレーニング期間中で一時利用するチャットが欲しいなあと思い、Rocket.Cha …

WordPressで画像アップロードができなくなった(AWS WAFでブロックしていた)

WordPressで画像がアップロードできなくなりました。 こんなメッセージです …

kintoneでEveryoneに権限が設定されているアプリをAWS Lambdaで一括チェックする

こないだ、kintone Cafeでユーザーが自由に作成している環境だと、どんな …

CloudFrontディストリビューションを別アカウントへ移動する

すでにCNAMEを設定しているCloudFrontディストリビューションを、別ア …

CloudFormation StackSetsでOrganizations組織のアカウントに一気にIAMロールを作成した

Organizationsで管理している各アカウントにIAMロールを作成したい場 …

CUSTOMINEを使ってkintoneからAWS Lambdaを実行する(Cognito認証付き)

先日の記事「kintoneのカスタマイズ開発を超速にするCUSTOMINE」で書 …