ヤマムギ

growing hard days.

*

S3 Intelligent-Tieringで高頻度階層(FREQUENT)に戻る「アクセス」にS3 SelectとGlueクローラーが該当するのか確認してみました

   

ユーザーガイドのS3 Intelligent-Tiering のしくみには、「低頻度のアクセス階層または Archive Instant Access 階層にあるオブジェクトに後からアクセスすると、自動的に高頻度のアクセス階層に戻されます。」と記載があります。

このアクセスにSelectとGlueクローラーが該当するのか確認してみました。

検証開始の状態

Amazon Customer Reviews Datasetからいくつかのデータを検証用に作成したS3バケットにコピーしました。
合計約443MBです。
このまま30日放置しました。

30日後

メトリクスがIntelligentTieringIAStorageとあるので、全部低頻度階層に移動したことが確認できました。

インベントリ収集で各オブジェクトのストレージクラスとリクエストメトリクスを有効にしました。

S3 Selectで確認

1つのオブジェクトだけ、マネジメントコンソールからS3 Selectでオブジェクトを確認してみました。

翌々日まで置いてみてInventoryファイルで確認しました。

Selectの結果をマネジメントコンソールで確認するだけでは、「アクセス」には該当せずに高頻度階層(FREQUENT)には戻りませんでした。

次はSelect結果をダウンロードしてみました。

ローカルにCSVファイルがダウンロードできました。

翌々日まで置いてみてInventoryファイルで確認しました。

低頻度階層(INFREQUENT)のままでした。
Selectは「アクセス」に含まれないんですかね??
1行下のファイルは同じタイミングでダウンロードして、高頻度階層(FREQUENT)に戻ったオブジェクトなので、確認タイミングの問題ではなさそうです。

AWS Glueクローラで確認

Glueクローラで1つのオブジェクトだけ指定して実行してみました。

翌々日まで置いてみてInventoryファイルで確認しました。

高頻度階層(FREQUENT)に戻りました。
「アクセス」に該当しました。

当たり前ですがダウンロードも一応確認

翌々日まで置いてみてInventoryファイルで確認しました。

もちろん高頻度階層(FREQUENT)に戻りました。


最後までお読みいただきましてありがとうございました!

「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。

「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第3版」という本を書きました。

「AWS認定資格試験テキスト AWS認定AIプラクティショナー」という本を書きました。

「ポケットスタディ AWS認定 デベロッパーアソシエイト [DVA-C02対応] 」という本を書きました。

「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。

「AWSではじめるLinux入門ガイド」という本を書きました。

 - AWS ,

  関連記事

AWSアカウントのルートユーザーのセキュリティ認証情報

アカウント作成時にはMFA設定するためにIAMダッシュボードからアクセスするので …

Lambda関数をPython3.6から3.9に変更

CodeGuru ProfilerでLambda関数(Python 3.9)のパ …

ちょっとしたCLI作業にEC2起動テンプレート

CLIでちょっとした作業したいだけのときに、Cloud9を使うまでもないなあと思 …

EC2 Windows インスタンス PowerShellでメタデータを見る

Linuxインスタンスならcurlコマンドで確認すればいいのですが、Window …

ヤマムギvol.23 Amazon RDS for MySQLとAmazon Aurora Serverlessの起動のデモをしました

ゴールデンウィーク毎朝デモ勉強会は終わったのですが、土曜日にやれるときがあれば、 …

Amazon LinuxにRedmine をインストールする(手順整理版)

Amazon LinuxにRedmineをインストールしました手順を記載します。 …

Amazon Aurora Serverless のログをCloudWatch Logsに出力する

WordPress W3 Total Cache のDatabaseCacheを …

東京リージョンでAWS Control Towerランディングゾーンをセットアップする

AWS Control Towerの最初の画面で[ランディングゾーンの設定]を押 …

AWS Summit 2016 Tokyoに参加してきました (Day3)

飛天3日目です。 JAWS-UGブースのすぐ前にあったこのお水がめちゃめちゃおい …

AWS Client VPNの接続ログを確認しました

AWS Client VPNを設定しましたで証明書とかせっかく作ったので、いろい …