growing hard days.

AWSアカウント内のすべてのS3バケットを削除するLambda(Python)

2020/01/13 2020/01/19

目次

やりたいこと

特定アカウント内のS3バケットを全部削除したいです。

バケット内のオブジェクト全削除
バケットの削除

AWS複数アカウントのリソースをLambda(Python)から一括操作したくてのLambda関数に追加して呼び出してます。

削除している環境はあくまでも、検証向けの一時アカウントですので、本番向けの大量なオブジェクトや大量なバケットが含まれる環境ではありません。

def s3_bucket_delete(session):
    try:
        s3 = session.client('s3')
        buckets = s3.list_buckets()['Buckets']
        s3_waiter = s3.get_waiter('object_not_exists')

        for bucket in buckets:
            try:
                list_objects = s3.list_objects_v2(
                    Bucket=bucket['Name']
                )
                if list_objects['KeyCount'] > 0:
                    objects = list_objects['Contents']

                    for object in objects:
                        s3.delete_object(
                            Bucket=bucket['Name'],
                            Key=object['Key']
                        )
                        s3_waiter.wait(
                            Bucket=bucket['Name'],
                            Key=object['Key']
                        )

                response = s3.delete_bucket(
                    Bucket=bucket['Name']  
                )
                logger.info(response)
            except:
                logger.error(traceback.format_exc())
                continue

    except:
        logger.error(traceback.format_exc())

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

def s3_bucket_delete(session):

try:

s3 = session.client('s3')

buckets = s3.list_buckets()['Buckets']

s3_waiter = s3.get_waiter('object_not_exists')

for bucket in buckets:

try:

list_objects = s3.list_objects_v2(

Bucket=bucket['Name']

)

if list_objects['KeyCount'] > 0:

objects = list_objects['Contents']

for object in objects:

s3.delete_object(

Bucket=bucket['Name'],

Key=object['Key']

)

s3_waiter.wait(

Bucket=bucket['Name'],

Key=object['Key']

)

response = s3.delete_bucket(

Bucket=bucket['Name']

)

logger.info(response)

except:

logger.error(traceback.format_exc())

continue

except:

logger.error(traceback.format_exc())

バケット内のオブジェクト全削除

クライアントAPIのlist_objects_v2で取得した各オブジェクトをループを回しながら削除しています。
バケットを削除する時に、まだオブジェクトが残ってる、とならないようにobject_not_existsのwaiterを使ってます。

バケットの削除

何回かテストで実行していたところ、バケットを削除したあとに、list_buckets()で一覧に、削除したバケットが含まれてエラーになりましたので、Bucketsのループ内でエラー発生すればcontinueでスキップしています。

とりあえずは複数バケットが削除できたのでこれでひとまず良しとします。
オブジェクトがあっても丸ごとバケットを削除する、リソースAPIとかあると嬉しいですね。
(知らないだけかもしれませんが)

最後までお読みいただきましてありがとうございました！

【PR】「AWS認定試験対策 AWS クラウドプラクティショナー」という本を書きました。

【PR】「AWSではじめるLinux入門ガイド」という本を書きました。

i

【PR】「ポケットスタディ AWS認定デベロッパーアソシエイト」という本を書きました。

開発ベンダー5年、ユーザ企業システム部門通算9年、ITインストラクター3年目でプロトタイプビルダーもやりだしたSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。

このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。
このブログは経験したことなどの共有を目的としており、手順や結果などを保証するものではありません。
ご参考にされる際は、読者様自身のご判断にてご対応をお願いいたします。

また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。

- AWS AWS, lambda, python, s3

Tweet

関連記事

: AtomエディタでEC2のファイルを直接編集する

Webページを編集していてEC2のファイルをvimエディタでさわったりしています …

: Amazon Cognito User Poolsのデモをしてみました

AWS Summit 2016 Tokyoのアップデートおっかけ会をJAWS-U …

: AWS DeepLens開封の儀

去年(2019年)7月にamazon.co.jpでDeepLens買えますやんっ …

: 「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー」執筆裏話

今日2019/4/20発売となりました「AWS認定資格試験テキスト AWS認定ク …

: VPC環境でLambdaを100同時実行してプライベートIPアドレスを確認した

2019年9月発表のLambda 関数が VPC 環境で改善されます以降に、VP …

: AWS認定試験の自宅受験で壁のポスターを注意されちゃいました

AWS認定オンライン受験をしてみましたに書きましたとおり、自宅受験デビューしまし …

: AWSアカウント内特定リージョン内のDynamoDBテーブルを全削除するLambda(Python)

やりたいことタイトル通りですが、特定アカウントの特定リージョン内のDynamo …

: Former2で既存リソースのCloudFormationテンプレート出力を試してみた

JAWS DAYS 2020の資料確認のお手伝いを少ししてまして、「ゼロからはじ …

: AWS Lambda(Python)からTwitterに投稿する

「GoogleフォームからAPI Gatewayで作成したREST APIにPO …

: AWS Lambda(Python)でDynamoDB テーブルを日次で削除/作成(オートスケーリング付き)

この記事はAWS #2 Advent Calendar 2018に参加した記事で …

PREV: IAMユーザーのマネジメントコンソールログインパスワードを変更してDynamoDBに記録するLambda(Python)
NEXT: Amazon API GatewayをLambda(Python)で削除する

NEW POST

: 「AWS認定デベロッパーアソシエイトの試験に出るかもなデモ見せあいっこ(ヤマムギvol.12)」を開催しました

デモ勉強会を開催しました！ 2021/4/7にヤマムギ12回目の勉強会「AWS認 …

: 「JAWS-UG 名古屋 DR対策特集＋LT」で発表しました

2021/3/29の「JAWS-UG 名古屋 DR対策特集＋LT」で「ブログを大 …

: Amazon Pinpoint Workshopの1(Eメール)

Amazon Pinpoint Workshop ここ数年、AWS re:Inv …

: 「Fin-JAWS 第20回〜Go to Fin-JAWS School! 2021〜」で発表しました

2021/3/22の「Fin-JAWS 第20回〜Go to Fin-JAWS …

: 仰向けゴロ寝デスク2を導入しました(このブログは寝ながら書きました)

「THANKO スマホタブレット対応超軽量折りたたみ式「仰向けゴロ寝デスク2」 …

配信ライブカレンダー

[PR] AWS認定試験対策 AWS クラウドプラクティショナー

[PR] AWSではじめるLinux入門ガイド

[PR] ポケットスタディ AWS認定デベロッパー – アソシエイト

タグ
alexa alexaday2018 alexaday2019 api apigateway AWS CentOS cloud9 cloudwatch devsumi2018 dynamodb EC2 gas git google iam iot iphone Java jaws jaws-ug kintone lambda Linux m1mac mac mac-mini Markdown mint MySQL Pandoc PHP python RDS re:dash Redmine remote rocketchat s3 Silver Twilio windows WordPress yamamugi 勉強会

アーカイブ
アーカイブ

AMAZONアソシエイト

「Amazon.co.jpアソシエイト」または「ヤマムギ」は、Amazon.co.jpを宣伝しリンクすることによってサイトが紹介料を獲得できる手段を提供することを目的に設定されたアフィリエイトプログラムである、Amazonアソシエイト・プログラムの参加者です。