Amazon SageMakerプロジェクトを使用してMLパイプラインを構築
目次
SageMakerプロジェクトの作成
SageMaker Studioの左ナビゲーションで[Deployments]-[Projects]を選択しました。
[+ Create project]をクリックしました。
[Not supported]MLOps template for model building, training, and deploymentを選択して、[Next]ボタンをクリックしました。
Nameを入力して、[Create Project]ボタンをクリックしました。
プロジェクト作成が開始されて6分ぐらいで作成完了しました。
作成されたリソースの確認
プロジェクト名をクリックするとリポジトリが2つ見えます。
[Not supported]となっていたのはCodeCommitを使うテンプレートだったからですね。
CloudFormationスタックが作成されていました。
スクリプトやパイプラインアーティファクトストア向けのS3バケットも作成されています。
モデルビルドとモデルデプロイのパイプラインがありますが失敗しています。
CodeCommitリポジトリも2つ作成されています。
Readmeには構成などの情報があります。
パイプラインの実行
モデルビルドのパイプラインを[変更をリリースする]ボタンから再実行しました。
CodeBuildでcodebuild-buildspec.ymlによってSageMaker Pipelineが定義されて実行されています。
モデルビルドのパイプラインが成功で完了しました。
SageMaker Model Registoryではモデルが作成され新しいバージョンが承認待ちになっています。
EventBridgeルールには次のルールが作成されていて、モデルを承認するとモデルデプロイのCodePipelineが実行されるようになっています。
|
1 2 3 4 5 6 7 8 9 10 11 |
{ "detail-type": ["SageMaker Model Package State Change"], "source": ["aws.sagemaker"], "detail": { "ModelPackageGroupName": ["mlops-demo-project-p-xxxxxxxxx"], "ModelApprovalStatus": [{ "anything-but": ["PendingManualApproval"] }] } } |
モデルのバージョンを承認しました。
承認するとモデルデプロイのCodePipelineが実行されました。
ステージング環境へのデプロイが完了すると承認待ちになります。
ステージングデプロイ後のCodeBuildのテスト結果ログを確認するとsuccessになっています。
承認しました。
本番環境のエンドポイントも作成されました。
最後までお読みいただきましてありがとうございました!
「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。
「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第3版」という本を書きました。
「AWS認定資格試験テキスト AWS認定AIプラクティショナー」という本を書きました。
「AWS教科書 AWS認定デベロッパーアソシエイト テキスト&問題集 」という本を書きました。
「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。
「AWSではじめるLinux入門ガイド」という本を書きました。
開発ベンダー5年、ユーザ企業システム部門通算9年、ITインストラクター5年目でプロトタイプビルダーもやりだしたSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。
このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。
このブログは経験したことなどの共有を目的としており、手順や結果などを保証するものではありません。
ご参考にされる際は、読者様自身のご判断にてご対応をお願いいたします。
また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。
関連記事
-
-
「Getting started with AWS Glue DataBrew」をやってみました
AWS Glue DataBrewを体験してみたくて、開発者ガイドのチュートリア …
-
-
Amazon SNSサブスクリプションフィルターを設定してPython(boto3)からPublish
上記のような構成でRocketChatを使うとき使わないときがあります。 都度都 …
-
-
EC2インスタンスWindowsでセッションマネージャーを使う
WindowsのEC2インスタンスでセッションマネージャーを使ってみたことがない …
-
-
「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー」執筆裏話
今日2019/4/20発売となりました「AWS認定資格試験テキスト AWS認定ク …
-
-
Former2で既存リソースのCloudFormationテンプレート出力を試してみた
JAWS DAYS 2020の資料確認のお手伝いを少ししてまして、「ゼロからはじ …
-
-
ユーザーガイドの方法でGithubからCodeCommitへリポジトリを移行する
GitリポジトリをAWS CodeCommitに移行するを参照しました。 環境 …
-
-
ヤマムギvol.27 Amazon Route 53プライベートホストゾーンとリゾルバーのデモをしました
今日は『AWS認定資格試験テキスト&問題集AWS認定ソリューションアーキ …
-
-
Rocket.ChatのOutGoingWebhookからのAPI GatewayからのDynamoDB
少し前に、Rocket.ChatからOut Going Webhookを設定して …
-
-
AD Connectorを作成してシームレスにドメイン参加する
VPN接続先のADで管理されているドメインにEC2 Windowsインスタンスか …
-
-
AWS Lambda(Python3)でSelenium + Chrome Headless + でwebスクレイピングする
インターネット上に公開されている情報をDynamoDBにつっこみたいだけなので、 …




















