Amazon SageMakerプロジェクトを使用してMLパイプラインを構築
目次
SageMakerプロジェクトの作成
SageMaker Studioの左ナビゲーションで[Deployments]-[Projects]を選択しました。
[+ Create project]をクリックしました。
[Not supported]MLOps template for model building, training, and deploymentを選択して、[Next]ボタンをクリックしました。
Nameを入力して、[Create Project]ボタンをクリックしました。
プロジェクト作成が開始されて6分ぐらいで作成完了しました。
作成されたリソースの確認
プロジェクト名をクリックするとリポジトリが2つ見えます。
[Not supported]となっていたのはCodeCommitを使うテンプレートだったからですね。
CloudFormationスタックが作成されていました。
スクリプトやパイプラインアーティファクトストア向けのS3バケットも作成されています。
モデルビルドとモデルデプロイのパイプラインがありますが失敗しています。
CodeCommitリポジトリも2つ作成されています。
Readmeには構成などの情報があります。
パイプラインの実行
モデルビルドのパイプラインを[変更をリリースする]ボタンから再実行しました。
CodeBuildでcodebuild-buildspec.ymlによってSageMaker Pipelineが定義されて実行されています。
モデルビルドのパイプラインが成功で完了しました。
SageMaker Model Registoryではモデルが作成され新しいバージョンが承認待ちになっています。
EventBridgeルールには次のルールが作成されていて、モデルを承認するとモデルデプロイのCodePipelineが実行されるようになっています。
|
1 2 3 4 5 6 7 8 9 10 11 |
{ "detail-type": ["SageMaker Model Package State Change"], "source": ["aws.sagemaker"], "detail": { "ModelPackageGroupName": ["mlops-demo-project-p-xxxxxxxxx"], "ModelApprovalStatus": [{ "anything-but": ["PendingManualApproval"] }] } } |
モデルのバージョンを承認しました。
承認するとモデルデプロイのCodePipelineが実行されました。
ステージング環境へのデプロイが完了すると承認待ちになります。
ステージングデプロイ後のCodeBuildのテスト結果ログを確認するとsuccessになっています。
承認しました。
本番環境のエンドポイントも作成されました。
最後までお読みいただきましてありがとうございました!
「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。
「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第3版」という本を書きました。
「AWS認定資格試験テキスト AWS認定AIプラクティショナー」という本を書きました。
「AWS教科書 AWS認定デベロッパーアソシエイト テキスト&問題集 」という本を書きました。
「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。
「AWSではじめるLinux入門ガイド」という本を書きました。
開発ベンダー5年、ユーザ企業システム部門通算9年、ITインストラクター5年目でプロトタイプビルダーもやりだしたSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。
このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。
このブログは経験したことなどの共有を目的としており、手順や結果などを保証するものではありません。
ご参考にされる際は、読者様自身のご判断にてご対応をお願いいたします。
また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。
関連記事
-
-
AWS Storage Gateway File Gateway on EC2インスタンスにmacOSからNFS接続
S3バケットの作成 S3バケットはあらかじめ作成しておきました。 マネジメントコ …
-
-
執筆環境(PyCharm, CodeCommit, CodePipeline, S3, Lambda, 署名付きURL)
2018年から、年に1回ぐらい商業本の執筆をさせていただいております。 2020 …
-
-
[事前準備] JAWS-UG 関西IoT専門支部「マクニカkibo + AWS IoTハンズオン」
来る12/19(土)の JAWS-UG 関西IoT専門支部第一回勉強会「マクニカ …
-
-
Amazon LinuxにAlfresco Community Editionをインストールする
ダウンロード準備 Alfresco公式サイトで、「エンタープライズコンテンツ管理 …
-
-
Cloud9 Python3でpipも3にする
このブログは、2019/10/20に書いた、 Cloud9のAMIがCloud9 …
-
-
Rocket.ChatからOut Going Webhookを設定してみる
API GatewayとLambda とりあえず、どんなデータが飛んでくるのか見 …
-
-
Amazon Data Lifecycle Manager(DLM)が東京リージョンで使えるようになったのでLambdaでAMI自動取得から乗り換えた
EBSのスナップショットを自動で作成してくれるAmazon Data Lifec …
-
-
JAWS FESTA 2017 Reverse X re:Birth
JAWS FESTA 2017 中四国 今年はブログタイトル「JAWS FEST …
-
-
Kinesis Data AnalyticsをKinesis Data Streamsに接続してSQL検索する
Amazon Kinesis Data StreamsにTwitter検索データ …
-
-
AWS GlueでAurora JDBC接続でS3へのジョブを実行
Aurora Serverless v1のMySQLタイプデータベースからS3へ …




















