AWS EC2 インスタンスステータスのチェックで失敗原因はPHP-FPMのOOM-KILLER

2015/05/22 2015/05/28

先週に引き続きEC2のインスタンスステータスチェックで失敗

再起動するも失敗するので今回もAMIからインスタンスを作成して復旧。

3回目の再起動で起動したので、/var/log/messagesを確認。

May 21 20:56:25 ip-172-31-6-191 kernel: [768428.926274] php-fpm invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0

1	May 21 20:56:25 ip-172-31-6-191 kernel: [768428.926274] php-fpm invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0

見事にphp-fpmでoom-killerが発動していました。

久しぶりに見ました、oom-killer。

なので、スペック不足なのか、他に何か手段がないのかは別途調査することにしまして、とりあえず毎日再起動する事にしました。

普通に粗いやり方ですが以下で。

※Amazon Linuxではcrontabは自動実行になっています。

$ sudo crontab -e

1	$ sudo crontab -e

0 4 * * * /sbin/shutdown -r now

1	0 4 * * * /sbin/shutdown -r now

近い時間でテストしてみて問題ないか確認して再設定しました。

オーバーコミットパラメータに2を設定して、オーバーコミットを無効にしてます。

vm.overcommit_memory=2
vm.overcommit_ratio=99

1 2	vm.overcommit_memory=2 vm.overcommit_ratio=99

とりあえずこれで1週間様子を見て、今のところ問題ありません。

最後までお読みいただきましてありがとうございました！
【PR】「AWS認定試験対策 AWS クラウドプラクティショナー」という本を書きました。

開発ベンダー5年、ユーザ企業システム部門通算9年、ITトレーナー2年目のSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。

このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。

また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。

: php-fpm で Out of memoryが発生した際にメール通知する(AWS CloudWatch , Amazon SNS)

AWS CloudWatch LogsエージェントでAmazon EC2上のNg …

: Developers Summit 2018 「AWSのフルマネージドな環境でCI/CDをやってみよう！AWS Cloud9からAWS Fargateへの継続的デプロイをご紹介」を聞きました

※写真は展示のAmazon Echoです。以下は、思ったことや気になったことを …

: SendGridのイベントをAPI Gateway -> Lambda(Python) -> DynamoDBに格納する

SendGridのメールイベントログはコンソールで確認出来るのは直近7日分で一括 …

: VirtualBoxでCentOS7+Oracle12c環境を構築するの2(Oracle12cインストール)

前編はこちら「VirtualBoxでCentOS7+Oracle12c環境を構築 …

: PyCharmにAWS CloudFormationプラグインをインストールして入力補完してみる

JetBrainsのPython統合開発環境(IDE)のPyCharmを1年ちょ …

: ECR(Amazon Elastic Container Registry)にコンテナイメージをアップロードする

「Pandocサーバーのコンテナイメージを作成する」で作成したイメージをAWS …

: AWS LambdaでChrome HeadlessドライバをAWS Lambda Layersから使う

この記事はSelenium/Appium Advent Calendar 201 …

: AWS Summit 2016 Tokyoに参加してきました (Day2)

馬込は非常に良い天気です。泊まっている部屋が2Fでしたので窓を明けると歩いてい …

: API GatewayのアクセスログをCloudWatchに記録する

Amazon API GatewayのアクセスログをCloudWatchに記録で …

: DS18B20センサー+Raspberry Piで取得した温度をAmazon Kinesis FirehoseからS3へ格納してAthenaでクエリーしたのをQuickSightで可視化する

JAWS DAYS 2017でやりますハンズオンの「[IoTハンズオン] Ras …