AWS EC2 インスタンスステータスのチェックで失敗原因はPHP-FPMのOOM-KILLER

2015/05/22 2015/05/28

先週に引き続きEC2のインスタンスステータスチェックで失敗

再起動するも失敗するので今回もAMIからインスタンスを作成して復旧。

3回目の再起動で起動したので、/var/log/messagesを確認。

May 21 20:56:25 ip-172-31-6-191 kernel: [768428.926274] php-fpm invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0

1	May 21 20:56:25 ip-172-31-6-191 kernel: [768428.926274] php-fpm invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0

見事にphp-fpmでoom-killerが発動していました。

久しぶりに見ました、oom-killer。

なので、スペック不足なのか、他に何か手段がないのかは別途調査することにしまして、とりあえず毎日再起動する事にしました。

普通に粗いやり方ですが以下で。

※Amazon Linuxではcrontabは自動実行になっています。

$ sudo crontab -e

1	$ sudo crontab -e

0 4 * * * /sbin/shutdown -r now

1	0 4 * * * /sbin/shutdown -r now

近い時間でテストしてみて問題ないか確認して再設定しました。

オーバーコミットパラメータに2を設定して、オーバーコミットを無効にしてます。

vm.overcommit_memory=2
vm.overcommit_ratio=99

1 2	vm.overcommit_memory=2 vm.overcommit_ratio=99

とりあえずこれで1週間様子を見て、今のところ問題ありません。

開発ベンダー5年、ユーザ企業システム部門通算9年、ITトレーナー2年目のSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。

このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。

また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。

: AWS Code Commitをプライベートリポジトリとして使う

GitHubでもいいんですが、アクセスキーとかパスワードとかコンフィグ系で書いて …

: php-fpm で Out of memoryが発生した際にメール通知する(AWS CloudWatch , Amazon SNS)

AWS CloudWatch LogsエージェントでAmazon EC2上のNg …

: Amazon Linux にnodejsとmongoDBをインストールする

EPEL リポジトリを利用してnodejsとnpmをインストールする [cray …

: AlexaにAWSの最新Feedを読み上げてもらう(Lambda Python)

年末にAmazon Echo Dotを購入しましたので、練習がてらAlexaスキ …

: kintoneでEveryoneに権限が設定されているアプリをAWS Lambdaで一括チェックする

こないだ、kintone Cafeでユーザーが自由に作成している環境だと、どんな …

: Linux Mint 17 MateにNode.js LTSバージョンをインストールする

明日の勉強会で必要なのでLinux MintにNode.js LTSバージョン( …

: AWSのAmazon LinuxにGitマスターサーバをインストールしてRedmineリポジトリブラウザで見る

Amazon LinuxにGitをインストールする Gitをインストールして自動 …

: Linux Mint 17 MATE 64bit にJDKを入れなおしてEclipseをインストールする

Linux Mint 17のJDKを入れなおすソフトウェア・パッケージを最新に …