AWS EC2 インスタンスステータスのチェックで失敗原因はPHP-FPMのOOM-KILLER

2015/05/22 2015/05/28

先週に引き続きEC2のインスタンスステータスチェックで失敗

再起動するも失敗するので今回もAMIからインスタンスを作成して復旧。

3回目の再起動で起動したので、/var/log/messagesを確認。

May 21 20:56:25 ip-172-31-6-191 kernel: [768428.926274] php-fpm invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0

1	May 21 20:56:25 ip-172-31-6-191 kernel: [768428.926274] php-fpm invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0

見事にphp-fpmでoom-killerが発動していました。

久しぶりに見ました、oom-killer。

なので、スペック不足なのか、他に何か手段がないのかは別途調査することにしまして、とりあえず毎日再起動する事にしました。

普通に粗いやり方ですが以下で。

※Amazon Linuxではcrontabは自動実行になっています。

$ sudo crontab -e

1	$ sudo crontab -e

0 4 * * * /sbin/shutdown -r now

1	0 4 * * * /sbin/shutdown -r now

近い時間でテストしてみて問題ないか確認して再設定しました。

オーバーコミットパラメータに2を設定して、オーバーコミットを無効にしてます。

vm.overcommit_memory=2
vm.overcommit_ratio=99

1 2	vm.overcommit_memory=2 vm.overcommit_ratio=99

とりあえずこれで1週間様子を見て、今のところ問題ありません。

開発ベンダー5年、ユーザ企業システム部門通算9年、ITトレーナー1年目のSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。

このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。

また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。

: 試したい事があるのでAWS でとりあえずAmazon Linuxのサーバを作る

1年間の無料キャンペーン期間中に検証するとある勉強会でせっかくAWSのアカウン …

: slackのbotをAWS Lambda(Python)+API Gatewayで構築

slackで投稿した内容に応じて返信したり調べ物したりしてくれるbotですが、こ …

: AWS Summit Tokyo 2017 聴講したセッションのメモ

2017年6月に参加しましたAWS Summitで聴講したセッションのメモを記し …

: CUSTOMINEを使ってkintoneからAWS Lambdaを実行する(Cognito認証付き)

先日の記事「kintoneのカスタマイズ開発を超速にするCUSTOMINE」で書 …

: 「X-Tech JAWS 【第2回】~9割のX-Techと1割の優しさで切り拓く未来~」に行ってきました

「X-Tech JAWS 【第2回】~9割のX-Techと1割の優しさで切り拓く …

: Windows 8.1 with bing 64bit とLinux Mint 17 Mate 64bit のデュアルブート環境構築

目的 Windows 8.1 with bing 64bitがプリインストールさ …