はじめに

Webサーバーを公開していると、実に様々なアクセスがやってきます。

  • 存在しないWordPressの管理画面
  • 設置した覚えのない設定ファイル
  • .env などの機密情報を含む可能性があるファイル
  • 利用していないCMSやプラグインのパス

などを片っ端から探索するアクセスが記録されています。

当然ながら、存在しないファイルへのアクセスはHTTP 404(Not Found)を返します。

筆者のGo To Sleep.

筆者のvpsに仕込んでいるカスタム404.html。

ここに

If you're an automated crawler: take the hint, drop the act, and go to sleep.

という言葉を仕込んでいます。単純なhtmlファイルなのでサーバの仕事はかなり軽減されますが、これら機械的な探索にサーバーのリソースを消費させる理由もありません。

(なお、このネタはWWEのスーパースターであるCMパンクの伝説の『Pipe Bomb』を本歌に取ったものです。また、「サーバ運用とプロレスがどう関係あるんだ」に関しては「そういうものだ」と思っていただきたいです。

筆者環境

今回の構成は以下の通りです。

  • OS:Ubuntu Server
  • Webサーバー:Apache 2.4
  • アクセス制御:Fail2ban / iptables(UFW)
  • 監視対象:Apacheのアクセスログ(combined形式)

実装するルールは以下です。

項目設定内容
検知対象HTTP 404
検知期間300秒(5分間)
検知回数10回
遮断方法iptables-allports
遮断期間無期限
除外対象favicon.ico、robots.txt等

なお、今回の設定はHTTP 404を一定回数発生させたIPを遮断するものです。

そこで今回は、Fail2banを利用して5分間に10回以上のHTTP 404を発生させたIPアドレスを自動的に遮断する設定を行いました。

さっくりとした手順

  1. Fail2banの検知フィルターを作成します。
  2. Fail2banのJail.localを設定します。
  3. 正規表現の確認を行います。
  4. Fail2banの反映を行います。

1. Fail2banの404検知フィルタを作成

最初に、Apacheのアクセスログから404エラーを抽出するフィルタを作成します。

要root顕現。教義・信仰に則った手段作成してください。

/etc/fail2ban/filter.d/apache-404.conf

以下の内容を記述します。

[Definition]
failregex = ^<HOST> \S+ \S+ \[[^\]]+\] "(?:GET|POST|HEAD) [^"]+ HTTP/[0-9.]+" 404 (?:[0-9]+|-)(?: .*)?$
ignoreregex = ^<HOST> .*"(?:GET|POST|HEAD) [^"]*(?:robots\.txt|favicon\.ico|apple-touch-icon[^"]*\.png)[^"]* HTTP/[0-9.]+" 404 .*

2. Jailの設定

続いて、Fail2banの監視条件を設定します。

  • ファイルのバックアップ

Fail2banは下手に設定するとサーバのロックアウトが普通にやって来ます。というかサーバそのものがGo To Sleepし、自分自身は眠れないという形になります。

なので、バックアップと切り戻しは密に行います。

sudo cp -pi /etc/fail2ban/jail.local /path/to/backup/directory/jail.local.$(date +%Y%m%d)

バックアップディレクトリは任意のものを利用します。バックアップの命名規則もそれに従います。

  • ファイルのバックアップ確認

多くの方はls -lやcatによる存在確認、中身確認を行うでしょう。

しかし、筆者は

diff -u /path/to/backup/directory/jail.local.$(date +%Y%m%d) /etc/fail2ban/jail.local

と、diffによる確認を行っています。これは

  • オリジナルファイルとバックアップファイルを同時に確認できる
  • cpのつもりがmvを使っていた
    • diff -uは、両方のファイルのいずれかの(あるいは両方とも)存在しない場合にもエラーを出します。この、まれによくあるケースにも対応できます。
  • 編集後の確認でも有効

のため、常に使っています。なお、cpの時とsrcとdstが逆なのは改めて説明します。

  • ファイルの編集
/etc/fail2ban/jail.local

こちらを教義・信仰に則った手段で追記します。

[apache-404]
enabled = true
filter = apache-404

# 遮断方式
action = iptables-allports

# Apacheアクセスログ
logpath = /var/log/apache2/*access.log

# 5分間に10回検知
maxretry = 10
findtime = 300

# 遮断期間(無期限)
bantime = -1

# 除外IP
ignoreip = 127.0.0.0/8 ::1 203.0.113.10 198.51.100.25

各設定について

maxretry / findtime

maxretry = 10
findtime = 300

300秒以内に10回の検知が発生すると、対象IPをBANします。この設定であれば、通常のリンク切れを数回踏んだ程度では遮断されません。

action

action = iptables-allports

検知したIPアドレスからの通信を、iptablesを利用して遮断します。

注意したいのは、ここで404エラーを乱発した場合、HTTP/HTTPSだけではなく、SSHなどを含む全ポートへの通信が遮断対象となることです。

そのため、管理者のIPアドレスを誤ってBANすると、SSH接続まで失う可能性があります。

なお、iptablesのバックエンドやIPv6への対応状況は環境によって異なります。Ubuntuでnftablesを利用している場合も含め、実際の遮断ルールを確認する必要があります。

bantime

bantime = -1

今回は無期限BANとしています。これはかなり強い設定です。

動的IPアドレスが再割り当てされた場合や、複数の利用者が同一のグローバルIPを共有している場合、正規の利用者まで遮断する可能性があります。

そのため、初期運用では次のように24時間程度に設定して、誤検知が発生しないことを確認する方が安全です。

bantime = 86400

ignoreip

ignoreip = 127.0.0.0/8 ::1 203.0.113.10 198.51.100.25

管理者自身や、監視サーバーなどのIPアドレスを除外します。

ここで指定しているグローバルIPアドレスは説明用のものです。実際の環境では管理用IPアドレスに置き換えます。

なお、Jail単位でignoreipを指定すると、グローバル設定の値を上書きする場合があるため、既存の除外設定も確認しておきます。

  • 編集後の確認
diff -u /path/to/backup/directory/jail.local.$(date +%Y%m%d) /etc/fail2ban/jail.local

上記の設定が狙い通りかを確認します。ここで、srcとdstを逆にする意味が出てきます。

削ったところが-、足したところが+で表示されるからです。ここで、cpの時と同じ手順で確認すると「足したところが-、削ったところが+で表示される」事態が発生します。

「ここが足したところです」と面と向かって確認できるような状況というのは、筆者の経験から言うと「心身共に最高のコンディションである」ような状況です。

緊急を伴うような、それもワンオペで直感で「足したところが-、削ったところが+で表示される」を秒で納得できる。そしてそれを他の運用者に任せられる。

そういう方がいたらお目にかかりたいというのが筆者の本音です。

サーバという「ワンミス即死」が普通に存在し、「職人芸を使わなくても即死を免れることができる」世界にいる以上、この恩恵にはあずかっておきたいところです。

3. 正規表現の動作確認

設定を反映する前に、正規表現が実際のアクセスログに一致するかを確認します。

sudo fail2ban-regex \
  /var/log/apache2/example.com_access.log \
  /etc/fail2ban/filter.d/apache-404.conf

実行結果は以下の通りです。

※以下は元のフィルタで取得した実行結果です。上記の修正版フィルタでは一致件数が変わります。

Running tests
=============

Use   failregex filter file : apache-404, basedir: /etc/fail2ban
Use         log file : /var/log/apache2/example.com_access.log
Use         encoding : UTF-8

Results
=======

Failregex: 1225 total

Ignoreregex: 22 total

Date template hits:
  27354

Lines: 27354 lines, 22 ignored,
1225 matched, 26107 missed
[processed in 19.73 sec]

今回のログでは、27,354行のうち1,225行が404検知条件に一致し、22行が除外条件に一致していました。

確認するポイントは以下の通りです。

  1. Failregex に検知対象のログが表示されていること
  2. Ignoreregex に除外対象のログが表示されていること
  3. Date template hits でログの日時が正しく認識されていること

また、検知数だけでなく、どのログが一致したのかを確認することも重要です。

sudo fail2ban-regex \
  /var/log/apache2/example.com_access.log \
  /etc/fail2ban/filter.d/apache-404.conf \
  --print-all-matched

これにより、実際にどのアクセスがBAN判定の対象になるかを確認できます。

なお、ここで表示される1,225件は検知条件に一致したログの総数であり、1,225個のIPアドレスがBANされるという意味ではありません。

実際のBAN判定には、IPアドレスごとの検知回数と時間が使用されます。

4. Fail2banへの反映

フィルタの動作に問題がなければ、設定を反映します。

sudo fail2ban-client reload

続いて、Jailが正常に起動しているかを確認します。

sudo fail2ban-client status apache-404

正常に動作していれば、以下のような情報が表示されます。

Status for the jail: apache-404
|- Filter
|  |- Currently failed: 0
|  |- Total failed:     0
|  `- File list:        /var/log/apache2/example.com_access.log
`- Actions
   |- Currently banned: 0
   |- Total banned:     0
   `- Banned IP list:

ここで確認したいのは、

  • Jailが有効になっていること
  • File list に監視対象のアクセスログが表示されること
  • BAN数が取得できること

です。

なお、reloadは通常、既存のBAN状態を維持して設定を再読み込みしますが、Jailの削除やアクション変更などを伴う場合は挙動が異なる可能性があります。

また、iptablesへのルール追加が正常に行われているかについても、別途確認しておくと確実です。

5. 誤BANしたIPアドレスの解除

正規の利用者や管理者自身のIPアドレスがBANされてしまった場合は、以下のコマンドで解除できます。

sudo fail2ban-client set apache-404 unbanip 192.0.2.100

192.0.2.100は解除対象のIPアドレスに置き換えてください。

また、現在BANされているIPアドレスは以下のコマンドで確認できます。

sudo fail2ban-client status apache-404

ただし、全ポート遮断を行っている場合、管理者自身がSSHで接続できなくなる可能性があります。

そのため、管理者IPの除外設定に加え、必要に応じてVPSの管理コンソールなど、SSH以外の復旧手段も確保しておく必要があります。

運用上の注意点

今回の設定には、いくつか注意点があります。

404だけで攻撃とは判断できない

404は正常なWebサイトでも発生するステータスコードです。

リンク切れ、URLの入力間違い、古いブックマークなどでも発生します。

また、脆弱性スキャナーの中には404を発生させず、HTTP 200や403などの応答を確認しながら探索するものも存在します。

したがって、この設定だけでスキャナーを完全に防げるわけではありません。

アクセスログの重複監視

複数のVirtualHostを運用している場合、ログファイルをまとめて監視できます。

logpath = /var/log/apache2/*access.log

ただし、ワイルドカードに一致するログを個別にも指定すると、同一ログを重複して監視する構成になる可能性があります。

そのため、今回の設定ではワイルドカードによる指定に統一しています。

なお、ログファイルの命名規則によってはワイルドカードに一致しない場合もあるため、File listで確認します。

終わりにかえて:You are the Problem.

昨今の不正アクセスは

  • .env
  • ./aws/credentials
  • .git

など、「ワンチャン、閲覧できれば攻撃の手掛かりにできる」という致命的なファイルを確認してから脆弱性攻撃に移るケースがとても多いという印象。

これらに対して404を返し続けるより、「存在しないファイルを漁ってくる以上、攻撃者である」と認定します。

これに対して、生成AIなら言うでしょう。「もちろん、全ての404を狙ったアクセスが不正アクセスとは言えません」と。

これに関して「いるかいないかのノックを連打するような奴に不正もへったくれもあるもんか」という言葉をぶつけます。

YOU ARE
THE PROBLEM.

と、筆者の404.htmlは開き直って(花道の入り口で)あぐらをかいて正論をぶちまけますが、

その正論を続ける相手に対しては「マイクをオフにする」手段も必要、というお話でした。