すべての記事

EmDashのD1コスト対策を紹介するぞ

※本記事は広告を含みます

はじめに

どうも、職業エンジニアです。
個人ブログの基盤をCloudflare Workers + D1(EmDash)に移行してから、エッジならではのレスポンスの速さは感じていたものの、数日運用してみると

「アクセス数の割に、D1のRead行数が異常なペースで増えている……」

という状態になりました。

D1は無料枠(1日500万行Read、10万行Write)が非常に太っ腹ですが、油断すると無駄なクエリであっという間にリソースを削られます。このブログも最初の3日くらいは500万行Read超えてサイトが止まったりしてましたし。

そんな訳で毎日クエリ監視し調査を重ねた結果、D1を圧迫していたのは「外部からの悪質なボット巡回」と、ブログでは当たり前に配置しがちな「カテゴリ・タグ・404ページなどの内部クエリ設計」が原因っぽいことが分かりました。

今回は、D1のコストを最小化するために実施した「WAFによるボット遮断」と「重いUIパーツの見直し」、そして実際に運用してみて感じたEmDashスタックの導入リスクについて語っていこうと思います。

内部要因:D1を食う「重いUIパーツ」と「404の罠」

アクセスログやクエリを見直す中で、特にD1のReadコストを押し上げていた容疑者がはっきりしてきました。

① カテゴリ・タグクラウド・月別アーカイブ

ブログのサイドバーやフッターによく置くナビゲーションですが、これらをリクエストごとに動的生成すると強烈な負荷になります。 特にコストを引き上げるのが「各タグ・カテゴリ横の記事件数表示(COUNT(*) や GROUP BY)」です。

  • 記事数やタグ・リレーションが増えるほどスキャンする行数が増大する。
  • 1ページ表示するたびに「記事本体の取得」+「全タグの集計」が走り、Read行数が乗算で跳ね上がる。

なので、運用を長く続けているブログほどコストが跳ねるんですよね。このブログもなんだかんだで5年以上運用しており、記事数も300件くらいあります。ここは見直した方が良さそうです。

② スキャナーボットがアクセスしまくる「404ページ」

外部の脆弱性スキャナーやクローラーは、存在しないPHPファイルやWordPressの管理パスなんかに大量アクセスしてきます。 このとき、もし404(Not Found)ページのリッチ化のために「おすすめ記事一覧」や「タグ一覧」をD1から引いていると、攻撃者が存在しないURLを叩くたびにD1のReadが大量消費されるというクソみたいなことが起こります。うざい!

外部要因:CDNキャッシュをすり抜けるボット群

内部のクエリだけでなく、外部からのアクセス自体も悪質でした。Cloudflareのセキュリティログを解析したところ、数時間の間に以下のようなアクセスが集中していました。

  • キャッシュバスター付きボット: /hogehoge/fuga?cachebuster=<UUID> のように、ランダムパラメータを付与してCDNキャッシュを意図的に無効化し、毎回Workerまで届かせるアクセス。
  • 動的APIへの直接アクセス: /api/likes や /api/likes/ranking など、D1のSELECT/UPDATEを直接叩くエンドポイントを海外プロキシ経由でスクレイピング。
  • WordPress/PHPの脆弱性スキャン: /wp-content/... や .php を探るスキャン。

Cloudflare標準の「Bot Fight Mode」では、これらを完全には防ぎきれず、リクエスト自体がWorkerに到達してD1が動いてしまうケースがありました。

D1を守るための対策内容

これらを踏まえ、「内部のクエリ見直し」と「エッジでのWAF設定」を組み合わせました。

内部対策:UIパーツの軽量化とキャッシュ

まずはコンテンツの見直しなどアプリケーション側でできることを実施していきます。

  • 記事件数表示の廃止または固定化: タグクラウドやカテゴリ一覧から記事件数の動的集計を削る。どうしても出したい場合はリクエスト毎に集計せず、KVやCache APIに長時間キャッシュする。
  • 404ページの完全軽量化: 存在しないURLへのアクセス時は、D1へのクエリを一切発行せず、最小限の静的HTMLのみを即座に返す。

このブログではこれらの要素を「人気記事ランキング(Cloudflare KV & workersで作成したもの)」と「おすすめ記事(静的)」に置き換えて対策をしました。他の記事も見てもらう、という目的であればこれで充分でしょう。

また、キャッシュの長期化も実施済み。

加えて、CloudflareのWAFを通過しちゃったアクセスに対してアプリケーション側でWAF的な処理を入れています。

これらの実施でD1コストが大きく減少したので、やる価値ありだと思います。

外部対策:Cloudflare WAFによるカスタムルール

Cloudflare無料プランのカスタムルール上限「5枠」を使い切り、エッジで即Block(403)する構成を作りました。

順序

ルール名

アクション

対象

1

Allow Verified Bots

スキップ

Googlebot等の正規検索クローラーを保護

2

Protect Admin from Overseas

Managed Challenge

管理画面(/_emdash/等)への海外アクセスを検証

3

Block Unwanted Scrapers & Empty UA

ブロック

空UA、アクセス数が多い不要な巡回ボット

4

Block WordPress & PHP Scans

ブロック

.php、/wp-*、/wordpress 等の脆弱性スキャン

5

Block Overseas API & Heavy Endpoints

ブロック

/api/* への海外アクセス(エンドポイント防衛)

通常の記事ページ(静的コンテンツ)は海外読者にも開放したまま、D1を消費する動的APIやスキャンだけを落とす、というイメージでルールを組んでいます。なお、これを突破したものを内部対策で入れた独自WAFで落としています。

EmDashやWorkers+D1は手を出しづらいのか?

「カテゴリやタグの件数表示見直し」「404の軽量化」「ボット対策」「キャッシュの適用」まで徹底すれば、個人ブログ程度のアクセス規模なら余裕でD1の無料枠に収まります。

しかし、率直に言って「運用リスクや導入コストを踏まえると、EmDash(およびWorkers+D1構成)は万人にはまだ手を出しづらい」というのが正直な感想です。特にWordPressからEmDashへ移行をする際は注意が必要です。難しいから。というかWordPressがお手軽過ぎるのかもしれない。

  • 手軽に始めるとクォータ死のリスクがある: WordPressのように「とりあえず動けばOK」の感覚で運用すると、ボットの急襲や少し重い集計パーツ1つで無料枠を突破しかねない。なんなら有料にして広がった制限すら超える可能性がある。有料プランの場合は超えたら従量課金。。
  • インフラとアプリの両方の勘所が必要: 「CDNキャッシュの挙動」「WAFルールのチューニング」「エッジでのDBスキャン行数意識」など、エンジニアリングの前提知識が求められる。数字を見ないで運用するのは難しい。
  • 静的サイトジェネレーターという強力なライバル: ブログ用途であれば、AstroやHugoをCloudflare PagesやGitHub Pagesでホストした方が「DB自体が存在しないためコスト爆発のリスクが原理的にゼロ」という圧倒的な安心感がある。

という感じで、WordPressの代替になるにはまだ難しすぎるのかなという印象ですね。簡単インストール!とか従量課金なし、固定プラン!とか出てくれば非エンジニア層も使いやすくなると思います。

それでもWorkers + D1を選ぶ面白さ

手放しでおすすめできる状態ではないものの、サーバーレス構成とはどんなもんなのかを体験できるし、カスタマイズもしやすかったりするので、触っていて面白さはあります。

運用リスクを理解し、「エッジで門前払いし、DBを極力叩かせない」という防御の作法さえ身につければ、極めて低コストで爆速なブログ環境が手に入ります。同じ構成でクエリ消費に悩んでいる方の参考になれば。

さいごに

ぶっちゃけると、このブログの記事データmdでローカル管理されているのでDBなしでworkersで動かす構成にもできます。今後のEmDashの進化を追いたいので当分はEmDashを使い続けてみるつもりですが、最終的には静的運用になっているかも。。

スポンサーリンク