EmDashのD1コスト対策を紹介するぞ
※本記事は広告を含みます
はじめに
どうも、職業エンジニアです。
個人ブログの基盤をCloudflare Workers + D1(EmDash)に移行してから、エッジならではのレスポンスの速さは感じていたものの、数日運用してみると
「アクセス数の割に、D1のRead行数が異常なペースで増えている……」
という状態になりました。
D1は無料枠(1日500万行Read、10万行Write)が非常に太っ腹ですが、油断すると無駄なクエリであっという間にリソースを削られます。このブログも最初の3日くらいは500万行Read超えてサイトが止まったりしてましたし。
そんな訳で毎日クエリ監視し調査を重ねた結果、D1を圧迫していたのは「外部からの悪質なボット巡回」と、ブログでは当たり前に配置しがちな「カテゴリ・タグ・404ページなどの内部クエリ設計」が原因っぽいことが分かりました。
今回は、D1のコストを最小化するために実施した「WAFによるボット遮断」と「重いUIパーツの見直し」、そして実際に運用してみて感じたEmDashスタックの導入リスクについて語っていこうと思います。
内部要因:D1を食う「重いUIパーツ」と「404の罠」
アクセスログやクエリを見直す中で、特にD1のReadコストを押し上げていた容疑者がはっきりしてきました。
① カテゴリ・タグクラウド・月別アーカイブ
ブログのサイドバーやフッターによく置くナビゲーションですが、これらをリクエストごとに動的生成すると強烈な負荷になります。 特にコストを引き上げるのが「各タグ・カテゴリ横の記事件数表示(COUNT(*) や GROUP BY)」です。
- 記事数やタグ・リレーションが増えるほどスキャンする行数が増大する。
- 1ページ表示するたびに「記事本体の取得」+「全タグの集計」が走り、Read行数が乗算で跳ね上がる。
なので、運用を長く続けているブログほどコストが跳ねるんですよね。このブログもなんだかんだで5年以上運用しており、記事数も300件くらいあります。ここは見直した方が良さそうです。
② スキャナーボットがアクセスしまくる「404ページ」
外部の脆弱性スキャナーやクローラーは、存在しないPHPファイルやWordPressの管理パスなんかに大量アクセスしてきます。 このとき、もし404(Not Found)ページのリッチ化のために「おすすめ記事一覧」や「タグ一覧」をD1から引いていると、攻撃者が存在しないURLを叩くたびにD1のReadが大量消費されるというクソみたいなことが起こります。うざい!
外部要因:CDNキャッシュをすり抜けるボット群
内部のクエリだけでなく、外部からのアクセス自体も悪質でした。Cloudflareのセキュリティログを解析したところ、数時間の間に以下のようなアクセスが集中していました。
- キャッシュバスター付きボット:
/hogehoge/fuga?cachebuster=<UUID>のように、ランダムパラメータを付与してCDNキャッシュを意図的に無効化し、毎回Workerまで届かせるアクセス。 - 動的APIへの直接アクセス:
/api/likesや/api/likes/rankingなど、D1のSELECT/UPDATEを直接叩くエンドポイントを海外プロキシ経由でスクレイピング。 - WordPress/PHPの脆弱性スキャン:
/wp-content/...や.phpを探るスキャン。
Cloudflare標準の「Bot Fight Mode」では、これらを完全には防ぎきれず、リクエスト自体がWorkerに到達してD1が動いてしまうケースがありました。
D1を守るための対策内容
これらを踏まえ、「内部のクエリ見直し」と「エッジでのWAF設定」を組み合わせました。
内部対策:UIパーツの軽量化とキャッシュ
まずはコンテンツの見直しなどアプリケーション側でできることを実施していきます。
- 記事件数表示の廃止または固定化: タグクラウドやカテゴリ一覧から記事件数の動的集計を削る。どうしても出したい場合はリクエスト毎に集計せず、KVやCache APIに長時間キャッシュする。
- 404ページの完全軽量化: 存在しないURLへのアクセス時は、D1へのクエリを一切発行せず、最小限の静的HTMLのみを即座に返す。
このブログではこれらの要素を「人気記事ランキング(Cloudflare KV & workersで作成したもの)」と「おすすめ記事(静的)」に置き換えて対策をしました。他の記事も見てもらう、という目的であればこれで充分でしょう。
また、キャッシュの長期化も実施済み。
加えて、CloudflareのWAFを通過しちゃったアクセスに対してアプリケーション側でWAF的な処理を入れています。
これらの実施でD1コストが大きく減少したので、やる価値ありだと思います。
外部対策:Cloudflare WAFによるカスタムルール
Cloudflare無料プランのカスタムルール上限「5枠」を使い切り、エッジで即Block(403)する構成を作りました。
順序 | ルール名 | アクション | 対象 |
|---|---|---|---|
1 | Allow Verified Bots | スキップ | Googlebot等の正規検索クローラーを保護 |
2 | Protect Admin from Overseas | Managed Challenge | 管理画面( |
3 | Block Unwanted Scrapers & Empty UA | ブロック | 空UA、アクセス数が多い不要な巡回ボット |
4 | Block WordPress & PHP Scans | ブロック |
|
5 | Block Overseas API & Heavy Endpoints | ブロック |
|
通常の記事ページ(静的コンテンツ)は海外読者にも開放したまま、D1を消費する動的APIやスキャンだけを落とす、というイメージでルールを組んでいます。なお、これを突破したものを内部対策で入れた独自WAFで落としています。
EmDashやWorkers+D1は手を出しづらいのか?
「カテゴリやタグの件数表示見直し」「404の軽量化」「ボット対策」「キャッシュの適用」まで徹底すれば、個人ブログ程度のアクセス規模なら余裕でD1の無料枠に収まります。
しかし、率直に言って「運用リスクや導入コストを踏まえると、EmDash(およびWorkers+D1構成)は万人にはまだ手を出しづらい」というのが正直な感想です。特にWordPressからEmDashへ移行をする際は注意が必要です。難しいから。というかWordPressがお手軽過ぎるのかもしれない。
- 手軽に始めるとクォータ死のリスクがある: WordPressのように「とりあえず動けばOK」の感覚で運用すると、ボットの急襲や少し重い集計パーツ1つで無料枠を突破しかねない。なんなら有料にして広がった制限すら超える可能性がある。有料プランの場合は超えたら従量課金。。
- インフラとアプリの両方の勘所が必要: 「CDNキャッシュの挙動」「WAFルールのチューニング」「エッジでのDBスキャン行数意識」など、エンジニアリングの前提知識が求められる。数字を見ないで運用するのは難しい。
- 静的サイトジェネレーターという強力なライバル: ブログ用途であれば、AstroやHugoをCloudflare PagesやGitHub Pagesでホストした方が「DB自体が存在しないためコスト爆発のリスクが原理的にゼロ」という圧倒的な安心感がある。
という感じで、WordPressの代替になるにはまだ難しすぎるのかなという印象ですね。簡単インストール!とか従量課金なし、固定プラン!とか出てくれば非エンジニア層も使いやすくなると思います。
それでもWorkers + D1を選ぶ面白さ
手放しでおすすめできる状態ではないものの、サーバーレス構成とはどんなもんなのかを体験できるし、カスタマイズもしやすかったりするので、触っていて面白さはあります。
運用リスクを理解し、「エッジで門前払いし、DBを極力叩かせない」という防御の作法さえ身につければ、極めて低コストで爆速なブログ環境が手に入ります。同じ構成でクエリ消費に悩んでいる方の参考になれば。
さいごに
ぶっちゃけると、このブログの記事データmdでローカル管理されているのでDBなしでworkersで動かす構成にもできます。今後のEmDashの進化を追いたいので当分はEmDashを使い続けてみるつもりですが、最終的には静的運用になっているかも。。


