メール件名のA/Bテスト｜開封率だけで選べない理由と比較条件
販売会社でメール配信と報告を兼ねる担当者へ。次回の案内に使う件名を2案から選びたいのに、『開封率は24%と20%』という数字だけで決めてよいか迷っていませんか。別の日に保存した数字や、除外の方式が分からない記録も並んでいると、比較したつもりで違う条件を混ぜてしまいます。
まず、変えた要素・比較した群・期間・分母・取得時点・MPPやbotを除く方式を、原レポートでそろえます。分からない条件は未確認のまま残し、勝者を保留して配信管理担当へ確認を渡してください。開封率の表示を、実際に読んだ人数へ置き換えません。
3つの架空例と保存用の表で、確認済みと未確認を分ける仕事を進めます。このページで整理したメモをコピーまたはTXTで持ち帰れます。
開封率が高いほど読まれている？メールの保護機能と自動処理の影響
開封率は、メールが人に読まれたことを直接数えた値ではありません。Mailchimpの説明では、配信に成功したメールを対象に、計測用の小さな画像が読み込まれた記録などを使います。分母は率の基準になる数のことです。『開封数』が一度以上開いた記録か、延べ回数かも、原レポートの指標名で確かめます。教材の数値から自社の集計方式は判断できません。 出典：Mailchimp公式：開封率とクリック率の集計対象。
MPPはApple Mailのプライバシー保護機能です。有効な場合、人がメールを開く前でも計測用の画像が読み込まれ、開封の数字へ影響します。iPhoneの利用者全員や、Gmailのアドレス全員が同じ条件になるという意味ではありません。開封に基づくA/B比較の結果が不正確になる場合も、公式が説明しています。 出典：Mailchimp公式：Apple Mail Privacy Protection（MPP）の説明。
botは、自動でメールやリンクを確認する処理を指します。クリックも人の操作だけとは限りません。クリック率を補助の記録として読むことはできますが、すべて人間の反応だから勝者が確定したとはしません。除外方式があっても全botが取り除かれたと断定せず、使った方式を保存します。 出典：Mailchimp公式：Bot activityと除外方式の説明。
件名A/Bテストで何をそろえる？本文・配信条件・期間・集計方式
A/B比較は、変えた要素を比べるためのものです。公式では件名や差出人名などから一つの要素を選び、異なる群へ組合せを送る仕組みを説明しています。件名を比べたいなら、本文・差出人・配信時点まで一緒に変わっていないか、保存した記録で確かめます。 出典：Mailchimp公式：A/Bテストの比較要素と群。
同じアカウントでも、後で取得したレポートは期間や除外方式が変わっていることがあります。Mailchimpのbot filteringはアカウント内の報告全体に反映され、案やレポートごとに別設定へ切り替える説明ではありません。異なる方式で保存された2記録を、件名だけの差として読まないようにします。 出典：Mailchimp公式：Bot activityと除外方式の説明。
Mailchimp公式には、受信者ごとの組合せは確認できないという説明もあります。存在しない個別割当一覧を作らず、確認できる群の条件や割当方式、保存資料の範囲を残してください。資料がないところは未確認のまま担当へ渡します。 出典：Mailchimp公式：A/Bテストの比較要素と群。
- 変えた要素と他の条件
- 件名の原文2案と、本文・差出人・配信時点などの記録。件名だけ違うと書かれていても、確認資料がなければ補ってください。
- 比較した群
- どの受信者の群へ、どの案を割り当てたか。件数が同じことから、群別のMPP比率や人の反応の条件まで均等とは判断しません。
- 期間・分母・値の種類
- 集計の開始と終了、率の基準になる数、開封数やクリック率の指標名。延べ回数と、一度以上の記録を混ぜないようにします。
- 取得時点と除外方式
- レポートを保存した日時、MPPやbotを含むか・除くか、適用した方式。分からない欄は未確認と残します。
開封率24%と20%でも勝者は決められない？3つの比較例
次の3例・6行は説明用の架空記録です。実顧客や原質問者の配信結果ではありません。率と件数は原記録の表示を残し、未確認を0へ埋めたり、自動で勝者を選んだりしません。
例A：開封率24%と20%を比べる前に、受信者の群と除外方式を確認
配信成功数の表示は両案500、開封数は120と100、開封率は24%と20%です。クリック率は2%と2.4%とあり、どの表示を比べるかでも並びは変わります。MPPやbotを除く方式、群別のMPP比率、実際に読んだ人数、標本が比較に十分かは未確認です。配信管理担当へ原レポートと割当記録を渡し、数字の大きい案を統計的な勝者としません。
例B：開封率32%と19%の差は件名の効果？期間と取得条件が違う記録
案Aの保存記録は10月12日10:00、期間は10〜12日、bot filtering OFF。案Bは翌13日10:00、期間は10〜13日、ONとあります。同じ時点に案ごとへOFFとONを設定した例ではありません。開封率32%と19%の差から件名の効果や除外の補正値を決めず、報告担当が同じ期間・取得条件の記録を確認できる担当へ依頼します。
例C：開封数0なら開封率も0%？分母と表示条件が不明な記録
案Aには配信成功数0・開封数0と記録されていますが、率の分母・表示条件や配信の実施は未確認です。案Bの配信成功数と開封数も未確認です。両案の率を0%で埋めず、期間・値の種類・分母を原記録を見られる配信管理担当へ確かめます。空欄だけから配信失敗や原因を判断しません。
| 例 | 案 | 件名の原文 | 比べる要素と他条件 | 比較期間 | 取得時点 | 配信成功数の表示 | 開封率用の開封数の表示 | 開封率の表示 | クリック率の表示 | MPPやbotを除く方式 | まだ分からないこと | 次に誰が何を確認するか |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| A | A | 来週の案内をまとめました | 件名だけ違うと記録。本文・差出人・配信時点は同じと記録 | 2026-10-10〜2026-10-12 | 2026-10-13 10:00 JST | 500 | 120 | 24% | 2% | 未確認 | 群別のMPP比率、bot除外、実際に読んだ人数、標本の十分さは未確認 | 配信管理担当が同じ条件の原レポートと除外方式・割当記録を確認 |
| A | B | 来週の予定はこちらです | 件名だけ違うと記録。本文・差出人・配信時点は同じと記録 | 2026-10-10〜2026-10-12 | 2026-10-13 10:00 JST | 500 | 100 | 20% | 2.4% | 未確認 | 群別のMPP比率、bot除外、実際に読んだ人数、標本の十分さは未確認 | 配信管理担当が同じ条件の原レポートと除外方式・割当記録を確認 |
| B | A | 相談会の案内です | 同じ架空アカウントの別取得時点の保存記録。案ごとの同時設定ではない | 2026-10-10〜2026-10-12 | 2026-10-12 10:00 JST | 500 | 160 | 32% | 4% | bot filtering OFF と記録（過去の取得時点） | 別期間・別取得時点・除外方式の差。件名による効果は未確認 | 報告担当が同じ期間・取得条件の2案レポートを取り直せる担当へ確認 |
| B | B | 相談会の日程はこちらです | 同じ架空アカウントの別取得時点の保存記録。案ごとの同時設定ではない | 2026-10-10〜2026-10-13 | 2026-10-13 10:00 JST | 500 | 95 | 19% | 1.6% | bot filtering ON と記録（後の取得時点） | 別期間・別取得時点・除外方式の差。件名による効果は未確認 | 報告担当が同じ期間・取得条件の2案レポートを取り直せる担当へ確認 |
| C | A | 今月の案内をお届けします | 他条件と割当は未確認 | 未確認 | 2026-10-13 10:00 JST | 0 | 0 | 未確認 | 未確認 | 未確認 | 表示0は架空の原記録の値。率の分母/表示条件と配信実施は未確認。率を0%で埋めない | 原記録を見られる配信管理担当が対象・期間・分母・値の種類を確認 |
| C | B | 今月の予定のお知らせです | 他条件と割当は未確認 | 未確認 | 2026-10-13 10:00 JST | 未確認 | 未確認 | 未確認 | 未確認 | 未確認 | 分母、開封数、率と方式が未確認。未確認を0にしない | 原記録を見られる配信管理担当が対象・期間・分母・値の種類を確認 |
表は左右へ動かせます。キーボードでは表に移動して左右の矢印キーを使い、最後の確認担当まで読めます。同じ6行を下のCSVで保存できます。
件名A/Bテストの比較条件を整理する｜記入例・確認メモ・CSV・TXT
原レポートに書かれた値と時点、未確認の条件、次に確かめたいことをひとまとめにします。資料の所在は、社内で権限のある人が見られる場所を書いてください。顧客名・メールアドレス・メール本文・認証値を貼り付ける必要はありません。
架空例を一つ選ぶと、その2案の記録が欄へ入ります。自社の資料へ書き換え、メモを作って全文を読んでから保存してください。入力を変えた後は結果が失効し、作り直すまで保存できません。未記入の欄は未確認と出力します。
ページを閉じると入力は消えます。外部送信・自動保存は行いません。
まとめ：件名を選ぶ前に、期間・取得時点・除外方式を確認
次回の件名を選ぶために使っている2案の記録を一つ取り出し、期間と取得時点、除外方式の欄を確かめてください。資料が足りなければ、同じ条件の原レポートと群への割当記録を、配信管理担当へ確認します。この仕事の完了は比較条件と残る不明を渡せることです。件名の因果、実際に読んだ人数、統計的な勝者を確定することではありません。
2023年11月22日の公開コミュニティには、Appleの変更があってもA/Bの両群へ同じくらい影響するなら件名の開封率比較を続けてよいのでは、という当事者の疑問があります。これは比較条件を整理する必要を示す歴史的な質的例です。群への影響が均等である証拠や、現在の日本の需要量にはしません。
メールが見当たらない、迷惑メールに入ったという配送・配置の確認は、案内メールの送信結果を担当へ渡すガイドへ進めます。ここでは件名2案の集計条件の確認に絞ります。
比較の記録をどうそろえるか迷う場合は、原資料の種類と未確認の項目を整理して相談できます。勝者や成果を約束する案内ではありません。メールの比較条件の整理をDREEXYへ相談する
原典の該当箇所を2026年10月13日に確認しました。架空値を実アカウントの結果として用いません。
仕事の流れから、顧客との接点まで。
一体で見直す、最初の一歩を。
