チェックアウトフローをテストする時間は2週間、調査パネルの契約はなく、ステークホルダーは5人のユーザーで十分だと聞いている。この3つの制約のうち2つは現実のものだ。5人のユーザーという数字は現実のものではない。ローラ・フォークナーの2003年の研究では、60人の参加者からランダムに選ばれた5人の参加者は、 55%と99% 既知のユーザビリティ問題のうち、どの結論に達したかは、調査内部からは判断できません。
これは、リサーチオペレーション部門を持たないプロダクト、UX、CROチーム向けに、モデレーター付きユーザビリティテストを実施するための採用手順書です。この手順書を読み終える頃には、計画会議で説明できる参加者数、プロのテスターを排除するスクリーニングツール、公開されている欠席率に基づいた過剰採用の計算、そしてKVKKやGDPRの審査にも耐えうる同意設定が完成しているでしょう。
ステップ1:参加者数は、伝承ではなく、決定に基づいて設定する。
「5人のユーザー」ルールは、ニールセンとランダウアーの1993年のモデルに由来し、ヤコブ・ニールセンの著書で広く知られるようになった。 2000月XNUMX日の記事式は N(1 − L)^n で、L は単一ユーザーが抱える問題の割合です。ニールセンは L = 31% を使用し、5 人のユーザーでよく知られている 85% という数値を算出しました。
その31%は仮定であり、製品の測定値ではないため、この計算は、およそ3回のヒットにつき1人のユーザーが遭遇する問題についてのみ言及しています。ユーザーの10%が遭遇する問題は、そもそも出現するまでにはるかに多くのセッションが必要です。フォークナーが実際の60人のユーザーで再現したところ、参加者が10人になると最悪のケースの発見率が80%に、20人になると95%に上昇することがわかりました。スプールとシュローダーの2001年の研究では、1つのスクリプト化されたフローではなく、複数のサイトで自由形式のタスクを使用したところ、数十人のユーザーの後で深刻な問題が次々と明らかになりました。
ニールセン自身の記事にも、めったに引用されない但し書きでそのことが書かれている。3~4人のユーザー グループごと 対象となる対象者が異なる2つの場合、カードソーティングの場合は15、定量調査の場合は20となります。これから行う決定に基づいて、適切な人数を設定してください。
| テストが何をすべきか | セグメントごとの参加者数 | Why |
|---|---|---|
| 1つの流れ、1つのオーディエンスにおける明らかな阻害要因を見つける | 5 | 高頻度の問題を検出します。最低値は約55%です。 |
| デザイン変更版を出荷するかどうかを決定する | 8-10 | フォークナーのデータでは、ユーザー数が10人の場合、最悪のケースでの発見率は80%に上昇する。 |
| 議論の的となる高額な変更の証拠を構築する | 15-20 | 20で底値は95%に達するので、「私たちはそれを見ていない」というのは意味がある |
| 2つ以上の異なる顧客層(新規顧客とリピーター、購入者と承認者など) | それぞれ3~5個ずつ、合計5個ではない | 異なるメンタルモデルは、異なる問題セットを生み出す。 |
| タスクの成功度またはタスク完了時間を示す数値を生成する | 20件以上 | 質的な装いをまとった量的研究 |
実例:トルコの中規模小売業者向けのチェックアウトテスト。新規顧客とリピーターを対象としています。2つのセグメントに分け、それぞれ8回のセッションを完了させ、モバイルとデスクトップの比率を60対40に設定することで、合計16回のセッションをリクルート対象とします。
ステップ2:意見ではなく行動を選別するスクリーニングシートを作成する
ユーザーインタビューでは ユーザーリサーチの現状(2025年版)2025年7月25日から8月9日の間に調査された485人の研究者に基づくと、採用にかかる時間は回答者の54%にとって依然として懸念事項であり、 修飾 参加者の選定が依然として最大の課題である。観察された行動ではなく、表明された意図に基づいて選別を行うスクリーニング担当者が主な原因である。私たちが全員に適用する6つのルールは以下のとおりである。
- 意図ではなく、過去60日間について尋ねてください。 「過去60日間にこれらのうちどれをオンラインで購入しましたか?」という質問は、「Xを購入する可能性はどのくらいですか?」という質問よりも優れています。
- 決して正解を合図してはいけない。 適格な選択肢を、もっともらしいおとり候補の中にランダムに配置する。
- 自由回答形式の質問を1つ含める例えば、「オンラインで何かを注文した際に最後に何がうまくいかなかったか説明してください」といった質問です。一般的で流暢、そして妙に的を射た回答は、最も安価な不正行為の兆候です。
- 確認可能な詳細情報を1つ要求してください そのカテゴリーにおける直近の購入について:販売店、配送方法、おおよその価格。
- パネルシェアに上限を設ける。 全員が同じパネルから参加している場合、そのパネルの常連客をテストしていることになります。パネル以外のチャネル、例えば顧客リスト、パートナーのニュースレター、店頭でのアンケートなどを組み合わせましょう。
- デバイスごとの割り当て量。 モバイル決済の失敗とデスクトップ決済の失敗は、異なる種類の失敗です。
以下の項目のうち2つ以上を満たす場合は、応募を却下してください。定型文または機械的な回答、互いに矛盾するスクリーニング回答、不自然に広範囲な研究に該当するプロフィール、申告されたプロフィールと一致しない連絡先情報。
ステップ3:公表されている欠席率よりも多く採用する
Uの測定 無断欠席データのレビュー 約14,210件のユーザーインタビュー調査の平均値は 8.6%参加率は0%から34%まで幅があり、B2Bリモートセッションは10.4%でした。MeasuringU独自の24件の調査(参加者958名)では、参加率は5.0%で、専門家による採用、追加のスクリーニング、リマインダー、インセンティブの平均額は約150ドルでした。インセンティブの額と無断欠席率は、r = -50付近で負の相関関係にあります。
B2Bや専門職、低額または非現金インセンティブ、確認電話のない顧客リスト、冬季の対面セッションの場合は、10%または15%を予定してください。送信する招待状 = 必要な完了済みセッション数 ÷ (1 − 予想される無断欠席率)。15%の16セッションの例では、16 ÷ 0.85 ≈ 19件の確定予約となります。追加の3件は、バックフィルとして保持するのではなく、各日の終わりに実際のスロットとして予約してください。
【社内データ必要:過去12か月間のモデレーター付き調査における、採用チャネル別およびインセンティブレベル別のSwitasの無断欠席率。これらの国際平均値を地域ベンチマークに置き換えるため。】
ステップ4:記録する前に同意書を2つに分割する
ここでトルコのチームが引っかかっています。トルコデータ保護局の基本決定2026/347(2026年2月18日付、2026年3月24日官報掲載(第33203号))では、プライバシー通知(aydınlatma metni)と明示的な同意文(açık rıza metni)は別々に作成され、それぞれ独自の見出しと宣言が付されている必要があります。それらを1つの署名可能なブロックに統合することは違法であり、参加者にプライバシー通知を「承認」するよう求めること自体も違法です。通知は承認されるものであり、同意されるものではありません。他の組織のテンプレートをそのままコピーすることも問題視されています。この義務は第12条に基づき、第18条に基づき制裁の対象となります。
トルコ国外では、同様の規則がより緩やかな形で存在している。GDPR 条7(2) 同意要求は「他の事項と明確に区別され、分かりやすくアクセスしやすい形式で、明確かつ平易な言葉遣いで」提示されなければならない。ユーザビリティセッションにおいては、これは何を意味するのか。
- 2つの文書、または明確な見出しの付いた2つのブロック:収集する内容とその理由(承認済み)、および記録への同意(付与済み)。
- 録音に関する同意と、クリップを社内で再利用するための同意、およびクリップを顧客に見せるための同意は別々に取得する。3つの質問があり、3つのチェックボックスがあるが、いずれも事前にチェックは入っていない。
- 参加者が録音に同意したかどうかに関わらず、謝礼金を支払う。支払いの条件となる同意は、自由意思に基づくものとは言い難く、メモのみのセッションでも十分活用できる。
- 保存期間を明記し、それを遵守してください。「調査報告書作成後90日で録音データを削除する」という文言は、強制力のあるルールとして適用できます。
- スクリーニングには、特別なカテゴリーのデータを除外してください。チェックアウト調査には、個人の健康情報は必要ありません。
2週間のスケジュール
- 1~2日目。 スクリーニングシートと両方の同意書。同意分割に関する法的承認は、9日目ではなく、今すぐ取得してください。
- 日3。 少なくとも2つのチャネルでスクリーニングテストを実施してください。
- 4~6日目。 スクリーニング、スケジュール設定、プライバシー通知を添付した招待状の送信。
- 日7。 まず同僚とパイロットテストを行い、次に実際の参加者1名と実施する。タスクの文言を修正する。
- 8~12日目。 1日最大4回のセッションを実行し、各セッションの24時間前と2時間前にリマインダーを送信する。
- 日13。 セッションの内容が鮮明なうちに振り返りを行いましょう。
- 日14。 調査結果は、参加者全体における頻度と収益への影響度に基づいて順位付けされています。
これが破綻するところ
- 発生頻度の低いB2B関連の役割。 従業員数200人から1,000人規模の企業の財務承認担当者は、2週間以内には現れないでしょう。予算を3~4件に増やし、インセンティブを引き上げてください。
- 規制対象業務および公共部門業務。 倫理承認、調達、および特殊カテゴリーデータの取り扱いにより、数週間追加され、スクリーニングトリックが削除されます。
- トルコ国内における地理的な偏り。 イスタンブール、アンカラ、イズミル以外の地域では、パネルの規模が急速に縮小するため、パネルのみを対象とした採用では、都市部の利用者が過剰に代表されることになる。これは、地域によって配送体験が異なる場合に重要となる。
- 顧客リストは、その作成方法によって偏りが生じています。 テスト対象となっているフローは、既に全員が完了しています。不合格だった人はそこにいません。
- 自由な探検は全く別物だ。 上記のカウントは、スクリプト化されたフローを前提としています。自由なブラウジングは、SpoolとSchroederの研究と同様の挙動を示します。
- これでは有病率の推定値は得られません。 「8人中4人が苦労した」というのは、「顧客の50%が苦労している」という意味ではありません。その数字を求めるには、定量的な調査や実験を行う必要があります。
FAQ
参加者5人で十分なことなんてあるのだろうか?
はい、1つのスクリプト化されたフローで、1つのオーディエンスに対して高頻度で発生するブロッキング要因を探し、それを繰り返しテストする予定であれば、その通りです。しかし、議論の的となっている決定を単一のテストで下さなければならない場合は、それでは不十分です。フォークナーのデータでは、最悪の場合、問題の55%が発見されたからです。
2つの異なる対象者層の場合、それぞれ何人必要ですか?
対象者1人あたり3~5人、合計5人ではありません。ニールセンのガイドラインにも同様のことが書かれています。異なるグループはそれぞれ異なる思考モデルを持っているため、問題意識の重複は予想よりも少ないのです。
顧客リストから採用すべきか、それともパネルから採用すべきか?
どちらも同じ調査で得られたものです。あなたのリストには、実際のアカウントと実際の状況を持つ人々が含まれています。一方、パネル調査には、あなたの回避策を知らない人々が含まれています。情報源が1つだけでは、あらゆる調査結果に予測可能な偏りが生じてしまいます。
どのようなインセンティブを提供すべきでしょうか?
インセンティブの規模と無断欠席率には負の相関関係(r = −.50程度)があるため、無断欠席率を公表されている平均値付近に抑えるのに十分な額を設定する。米国の数値をそのままコピーするのではなく、当該セグメントにおける現地の専門家の時給をベンチマークとする。
トルコでユーザビリティセッションを録画するには、明示的な同意が必要ですか?
はい、そして基本決定2026/347以降、同意文はプライバシー通知とは別に、独自の見出しと宣言を付けて記載する必要があります。統合されたブロックの承認を求めることは、当局が禁止した慣行です。
審査なしの試験でも、同じ採用基準の厳格さが必要なのでしょうか?
少なくするのではなく、多く。参加者が審査員の基準に合致しないことに気づくモデレーターはいないため、審査の質こそが、セッションが使い物にならない事態を防ぐ唯一の手段です。
ご自身のチェックアウトでこれを実行してください
フローを1つ選択し、サポートする必要のある決定に合わせて研究規模を決定し、上記の計算式で被験者を募集します。スクリーニング、セッション、統合を当社にお任せいただくことも可能です。 ユーザーリサーチサービス ありません。
ソース
- ニールセン、「なぜ5人のユーザーでテストするだけで十分なのか」、NN/g、2000年3月18日
- フォークナー、「5ユーザー仮説を超えて」、行動研究方法、機器、およびコンピュータ 35(3)、2003年、379-383頁 (PubMed抄録)
- SpoolとSchroeder、「ウェブサイトのテスト:5人のユーザーでは全く不十分」、CHI '01
- MeasuringU、「魔法の数字5の簡潔な歴史」
- MeasuringU、「モデレーター付き調査における典型的な欠席率はどのくらいですか?」
- ユーザーインタビュー、「ユーザーリサーチの現状2025」
- KVKKによる基本決定2026/347に関する発表、2026年2月18日
- モロール・アルセブン、決定 2026/347、官報 33203、2026 年 3 月 24 日
- GDPR第7条、同意の条件







