Немодероване дослідження

Немодероване дослідження – це дослідження користувачів, яке проводиться без присутності фасилітатора, де учасники виконують завдання та відповідають на запитання самостійно, керуючись письмовими інструкціями, що надаються через тестову платформу. Сесії зазвичай записуються, фіксуючи активність на екрані, кліки, а часто й аудіозапис та відео з веб-камери, а результати аналізуються пізніше.

Його основними перевагами є масштаб, швидкість та вартість. У той час як модероване дослідження може включати вісім учасників протягом двох тижнів запланованого часу, немодероване дослідження може зібрати п'ятдесят або більше сеансів протягом дня, за значно меншу вартість на одного учасника та з учасниками, розподіленими за часовими поясами та географічними регіонами. Це змінює те, для чого можна використовувати дослідження: стає можливим проводити регулярне тестування, порівнювати кілька альтернативних дизайнів, включати кілька сегментів ринку та отримувати кількісні показники, такі як рівень успіху та час виконання завдання, з розмірами вибірки, які забезпечують справжню точність.

Компромісом є втрата адаптивного ведення питань. Модератор помічає плутанину та запитує чому, досліджує неочікуваний коментар, перенаправляє учасника, який неправильно зрозумів завдання, та розпізнає, коли сталося щось цікаве, що не було частиною плану. Нічого з цього недоступне без модерації. Учасники, які неправильно інтерпретують інструкцію, створюють непридатні для використання дані, учасники, які стикаються з технічним збоєм, просто покидають заняття, а цікава поведінка залишається незрозумілою, бо нікого не було поруч, щоб запитати про неї.

Це визначає, для чого підходить цей метод. Немодерована робота добре працює над сфокусованими, чітко визначеними завданнями з чіткими критеріями успіху, над порівняльними дослідженнями, над бенчмаркінгом та відстеженням з плином часу, а також над кількісними дослідженнями першого кліку, деревоподібним тестуванням та дослідженнями уподобань. Вона погано працює над пошуковими дослідженнями незнайомих проблемних просторів, над складними багатоетапними сценаріями, що потребують налаштування, над делікатними темами та над будь-чим, де метою є розуміння мотивації, а не спостереження за поведінкою.

Розробка завдань та інструкцій має набагато більшу вагу, ніж у модерованій роботі, оскільки інструкції є цілісним протоколом і не можуть бути уточнені. Завдання повинні бути однозначними, сформульованими словником учасника, а не інтерфейсу, достатньо реалістичними, щоб викликати справжню поведінку, і достатньо короткими, щоб утримувати увагу. Пілотний раунд з кількома учасниками, виключно для пошуку неоднозначних формулювань, запобігає більшості втрат, які в іншому випадку виникають, коли п'ятдесят сесій дають відповідь на дещо відмінне від запланованого запитання.

Самі записи часто є найціннішим результатом, але водночас найбільше ігноруються. Кількісний звіт, який показує, що тридцять відсотків учасників не виконали завдання, переконливий на абстрактному рівні, тоді як двохвилинний кліп реальної людини, яка помітно розчарована певним екраном, змінює рішення. Складання короткого огляду ключових моментів з немодерованих сесій коштує годину і постійно забезпечує більше ресурсів для виправлення, ніж будь-який звіт. Ті ж кліпи також корисні для побудови спільного розуміння в команді, оскільки люди, які впроваджують виправлення, рідко читають аналіз, але надійно спостерігають за клієнтом, який має труднощі з тим, що вони створили.

Якість учасників також вимагає активного управління. Учасники панелей, які проходять багато досліджень, розвивають звички, що відрізняються від звичок справжніх користувачів, а питання скринінгу легко обходять люди, які хочуть отримати стимул. Скринінг, заснований на перевіреній поведінці, а не на самозвіті, перевірка уваги під час сеансу та ручний перегляд записів перед їх включенням до аналізу, є необхідними. На практиці більшість зрілих... дослідження користувачів Програми навмисно виконують обидва режими: немодерований для вимірювання, порівняння та рутинної перевірки у великих масштабах, а також модерований для дослідницької роботи, де розуміння причин важливіше, ніж підрахунок частоти, причому обидва режими сприяють прийняттю тих самих рішень. дизайн продукту процесу.