Как это делается?
Все очень похоже на очное тестирование: выбираете объект тестирования, пишете сценарий, проходите его с пользователем пункт за пунктом, напоминая ему, что думать нужно вслух. Потом проводите этап «расследования», ну и так далее. Тестировать можно все, что выводится на экран. Возможно, вам придется внести в сценарий минимальные изменения, а оплату перевести почтовым переводом.
Вам надо будет заранее проверить работу программы для дублирования экрана. Это можно сделать, например, когда вы созвонитесь, чтобы назначить время начала сеанса.
Еще надо решить, чей экран будет ведущим, а чей – дублирующим. Лучше всего попросить пользователя предоставить доступ к его рабочему столу, чтобы вы могли только наблюдать за его действиями. Участнику тестирования не придется при этом нервничать из-за неизбежных (но обычно все-таки небольших) временных задержек. Если же вы тестируете некий программный продукт, который установлен только на вашем компьютере, сделайте наоборот: предоставьте пользователю доступ к своему рабочему столу.
(Если при тестировании вы будете видеть экран пользовательского компьютера, не забудьте попросить его спрятать все окошки, которые ему не хотелось бы вам показывать. Например, окно почтового клиента.)
В главе 8 я писал, что ассортимент программ для дублирования экрана весьма широк. При удаленном тестировании на первый план выходит удобство и простота использования. Следовательно, вам надо выбрать такое ПО, которое а) быстро настраивается (меньше чем за минуту), б) «пробивает» корпоративные брандмауэры и, возможно, в) не требует инсталляции приложения на компьютер (поскольку это может быть запрещено системными администраторами).
И снова я агитирую за GoToMeeting. И снова у меня нет к ней претензий. Скачивается и устанавливается она за 30 секунд, и я еще не встречал пользователя, который не смог бы с ней справиться. В ней очень хорошо реализовано обновление изображения, так что задержки будут практически незаметны.
Еще при использовании GoToMeeting не возникает проблем с изменением размеров экрана (это важный нюанс: ведь у вас и у пользователя могут быть совсем разные мониторы с разным разрешением) и со сменой ведущего/ведомого экрана [36] .
Для передачи звука можно использовать функцию «конференцсвязь», встроенную в GoToMeeting (в стоимость подписки входит возможность использования этой функции, но каждый звонящий платит за себя по своему тарифу, в зависимости от местонахождения). А можно воспользоваться технологией VoIP.
Если вы не собираетесь пользоваться IP-телефонией, посоветуйте участнику тестирования поставить на столе телефон с громкой связью, чтобы не пришлось в течение 50 минут прижимать трубку к уху. Попросите вашего собеседника сделать так, чтобы во время тестирования ему никто не звонил. Впрочем, будьте готовы к тому, что его время от времени все равно будут отвлекать.
Организовать запись тестирования можно, придвинув микрофон к телефону.
Еще быстрее, еще дешевле и еще менее управляемо
В главе, посвященной удаленному тестированию, я не могу не рассказать про еще одну возможность, которую надо иметь в виду: неуправляемое удаленное тестирование [37] .
Такую услугу предоставляет сайт Usertesting.com [38] . Вот как все происходит.
Вы сообщаете адрес той страницы, которую хотите протестировать, и задание (или дватри коротких задания), которое должен выполнить пользователь. После этого указываете, сколько человек должно участвовать в тестировании и кто это должен быть (пол, возраст, доход, уровень владения компьютером).
Запрос направляется в пул тестировщиков, некоторые из них соглашаются пройти тестирование. На вашей страничке они проводят около 15 минут, выполняя задание (или задания) и размышляя вслух. После этого вы получаете запись сеансов тестирования.
Очевидно, что такой метод работы сильно отличается от традиционного тестирования юзабилити: вы не можете задавать вопросы и проводить «расследование». И все же он на удивление результативен. (Владельцы сервиса тщательно отбирают тестировщиков, которые хорошо умеют думать вслух.)
Прелесть метода в его дешевизне (29 долларов за одного участника), в том, что от вас не требуется почти никаких усилий (надо всего лишь дать задание), и в скорости (результаты зачастую можно получить уже на следующий день).
Качество, конечно, уступает управляемому тестированию, но все равно я был впечатлен, когда впервые воспользовался этим сервисом.
С учетом всего сказанного вполне имеет смысл рассматривать такое тестирование как запасной вариант. Оно поможет вам быстро получить ответы на животрепещущие вопросы, которые по разным причинам не удалось выяснить в ходе ежемесячного тестирования. Еще с помощью этого сервиса очень удобно проверять, исчезла ли обнаруженная проблема после внесения изменений (сценарий задания у вас останется с «большого» тестирования, так что вам достаточно будет просто ввести уже готовые данные в форму заказа).
ЧАВО
ПОЧЕМУ Ж ВЫ ПОМЕСТИЛИ ЭТУ ГЛАВУ В КОНЕЦ КНИГИ?!
Прекрасный вопрос. Согласен, эти советы смотрелись бы более логично в первой части книги. Но я сознательно переставил их в конец. И вот почему:
Не надо пытаться устраивать удаленное тестирование, если есть возможность провести очную сессию.
Удаленное тестирование требует большей сосредоточенности, и при этом у вас нет возможности наблюдать, например, за выражением лица тестировщика, а это (особенно поначалу) очень важно.
Я советую провести как минимум три раунда традиционного тестирования, прежде чем пытаться затеять удаленное. За это время вы постигнете большинство нюансов, весь процесс станет привычным, вы немного расслабитесь и будете лучше подготовлены к разного рода неожиданностям.
НУЖНА ЛИ КОМНАТА НАБЛЮДАТЕЛЕЙ?
Да. Присутствие наблюдателей при удаленном тестировании ничуть не менее важно, чем при очном. Это важно, поскольку одной из составляющих успеха является общение, обмен мнениями и опытом. К тому же для наблюдателей вообще нет никакой разницы между удаленным и очным тестированием: в обоих случаях они смотрят на дублирующий экран и слушают высказывания пользователя через динамики.
Глава 15 Только для продвинутых Список рекомендуемой литературы
А что, нет никого более квалифицированного?
АКТЕР БОБКЭТ ГОЛДСУЭЙТ, В ОТВЕТ НА ВОПРОС, НЕ ХОЧЕТ ЛИ ОН ПЕРЕРЕЗАТЬ ПУПОВИНУ СВОЕМУ НОВОРОЖДЕННОМУ СЫНУ
Некоторые из вас, занявшись тестированием юзабилити, наверняка захотят получить дополнительную информацию [39] . Для самых продвинутых я решил перечислить в этой главе мои любимые книжки по тестированию и смежным дисциплинам [40] .
О тестировании в целом
Как я вас и предупреждал в самом начале, в этой книге нет детального описания тестирования. А в трех перечисленных ниже – есть, и очень хорошее. Выбирайте любую: не ошибетесь.
Handbook of Usability Testing (Second Edition)
Jeffrey Rubin and Dana Chisnell, John Wiley & Sons, 2008.
«Руководство по тестированию юзабилити» Джеффа Рубина долгое время было одной из лучших книг, а новое издание, написанное в соавторстве с Даной Чиснелл, получилось еще лучше первого.
A Practical Guide to Usability Testing (Revised Edition)
Joseph Dumas and Janice (Ginny) Redish, Intellect, 1999.
Джо и Джинни, похоже, знают о тестировании юзабилити больше, чем все мы вместе взятые. Очень здорово, что они решили поделиться своими знаниями и написали «Практическое руководство по тестированию юзабилити».
Usability Testing Essentials: Ready, Set, Test!
Carol Barnum, Longman, 2010.
Сейчас, когда я пишу эти строки, Кэрол все еще продолжает работать над переизданием своей чудесной книги «Основы тестирования юзабилити: на старт, внимание, тест!», вышедшей в 2002 году. Я уверен, что ее труд не будет напрасным и она порадует нас новой книгой, в которую будут включены вопросы обеспечения специальных возможностей и международного тестирования. Специальные вопросы
Paper Prototyping
Carolyn Snyder, Morgan Kaufmann, 2003.
Все нюансы, которые вам надо знать, можно найти в этой книге. «Прототипы на бумаге» можно было бы поместить и в предыдущий раздел, поскольку в книге отлично описаны вопросы тестирования в целом.
Moderating Usability Tests
Joseph Dumas and Beth Loring, Morgan Kaufmann, 2008.
В книге «Ведение тестирования юзабилити» обобщен опыт сорока лет работы в области тестирования продукции. Она целиком посвящена тому, как проводить тесты. Очень емкая и информативная книга.
Measuring the User Experience
Thomas Tullis and William Albert, Morgan Kaufmann, 2008.
Если вам надо получить количественную оценку (на этом может настаивать, к примеру, ваш начальник, требуя доказательств того, что вы не зря потратили деньги фирмы на юзабилити), вы просто обязаны прочитать книгу «Как измерить опыт взаимодействия».
