Давайте сделаем A / B тесты - но стоит ли это того? - www.webusability.pl

  1. Что хорошего
  2. Так в чем проблема?
  3. Почему тесты с пользователями лучше

Измерение влияния изменений в дизайне при прямом переводе на желаемое преобразование, несомненно, является ценным, легкодоступным, недорогим и широко используемым, в том числе такими гигантами, как Amazon или Google. Зачем организовывать исследования для нескольких человек, если мы можем собирать данные из тысяч, не вставая со стола?

Что хорошего

В A / B тестах мы создаем две версии выбранного элемента страницы и отображаем их случайным образом, отслеживая реакции пользователей, чаще всего с помощью количественных показателей, таких как количество кликов, и проверяем, какая из них выпадает лучше. Мы тестируем на больших группах пользователей, результат - простые проценты для сравнения. Давайте перечислим некоторые преимущества:

  • A / B тесты измеряют поведение пользователей в естественных условиях;
  • мы можем обнаружить даже небольшие различия со статистической значимостью;
  • они дешевы - они требуют очень мало обязательств, они не требуют никакого дополнительного оборудования.

Это имеет смысл, верно? Например, мы точно знаем, какую кнопку чаще выбирают пользователи, с какой заголовком читается одна и та же статья. У нас есть доказательства и графики для этого.

Так в чем проблема?

A / B тесты являются надежным инструментом при правильном использовании. Стоит знать о том, что A / B тесты не делают или делают на первый взгляд.

  • Данный вариант дизайна не всегда иллюстрирует концепцию. Мы можем отклонить пароль, использованный в описании, из-за более низких ставок, но мы не знаем, что это была форма, а не содержание. Концепция может быть точной, сравнение с каким-то другим элементом на странице больше не будет.
  • Вариант может не относиться к фактическим причинам проблем. Ошибочные выводы о причине могут привести к решениям, которые не связаны с источником проблемы. Например, предположение о том, что пользователи выбывают на начальных этапах формы в компании по прокату автомобилей из-за большого количества полей, не позволяет вам заметить, что это происходит потому, что они идут туда только для просмотра всего спектра выбора.
  • Мы сравниваем варианты, которые посчитали достойными тестирования. Поэтому тесты могут рассказать нам больше о наших ожиданиях, чем об ожиданиях пользователей. С большой вероятностью мы не выведем из них версию C, которая будет более точно отвечать вашим потребностям.

Мы встречаемся с подходом, согласно которому статистика не противоречит людям, проводящим исследования. Попробуйте провести A / B-тестирование в A / A-варианте - какая версия A была лучше? ?

Почему тесты с пользователями лучше

Мы не догадываемся в тестах с пользователями, но мы наблюдаем, спрашиваем и делаем выводы на этой основе. Умение задавать вопросы, наблюдать за реакцией, выражением лица, позволяет идентифицировать источники проблем или видеть их там, где мы не ожидали (мы имеем в виду как наших клиентов, так и самих себя, дизайнеров).

Если вы предпочитаете оставаться в блаженном невежестве, вы думаете, что вы очень склонны к догадкам, или когда ваш сайт должен служить вам одному - не делайте тестов!

Если вы предпочитаете оставаться в блаженном невежестве, вы думаете, что вы очень склонны к догадкам, или когда ваш сайт должен служить вам одному - не делайте тестов

Также следует помнить, что A / B-тесты прекрасно дополняют качественные исследования. Когда участие компании в разработке пользовательского опыта возрастает до уровня, когда пользователи регулярно проводятся, A / B-тесты обязательно должны быть включены в набор используемых инструментов.

Подробнее о тестах с пользователями вы можете прочитать на нашем сайте:

Пример из практики Свадьба со стилем
Тесты с пользователями
Тест или фокус?

источники:

https://www.nngroup.com/articles/ab-testing-and-ux-research/
https://www.nngroup.com/articles/putting-ab-testing-in-its-place/

Похожие

Праздник ПЕРВЫЙ МИНУТЫ с ребенком - почему оно того стоит?
Путешествие с детьми должно быть запланировано заранее. А для маленьких детей можно даже сказать, что чем раньше, тем лучше. Тем более, что вы также можете сэкономить таким образом. Это вариант первой минуты. Просматривая предложения туристических агентств, мы часто сталкиваемся с популярным парольным паролем, который означает, что если мы быстро решим отправиться в путешествие, мы заплатим за него меньше. Такой вариант
О чем «говорят» кляксы
... что не всегда то, что модно, подходит нам. «Вчера я был в восторге от йоги, в прошлом месяце я пробовал цигун и вроде достиг результатов, а сегодня меня« вдруг »уволили с работы, которая, кстати, не приносила мне никакого удовольствия. Теперь пришло время искать другую. Только какую? »И в таком хаотичном поиска находится многие из нас. Но чтобы достичь хороших результатов и прежде, чем принимать важные решения в жизни, нужно
Кризис в Йемене от голода умерли 85 000 детей
Image caption Детям до пяти лет больше всего угрожает смерть от недоедания Около 85 000 детей в возрасте до пяти лет вероятно умерли от острого недоедания за три года войны в Йемене, согласно подсчетам международной благотворительной организации Save the Children. В прошлом месяце ООН предупредила, что почти 14 млн жителей Йемена находятся на грани голода. Международная организация пытается восстановить переговоры, чтобы прекратить войну, которая длится три года и
Надежный Таро
Добро пожаловать в Trusted Tarot от Trusted Tarot (Trusted Tarot Spanish), лучшее место для бесплатного чтения Таро ! Сказать, что у вас лучшие чтения Таро в Интернете, - довольно смелое утверждение. Однако, если вы посмотрите направо, вы увидите пример чтения Таро, и я надеюсь, что вы покажете, что они достаточно подробны. Это одна из причин, по которой Trusted Tarot является лучшим местом для чтения: мои чтения основаны на многолетнем опыте, и я ничего не храню.
День третий. Пока не ясно, будет ли осужден глава избирательной кампании Трампа.
... вер А третий день судебных слушаний в федеральном суде в Александрии, штат Вирджиния, который должен разрешить дело против бывшего президента нынешнего главы США Дональда Трампа - Пола Маннорта, оказался бесплодным, сообщает CNBC. Жюри до сих пор не может решить, виновен ли Манауфорт или не обвинен в налоговом и банковском мошенничестве. Спикеры на этот раз работали больше обычного, но обсуждение представленных по делу доказательств продолжится сегодня, 21 августа. Два
Самый маленький в мире компьютер: мошенник IBM настолько мал, что почти незаметен
Видео: Blockchain blockbuster: платежная система IBM - первая IBM представила настолько маленький компьютер, что он может проскользнуть через солонку и помочь предотвратить торговлю контрафактными лекарствами, гаджетами и наличными деньгами на 600 миллиардов долларов в год. Компания объявила о новом микрокомпьютере в понедельник на конференции Think и прогнозирует, что он будет играть ключевую роль в сети блокчейнов, предназначенной для мониторинга мошенничества
IHS Markit: В Индии содержание местного видео-сервиса так же важно, как и цена
... что локализованный контент так же важен, как и цена, особенно включение местного индийского контента и качество субтитров и дублирования иностранного видео контента. Хорошо зарекомендовавший себя внутренний рынок кино и телевидения Индии представляет собой крупнейший барьер для роста для международных видеоплатформ, таких как Netflix и Amazon, которые наращивают свои усилия на рынке. Hotstar Premium продолжает лидировать на рынке OTT. Его успех во многом объясняется
Аналоги WinZip и WinRAR для Linux, с которыми вам не стоит беспокоиться о лицензиях
Многие пользователи, которые решили использовать Linux, задаются вопросом, есть ли в дистрибутивах этой операционной системы адекватные архиваторы, альтернативы популярному WinRAR. Здесь мы рассмотрим четыре приложения, подходящих для сжатия и архивирования файлов, а также установки их в дистрибутив Linux Ubuntu. В других дистрибутивах установка не сильно отличается. 1 АРК
Исправление Windows Meltdown-Spectre: как проверить, не блокирует ли ваш AV патч Microsoft
... таки Meltdown и Spectre, которые затрагивают большинство современных процессоров. Как Microsoft предупредил на этой неделе он не будет поставлять свои обновления безопасности Windows 3 января клиентам, если они используют сторонний антивирус, если не подтверждено, что AV совместимо с ним. Тестирование Microsoft показало, что некоторые антивирусные
Почему старые игровые приставки выглядят так плохо на современных телевизорах?
... вые приставки великолепны"> Старые игровые приставки великолепны. Не только потому, что есть много старых игр, в которые все еще стоит играть, но и потому, что более простые электронные конструкции систем на основе картриджей, как правило, гораздо более устойчивы к износу, чем современные дисковые консоли, многие из них все еще существуют и в отличном рабочем состоянии. Так почему же ваш старый Super NES или Sega Genesis выглядит как мусор на вашем новом HDTV? Это комбинация
Как установить Android на свой iPhone
(Примечание редактора: Дэвид Ван - опытный хакер iPhone и член iPhone Dev Team , Возьмите под свой контроль гаджеты на свой страх и риск - мы не несем ответственности за то, что произойдет, если вы позаботитесь о вашем iPhone, как бы маловероятно это ни было.) Может быть, вы хотите освободить свой iPhone от лап Apple. Может быть, вы просто хотите повозиться с чем-то новым. В любом случае, вы видели

Комментарии

Будете ли вы пытать?
Будете ли вы пытать? И ты прав! Тест LD50, то есть тест на токсичность. Этот тест проводят на млекопитающих, то есть на крысах или мышах. Тестируемое вещество вводят в различных дозах приблизительно 30 крысам. Чаще
Есть ли какие-либо различия между тем, как Active Directory реализуется Samba в UCS и Microsoft Windows?
Есть ли какие-либо различия между тем, как Active Directory реализуется Samba в UCS и Microsoft Windows? Как уже упоминалось, основные возможности атаки ничем не отличаются. Чтобы быть совместимым с Microsoft Active Directory, существующий недостаток дизайна также должен быть реализован в Samba. Единственная разница
Что вы имеете в виду, когда говорите, что они тасуются вручную?
Что вы имеете в виду, когда говорите, что они тасуются вручную? Trusted Tarot - это первый веб-сайт, который не использует компьютеры для случайного генерирования карт, из которых вы собираетесь выбирать. Каждый день я перетасовываю карты Таро вручную и помещаю их в порядок на странице. Когда вы и все остальные читаете, письма, которые вы выбираете, находятся в том же порядке, что и передо мной. Поскольку карты Таро меняются один раз в день, очень важно подождать 24 часа, прежде чем
Вся природа Selenium идеально вписывается в основные принципы Agile, DevOps , или же Непрерывная доставка , Как именно это достигается?
Могу ли я погасить рано? Если так, то как? В начальном шестимесячном периоде отсрочки выплаты не запланированы. Однако можно погасить кредит либо единовременно, либо в меньших суммах. Если кредит полностью погашен в течение шестимесячного периода отсрочки, то проценты не выплачиваются, но будет произведено досрочное погашение в размере 29 фунтов стерлингов. Такие выплаты могут быть произведены Barclays Partner Finance чеком, дебетовой картой или постоянным поручением. К сожалению,
КС: Теперь, когда Lucasfilm уходит от создания новых Звездных войн каждый год, это освобождает Кэти [Кеннеди], чтобы больше сосредоточиться на Инди?
КС: Теперь, когда Lucasfilm уходит от создания новых Звездных войн каждый год, это освобождает Кэти [Кеннеди], чтобы больше сосредоточиться на Инди? Маршалл: Я надеюсь на это. (смеется) Лучше для меня. Я не знаю, если честно. Они там в своем маленьком мире, очевидно, снимают Эпизод IX прямо сейчас, поэтому мы не будем об этом много говорить. Я просто пытаюсь собрать комнату писателей. CS: Есть настоящая комната писателей для Инди?
Так что выбирайте мудро: Frosties или Sugar Puffs?
Так что выбирайте мудро: Frosties или Sugar Puffs?
Можете ли вы позволить себе немного лучшие наушники, чем те, которые входят в комплект?
Можете ли вы позволить себе немного лучшие наушники, чем те, которые входят в комплект? Здесь альбом еще более расширен и снова каталогизирует все фотографии и видео, и отображает их по альбомам, местоположению, лицам ... Экран как таковой не идеален для просмотра фильмов, но он будет служить. Видео YouTube вращаются и максимизируют 360p, что будет мешать некоторым. С хорошим плеером из Play Store можно вращать фильмы 1080p. Xperia E4 неплохо подходит для игр. Real Racing
Йемен уже страдает от голода, не так ли?
Йемен уже страдает от голода, не так ли? Не совсем - хотя страна приближается к этому. В прошлом месяце ООН предупредила, что половина населения страны сталкиваются с условиями, приближенными к голоду. Данное устройство не поддерживает воспроизведение мультимедийных файлов В ООН обеспокоены тем, что 13000000 человек оказались на пороге голода. Для
Так что вам нужно, чтобы выбраться из этого замкнутого круга?
Так что вам нужно, чтобы выбраться из этого замкнутого круга? Что нам нужно, чтобы получить самые простые советы в силу? Вы просто должны стараться делать хорошие вещи каждый день. Студзиньски добавляет: Обратите внимание, что две награды были фактически примерами умного применения доступных технологий. В Польше мы не ориентируемся на проведение кампании с инновационным элементом. Вместо этого мы сосредотачиваемся на выполнении ежедневной работы и иногда делаем что-то «за вознаграждение».
Так почему же ваш старый Super NES или Sega Genesis выглядит как мусор на вашем новом HDTV?
Так почему же ваш старый Super NES или Sega Genesis выглядит как мусор на вашем новом HDTV? Это комбинация факторов, но в основном это сводится к следующему: старые игровые приставки были разработаны для работы со старыми телевизорами, в частности с телевизорами с большими электронно-лучевыми трубками (CRT), о которых мы помним до того, как ЖК-телевизоры захватили мир. Резолюции не совпадают Если вы подключаете классическую систему на основе картриджей впервые за многие
Безопасны ли сайты государственных учреждений?
Безопасны ли сайты государственных учреждений? Для владельцев веб-сайтов, осознающих необходимость защиты данных пользователей, решение переместить сайт с http на https должно быть естественным шагом - хотя это потребует определенных усилий и денег. Это, однако, окупится. В конце концов, пользователь, который считает интернет-магазин безопасным и готовым покупать. В свою очередь, какой пользователь Chrome будет покупать что-либо в интернет-магазине, помеченном как «незащищенный»?

Зачем организовывать исследования для нескольких человек, если мы можем собирать данные из тысяч, не вставая со стола?
Это имеет смысл, верно?
Так в чем проблема?
Попробуйте провести A / B-тестирование в A / A-варианте - какая версия A была лучше?
Только какую?
Так почему же ваш старый Super NES или Sega Genesis выглядит как мусор на вашем новом HDTV?
Будете ли вы пытать?
Есть ли какие-либо различия между тем, как Active Directory реализуется Samba в UCS и Microsoft Windows?
Что вы имеете в виду, когда говорите, что они тасуются вручную?
Могу ли я погасить рано?