В этом документе описаны методы, которые можно использовать при проведении A/B-тестирования API Place Autocomplete и Address Validation платформы Google Карт.
Вот несколько преимуществ использования Place Autocomplete и Address Validation API:
- Улучшение пользовательского опыта. Предлагая клиентам подсказки с адресами и местами в реальном времени, вы помогаете им быстрее и проще оформлять покупки. Это может повысить удовлетворенность клиентов.
- Повышение точности данных. API автозаполнения мест и Address Validation API помогают повысить точность данных клиентов. Это особенно важно в электронной торговле, поскольку точные адресные данные необходимы для успешной доставки посылок.
Чтобы повысить качество адресов, проведите A/B-тестирование и выберите решение для проверки, которое лучше всего подходит для ваших целей. Это позволит вам количественно определить, какой продукт лучше всего подходит для вашего варианта использования.
A/B-тестирование позволяет сравнить две версии веб-страницы или приложения. Это тип контролируемого эксперимента, который используется для определения влияния изменения переменной на измеримый результат.
Чтобы провести A/B-тестирование, создайте две версии страницы или приложения: одну контрольную и одну с измененным элементом. Затем вы показываете эти версии разным пользователям и оцениваете, как они с ними взаимодействуют. Победителем становится вариант, который показал лучшие результаты.
Обзор архитектуры системы
Рассмотрим пример A/B-тестирования Address Validation API в электронной торговле. На схеме ниже показано, как клиент взаимодействует с вашим магазином. Это поможет вам выбрать наиболее эффективную стратегию проверки.
[Системный контекст] A/B-тестирование Address Validation
Системы, задействованные в A/B-тестировании ценности Address Validation API.
Процесс A/B-тестирования
Процесс A/B-тестирования состоит из четырех этапов.
- Подготовка. Определите требования к тестированию, его объем и сроки.
- Создайте среду для тестирования, в которой реализованы автозаполнение мест и Address Validation API.
- Выполнение. Сбор показателей во время тестирования, пока не будут получены значимые результаты или не истечет время.
- Анализ. Сравните результаты с гипотезой и определите дальнейшие действия.
Мы поговорим о каждом из них по очереди.
Подготовка
Как определить требования к A/B-тестированию
Первоначальное обнаружение
Спросите себя: "Зачем мне добавлять или менять поставщика услуг по проверке адресов?" Например, с помощью автозаполнения мест в Google Картах:
- Экономия времени. Вам не нужно вводить название места полностью – достаточно начать вводить его, и вы увидите подсказки.
- Уменьшение количества ошибок. Если вы неправильно напишете название места, автозаполнение мест в Google Картах все равно предложит правильный вариант.
Проверка адресов дает множество преимуществ, в том числе:
- Повышение эффективности доставки. Проверка адресов помогает повысить эффективность доставки, гарантируя, что почта и посылки отправляются по правильному адресу. Это позволяет компаниям экономить время и деньги, а также повышать удовлетворенность клиентов.
- Повышение качества данных. Проверка адресов помогает выявлять и исправлять ошибки в них. Это может повысить точность маркетинговых кампаний и других инициатив, основанных на данных.
Выбор гипотезы
Сформулируйте гипотезу, которую хотите проверить. Вот два примера:
1. Коэффициент конверсии
После добавления функции автозаполнения обычно наблюдается незначительное увеличение коэффициента конверсии. Это хороший показатель для отслеживания. Если вы переходите на наше решение с решения другого поставщика, то коэффициент конверсии должен остаться прежним. Если коэффициент конверсии снижается, в первую очередь проверьте реализацию.
Коэффициент конверсии важен, но он не дает полной картины. Решение для проверки адресов предназначено для того, чтобы пользователи не могли вводить некачественные адреса. В некоторых случаях это может усложнить ввод адреса. Это может привести к снижению общего коэффициента конверсии, но это не обязательно плохо. Незавершенные заказы, связанные с проверкой адреса, могли быть связаны с некачественными данными, которые привели бы к возврату средств за доставку.
2. Уменьшение количества адресов низкого качества
Именно здесь может пригодиться хорошее решение для проверки адресов. Внедрив Address Validation, вы сможете сократить количество некачественных данных об адресах.
Если вы сравниваете новое решение с существующим, у вас может возникнуть соблазн просто сравнить коэффициенты соответствия "хороших адресов" и выбрать сервис, который обеспечивает более высокий коэффициент соответствия. Это может вводить в заблуждение, поскольку один сервис может давать больше ложных срабатываний, чем другой.
Вместо этого лучше сравнивать результаты, полученные с помощью данных об адресах. Например, в сфере электронной торговли желаемый результат сбора адреса – успешная доставка посылки.
Сборка
Теперь самое интересное! Пришло время создать новое решение для ваших клиентов. У нас уже есть удобное руководство по реализации Place Autocomplete и Address Validation API на странице оформления заказа в интернет-магазине. Рекомендуем ознакомиться с ней, прежде чем выполнять этот шаг.
Даже если вы не занимаетесь электронной торговлей, многие из этих материалов будут вам полезны, особенно рекомендации по определению качества адреса на основе выходных данных API проверки адреса.
Структурная схема
Ниже приведен пример контейнеров, которые можно использовать для создания A/B-тестирования в интернет-магазине.
[Среда выполнения] A/B-тестирование Address Validation
Важные приложения, сервисы и хранилища данных в ключевых системах, поддерживающих архитектуру. Чтобы увеличить изображение, нажмите на него.
Проверка реализации
Если решение реализовано неправильно, результаты тестирования будут ненадежными. Прежде чем проводить A/B-тестирование, необходимо проверить решение на небольшой группе пользователей, чтобы убедиться, что оно работает правильно. Это могут быть внутренние тестировщики и/или выбранная группа внешних тестировщиков, которым вы доверяете и которые могут дать конструктивный отзыв.
Выполнить
Постепенное увеличение объема рассылки
Даже если решение проверено, все равно рекомендуется наращивать тестирование медленно, начиная с небольшой группы пользователей. Это позволяет выявлять и устранять ошибки и другие проблемы на ранних этапах, не затрагивая большую часть пользователей.
Полная проверка
После того как решение будет протестировано небольшой группой пользователей и все проблемы будут устранены, мы сможем перейти к полноценному A/B-тестированию. Это не обязательно должно быть точное разделение трафика 50/50, но размер должен быть сопоставим со случайно выбранным набором данных об использовании.
Сбор показателей
Во время тестирования убедитесь, что вы собираете данные, необходимые для подтверждения гипотезы. Чтобы упростить сбор и последующий анализ данных, можно использовать платформу для A/B-тестирования. Платформа Google Карт также собирает показатели использования API, которые могут быть полезны. Подробнее об использовании наших инструментов для работы с отчетами…
Вот некоторые из них:
Подсказки мест
Коэффициент конверсии. Увеличился ли коэффициент конверсии/заполнения формы по сравнению с периодом, когда автозаполнение не использовалось?
Взаимодействие с инструментом. Больше ли пользователей успешно взаимодействуют с Place Autocomplete по сравнению с предыдущим решением?
Address Validation
Успешная доставка. Уменьшилось ли количество неудачных доставок из-за качества адреса?
Изменение адреса. Уменьшилось ли количество сборов за изменение адреса, которые вы получили от курьерских служб?
Жилые и коммерческие объекты. Улучшился ли сбор данных о жилых и коммерческих объектах? (только в некоторых странах)
Аналитика
Тестирование завершено, и теперь нужно проанализировать результаты, сравнив их с исходными критериями и гипотезой. Если вы использовали платформу для A/B-тестирования, то часть информации уже может быть вам доступна.
Возвращаясь к разделу о сокращении количества адресов низкого качества выше, вы также можете использовать другие показатели, которые не были получены с помощью платформы для A/B-тестирования. Например, это может быть процент неудачных показов в разных сценариях тестирования:
| Решение А | Решение Б | |
|---|---|---|
| Неудачные доставки | 1,75% | 1,23% |
В приведенном выше примере очевидно, что для этого сценария использования лучше подходит решение Б.
Заключение
Надеемся, что это руководство поможет вам начать A/B-тестирование. Хотя в ней использовались примеры из сферы электронной торговли, те же основные принципы можно применять повсеместно. Определите, что будет считаться успешным результатом использования качественных данных об адресах в вашей компании, и отслеживайте этот показатель в качестве основной гипотезы.
Ниже приведены ссылки на материалы, упомянутые в руководстве.
Желаем успехов!
Дальнейшие действия
Скачайте белую книгу о том, как повысить эффективность оформления покупок, доставки и работы с помощью точных адресов и посмотрите вебинар о том, как улучшить оформление покупок, доставку и работу с помощью проверки адресов .
Дополнительные сведения
- Проверка адреса при оформлении заказа в интернет-магазине
- Документация по автозаполнению мест
- Документация по Address Validation API
- Отчеты по платформе Google Карт
Авторы
Основные авторы:
Хенрик Вальве (Henrik Valve) | разработчик решений для платформы Google Карт