Як одна проста зміна збільшила взаємодію з AI-чатом на 170%: кейс Plerdy — Experiments Hub

💡 Усі статті, обговорення, новини про продукти — в одному місці. Приєднуйтесь до Product спільноти!

Дисклеймер: Цей допис є частиною добірки продуктових експериментів — Experiments Hub. Проводили A/B тести або якесь інше продуктове дослідження? Заповнюйте форму і діліться своїм досвідом та інсайтами!

Коротко про компанію та продукт

Plerdy — це комплексна SaaS-платформа для аналізу поведінки користувачів та покращення конверсії на вебсайтах. Ми пропонуємо інструменти для теплових карт, відстеження кліків, аналітики форм, SEO-аудиту та збирання зворотного зв’язку, що дозволяє бізнесам оптимізувати UX/UI та підвищувати ефективність маркетингових стратегій.

Наша бізнес-модель базується на підписці (subscription-based), що надає клієнтам гнучкі тарифні плани залежно від потреб: від малих бізнесів до великих корпорацій. Основна цінність Plerdy — це можливість отримати глибоке розуміння поведінки користувачів, виявити проблемні зони на сайті та впроваджувати зміни для збільшення продажів та покращення користувацького досвіду без залучення розробників.

Контекст кейсу

Ми проводили A/B-тестування в рамках запуску нового внутрішнього AI-чату. Мета експерименту — збільшити кількість запитів у чат, що є критично важливим для покращення взаємодії користувачів із продуктом та підвищення їхньої залученості.

Що тестували:
— Варіант А: Іконка чату без тексту.
— Варіант Б: Іконка чату з текстовим підписом.

Результати показали, що Варіант Б переміг — кількість кліків по чату зросла на 170%, що підтвердило важливість текстових підказок для залучення користувачів до взаємодії з AI-чатом.

Гіпотеза

Якщо додати текстовий підпис до іконки чату, то кількість запитів у чат зросте, оскільки користувачі краще зрозуміють його призначення та будуть частіше взаємодіяти з ним.

Дизайн експерименту

Іконка:

Іконка + текст:

Результати тесту

Вплив на метрики:
Тестування показало значний вплив на кількість взаємодій з AI-чатом. Додавання текстового підпису до іконки (Варіант B) привело до збільшення кліків на 170% у порівнянні з Варіантом A (іконка без тексту).

Підтвердження гіпотези:
Гіпотеза про те, що текстовий підпис підвищить залученість користувачів у чат, була підтверджена. Варіант B виявився ефективнішим, що свідчить про важливість додаткового текстового орієнтира для користувачів.

Оцінка успішності тесту:
Тест успішний, оскільки отримано значне покращення взаємодії з AI-чатом, що потенційно може позитивно вплинути на інші ключові метрики, такі як конверсія та залученість користувачів.

Основні припущення, які могли вплинути на результати:
1. Контекст використання: Користувачі могли не одразу розпізнавати іконку чату без тексту, що знижувало клікабельність у Варіанті A.
2. Когнітивне навантаження: Текстовий підпис чітко пояснює функцію чату, що робить його більш зрозумілим для користувачів.
3. Дизайн та візуальна увага: Текст привертає більше уваги, ніж просто іконка, що може вплинути на збільшення кліків.

Висновки

Додавання текстового підпису до іконки чату значно підвищує взаємодію користувачів (+170% кліків). Це показує, що чітка комунікація функціональності елементів інтерфейсу впливає на залученість.

Рекомендація: Тестувати додаткові текстові підказки у важливих CTA-елементах продукту, щоб підвищити конверсію та зрозумілість інтерфейсу.

👍ПодобаєтьсяСподобалось6
До обраногоВ обраному1
LinkedIn
Дозволені теги: blockquote, a, pre, code, ul, ol, li, b, i, del.
Ctrl + Enter
Дозволені теги: blockquote, a, pre, code, ul, ol, li, b, i, del.
Ctrl + Enter

Дозвольте трохи конструктивної токсичності)
Результати тесту досить красномовні, з одного боку, з іншого — нема чіткого формулювання біснес-мети, і тут точно мова не про кліки на чат, а результатах цхи чатів.
1. Результати експерименту і 170% на даних числах не є репрезентативними, вибачте, та, душню, хоча, звісно, загальну тенденцію воно підсвічує.
2. Практика підписування CTA та загалом тексті досить добре працює, але в даному контексті кліки на чат не дають реального уявлення чому людина клікнула на іконку, не помилюсь, якщо припущу, що багато з цих кліків були були з цікавості, або хтось міг й взагалі сприймати текст зі знаком питання як інформаційну іконку, більш правильно буде орієнтуватись на більш глибокі результати, як, наприклад: кількість чат сесій, та, якщо можливо «успішних» чат-сесій, якщо ми маємо можливість якимось чином їх скорити.

Звісно, ми теж аналізувати інші дані:кількість запитань за сесію, точність відповіді, лайки/дислайки, зменшення запитів у підтримку і тд. Основна ціль тесту була, щоб юзери почали користуватися і менше було однакових запитань у підтримку. Тому один простий крок, додавання CTA біля іконки, дав хороший результат. А/Б тести можна продовжувати, змінюючи форму чату та CTA.

Тоді зрозуміло чудово!
Бо в пості це це ані слова.

Згоден, це варто було б додати до кейсу.

з позитивного, є метрика\цифри. Класно, цікаво.

але як це проскочило стадію дизайну поки не дуже зрозуміло. Ми недавно додавали псевдо-АІ (Power BI Q&A) для ентерпрайз репортів і варіанти з іконкою були відкринуті одразу, спалені, і більше ніхто не піднімав це питання)))

ну і загалом це часто в онбординг туторіалах проговорюється.

Дуже просто, під-час дизайну подивилися на топ SaaS чати і бачимо, що ніде немає CTA, навіть в intercom. Знаємо, що CTA дуже важливо... не раз це тестували, і бачили навіть у теплових картах.

“In every study that considered the question, icons were demonstrated to be more difficult to understand than were labels, especially at first viewing, which contradicts one of the most frequently cited reasons for using icons, namely, comprehensibility for beginners.”

Jef Ruskin, The Humane Interface, 2000.

Так, але більшість SaaS які пропонують чати, у всіх тільки іконка, навіть в Intercom. Тому це дійсно дивно.

Я ще часто бачу, коли цей чат взагалі одразу розкривається і там повідомлення: «Чим ми можемо вам допомогти?».

Цікаво, яку б воно конверсію дало.

Чим більше вікно + CTA, тим ймовірніше краща конверсія у розмову. Але є інший ризик, юзерам яким вже не потрібен чат, тоді його треба мінімізувати. Інакше викликає злість.

Підписатись на коментарі