Авито представляет новый продукт для бизнеса и разработки, созданный AvitoTech – Trisigma. Это платформа для автоматизации А/B-тестирования и комплексной аналитики цифровых сервисов. Trisigma поможет компаниям принимать решения о качестве и эффективности разработки новых и обновлению существующих продуктов, основываясь на анализе данных и результатах экспериментов.
Платформа изначально была создана для внутренних нужд и первое применение получила в Авито. В процессе использования Trisigma накопили определенный опыт. Мы поняли – пора делиться наработками с рынком в рамках полноценного продукта. В ближайшее время Авито намерена расширить свое присутствие в сегменте B2B-решений, представив и другие продукты для оптимизации и автоматизации разработки.Что умеет Trisigma
Платформа позволяет автоматически проверять эффективность новых функций на разных сегментах аудитории до их массового запуска. Компании могут запускать сотни экспериментов одновременно на различных платформах и операционных системах, а также в разных пользовательских сегментах. Имеются гибкие настройки тестов и генерация подробных отчетов о результатах.
Платформа умеет обрабатывать большие потоки данных цифровых сервисов, вычислять и систематизировать метрики и показатели качества продукта. Система интегрируется с существующими у клиента аналитическими системами (разными БД, например Clickhouse), чтобы забирать данные и по ним считать метрики. Также Trisigma визуализирует результаты в понятной и доступной форме, что упрощает анализ даже для тех, кто не является профессиональным аналитиком.
Сервис поддерживает полный цикл проведения тестов от заведения гипотезы, управления экспериментов в процессе до формирования отчета, человек же подводит итоги и принимает решения. Еще Trisigma выдерживает высокую нагрузку – позволяет одновременно проводить сотни экспериментов в одном продукте, тестировать сразу несколько новых функций на разных аудиториях и анализировать, каким образом они влияют на поведение пользователей. Платформа легко масштабируется и экономно использует вычислительные мощности.
Шесть технических возможностей Trisigma:
настройка групп и весов – Trisigma поддерживает возможность сплитования фичей на неограниченное количество групп. Каждой группе можно установить свой вес;
раздача фичей на все устройства – WEB и мобильные приложения;
обработка большого числа метрик и сегментов в эксперименте – десятки тысяч метрик-разрезов в одном эксперименте считаются бесперебойно;
полностью прозрачное экспериментирование: История изменений, Комментарии, Описание, Ответственные специалисты;
безопасный запуск множества экспериментов одновременно – система слоев позволяет проводить большое количество экспериментов одновременно без рисков их конфликтов;
таргетирование пользователей. Раздавайте фичи только целевым пользователям за счет: Проведения экспериментов со списками конкретных пользователей, Анализа данных только по пользователям, столкнувшихся с тестовой фичей (получивших Exposure).Преимущества Trisigma:
экономия времени аналитиков: автоматизация освобождает до 90% их рабочего времени для решения более сложных и креативных задач;
увеличение количества тестов без найма новых сотрудников: единственное ограничение — это скорость генерации новых продуктовых идей у команды;
повышение надежности результатов за счет исключения человеческих ошибок;
ускорение развития продукта благодаря более быстрому внедрению новых функций.
Trisigma связывает процесс тестирования новых функций с анализом их влияния на бизнес-показатели. Это помогает компаниям получить полную картину развития цифрового продукта и избегать потерь от запуска неудачных обновлений.
Узнать больше о Trisigma можно вот здесь, а по этой ссылке вы найдете техническую документацию платформы.Как платформа влияет на бизнес?
Платформа для A/B-тестов потребовалась Авито еще в 2016 году. Тогда провели два масштабных редизайна и оба релиза катились в прод без A/B. В редизайн было вложено много ресурсов, затягивать релиз никто не хотел, а A/B-тесты стоили дорого. Это вышло боком – метрики покупателей после релизов «упали ступенькой».
2017 год был объявлен годом быстрых A/B-экспериментов – релизы регулярно стали проходить A/B-гейт. Аналитики проводили тесты руками в формате 24/7. Стало понятно, что аналитика A/B — бутылочное горлышко и пришло время строить платформу, так что запрос на платформу у нас сформировался от продукта.
К каким выводам мы пришли:
без платформы АБ-тестов продуктовая команда вынуждена заниматься ручным трудом и все упирается в ресурс аналитика, причем этот аналитик должен быть высокой квалификации. И при этом он может тратить неделю на один эксперимент;
при внедрении платформы Trisigma «бутылочных горлышек» не остается, аналитика автоматизируется, поэтому количество экспериментов зависит только от количества идей/гипотез, которые продуктовая команда успевает деливерить на прод;
платформа стимулирует горизонтальное расширение компании, появление новых продуктовых команд. Аналитик с помощью платформы может одновременно проводить десяток экспериментов, сотни в год.
Немного цифр из опыта использования Trisigma в Авито:
количество продуктовых экспериментов в год увеличилось с 10 до 4000+;
успешные эксперименты обеспечили рост ключевых показателей, таких как выручка или количество покупателей, на уровне 10–20% в год.Как попробовать?
Команда Trisigma открыла прием новых заявок на тестирование сервиса. Пользователи уже есть – это крупные компании из сфер онлайн-образования, фастфуда и ритейла, некоторые из них уже закончили интеграцию платформы.Для кого предназначена платформа?
Trisigma поможет бизнесу любого размера – от стартапов до крупных корпораций, разрабатывающих цифровые продукты для массового рынка. Но особенно оценят платформу компании из сфер электронной коммерции, банковского сектора, стриминговых сервисов и образовательных платформ.
Три признака того, что нужно задуматься о A/B-платформе:
если время «простых» решений прошло, а каждое изменение в продукте — это риск и неопределенность;
если нужно принимать менее рискованные решения и снизить неопределенность. А A/B — это способ получить данные в удобном формате;
если вы хотите снизить стоимость проведения эксперимента, с A/B-платформой она всегда ниже. И нет рисков, сопутствующих «выкатке без А/B».Почему выгодно интегрировать Trisigma?
Мы посчитали, что самостоятельная разработка аналогичной платформы с базовыми функциями обойдется средней компании в несколько десятков миллионов рублей и потратить на это придется примерно два года. Кроме того, вложения на поддержку инфраструктуры и команды платформы составят не менее 50 миллионов рублей.
Trisigma же обходится существенно дешевле, так как развертывается в облаке, а вся поддержка и работа команды – на стороне Авито. Она не требует значительных технических ресурсов со стороны клиентов и легко масштабируется. Точная стоимость использования Trisigma зависит от потребностей конкретного клиента, количества проводимых тестов и обрабатываемых запросов. Заполните заявку здесь и мы вам всё точно посчитаем.
Еще одна разработка AvitoTech – инструмент для мобильных автотестов Emcee, узнать о котором больше можно здесь.
Источник новости: habr.com
