SlideShare a Scribd company logo
CRM DEVELOPMENT
УПРАВЛЕНИЕ ЦЕННОСТЬЮ КЛИЕНТСКОЙ
БАЗЫ В РЕАЛЬНОМ ВРЕМЕНИ
Максим Мозговой
Директор по CRM и аналитике
Global Publisher
• КОМПАНИЯ БЫЛА ОСНОВАНА В 1998 ГОДУ ГРУППОЙ ЭНТУЗИАСТОВ
• 15 ОФИСОВ ПО ВСЕМУ МИРУ
• КРУПНЕЙШЕЕ ИГРОВОЕ СООБЩЕСТВО В СНГ
• БОЛЕЕ 180 МЛН ЗАРЕГИСТРИРОВАННЫХ ИГРОКОВ
• БОЛЕЕ 4000 СОТРУДНИКОВ ПО ВСЕМУ МИРУ
• «МИР ТАНКОВ» - ОБЛАДАТЕЛЬ МИРОВОГО РЕКОРДА ПО КОЛИЧЕСТВУ
ОДНОВРЕМЕННО ИГРАЮЩИХ ИГРОКОВ НА СЕРВЕРЕ
О КОМПАНИИ
И это здорово !
Все игроки разные
Так как все игроки разные, управлять взаимоотношениями с ними нужно,
персонализируя клиентский опыт!
Products
Offers
Content
Dialogue
Service
Processes
Player
Value
Loyalty
Осторожно развиваем
Поддерживаем
Оптимизируем
Осторожно
удерживаем
Стимулируем активность
Интенсивно
удерживаем
Интенсивно
развиваем
ДЛЯ КАЖДОГО ТИПА ИГРОКОВ МЫ ПЕРСОНАЛИЗИРУЕМ СТРАТЕГИЮ РАБОТЫ С НИМ
ГОВОРЯ О ПЕРСОНАЛИЗАЦИИ…
новые
CustomerLifetimeValue
TIME
развивающиеся
развитые
Retain
Cautiously
Develop
intensively
Nurture
Retain
intensively
Develop
Cautiously
Challenge &
Motivate
Welcome
Winback
Optimize
costs & let go
Train & inform
Regular / Congrats
Winback
Winback
Retain
intensively
ЖИЗНЕННЫЙ ЦИКЛ КЛИЕНТА
Наша миссия
Наша миссия : эффективное управление интегральной ценностью клиентской
базы в соответствии с индивидуальными потребностями клиента
T1 TnT 0
Начало
взаимоотношений
Текущий момент
отток
$
Затраты на привлечение
Затраты на сервис
Затраты на удержание
Пользование
продуктом 1
Пользование
продуктом 2
Потенциал
Время
Ценность
Привлечение Развитие Удержание
• БОЛЕЕ 300 МИЛЛИАРДОВ СОБЫТИЙ
ГЕНЕРИРУЕТСЯ ЕЖЕДНЕВНО
КАКИМИ ДАННЫМИ МЫ ОПЕРИРУЕМ ?
• 40 ТЕРАБАЙТ ИГРОВОЙ ИНФОРМАЦИИ
ДОСТУПНО ДЛЯ АНАЛИЗА ОДНОМОМЕНТНО
• ТРЕБУЕМОЕ ВРЕМЯ РЕАКЦИИ НА СОБЫТИЕ:
МЕНЬШЕ 5 СЕКУНД
PLAYER RELATIONSHIP MANAGEMENT PLATFORM
PRMP: предложения
ПЕРВЫЕ РЕЗУЛЬТАТЫ
• РОСТ КОНВЕРСИИ В 4-5 РАЗ ПО СРАВНЕНИЮ С
ТРАДИЦИОННЫМИ КАНАЛАМИ
• ВОЗМОЖНОСТЬ АВТОМАТИЧЕСКОЙ НАСТРОЙКИ
КАМПАНИЙ ПО ОТКЛИКУ
• ЗАПУСК ПЕРСОНАЛИЗИРОВАННЫХ A/B ТЕСТОВ
РАЗЛИЧНЫХ ПРЕДЛОЖЕНИЙ
• УВЕЛИЧЕНИЕ LTV БОЛЕЕ ЧЕМ В 2 РАЗА ДЛЯ
КЛИЕНТОВ, ПРИНЯВШИХ ПРЕДЛОЖЕНИЕ
Источники ценности клиентской базы
Лояльность (срок жизни клиента), потенциал и ценность взаимосвязаны.
Реализованный потенциал
Нереализованный потенциал
из-за недостатка релевантных
предложений
Нереализованный
потенциал из-за ухода
в отток
отток
$
время
Модель предсказания ценности
клиента
Модели предсказания
активности
Модели предсказания
потенциала
Модели предсказания и
оптимизации отклика
Вероятность оттока по
различным продуктам
Вероятность оттока на
различных периодах
Вероятность возврата из
состояния оттока
Индивидуальная функция
выживаемости в рамках
продукта / экосистемы
SNV / монетизационный
потенциал соц.связей
Вероятность покупки продукта
Вероятность монетизации
контента
Индивидуальные модели
Share of Wallet
Вероятность каннибализации
/ перехода между продуктами
Анализ внутриигровых
триггеров покупки
Анализ внутриигровых
триггеров оттока
Uplift (инкрементальное)
моделирование
Мультивариантные A/B тесты
Эконометрическое
моделирование в сегменте
SNA / моделирование
социального графа
Анализ коммуникационных
триггеров
Система КПЭ управления ценностью клиентской базы
% Реализации потенциала развития клиентской базы
Потенциальная интегральная ценность клиентской базы
Текущая интегральная ценность клиентской базы
Пожизненная ценность клиента
Потенциал клиента
Вероятность покупки продукта
Склонность клиента к оттоку
Текущая ценность клиента
Классический подход к анализу данных
SEMMA
1. Предсказание активности - строим кривую выживаемости клиента
Пример – предсказание ценности клиента и вероятности отклика
Как решать такую задачу – сколько моделей нам нужно?
• 7 временных интервалов (1,2,3 недели, 1,2,3,6 мес.) – на каждом интервале строится модель
вероятности перехода в неактивное состояние и возврата из неактивного состояния
• 4 поведенческих/транзакционных сегмента (может быть и больше)
• 5 продуктов (WoT, WoTB, WoWS, WoWP, WoWG … )
• 4 региона (NA/EU/CIS/ASIA)
ИТОГО: (7+7)*4*5*4 = 1120 моделей
WTF?!?
2. Предсказание вероятности покупки контента
• 4 временных интервала (1,2,3 недели, 1 мес.) – на каждом интервале строится модель вероятности
покупки
• 30 различных единиц контента / офферов (в среднем, на самом деле может быть и больше)
• 4 платежных сегмента (может быть и больше)
• 5 продуктов (WoT, WoTB, WoWS, WoWP, WoWG … )
• 4 региона (NA/EU/CIS/ASIA) ИТОГО: 4*30*4*5*4 = 9600 моделей
3. Предсказание вероятности отклика
• 11 коммуникационных стратегий
• 8 поведенческих сегментов
• 5 оффер-темплейтов в среднем на каждый сегмент (Прем, голд, бандлы, и тп)
• 3 дизайн-темплейта (A/B/C тест для каждой кампании)
• 5 каналов (e-mail, in-game client, site, RTB campaign, push)
• 5 продуктов (WoT, WoTB, WoWS, WoWP, WoWG … )
• 4 региона (NA/EU/CIS/ASIA)
ИТОГО: 11*8*5*3*5*5*4 = 132000 моделей
И что теперь делать?
Нам нужна фабрика!
Какая фабрика?
Фабрика Моделей !
Такая?
Хм… Не совсем, хотя тоже
неплохо ;-)
Вот такая!
The Rise of Predictive Modeling Factories
ЧТО ПОЧИТАТЬ? KDnuggets: Future of predictive analytics: human or machine
ZD NET: SAS Factory Miner industrializes predictive analytics
ВАРИАНТЫ РЕШЕНИЯ:
SAS FACTORY MINER
RAPIDMINER
H2O
Глобальная библиотека шаблонов моделей
Автоматическое моделирование по сегментам
Современные высокопроизводительные алгоритмы
SAS FACTORY MINER:
ФАБРИКА МОДЕЛЕЙ – ПРОТОТИП: КРИТЕРИИ УСПЕШНОСТИ
ЦЕЛЬ 1 : Возможность поддержки процессов проактивного сохранения клиентской базы, на основе
моделирования оттока
•7 временных интервалов (1,2,3 недели, 1,2,3,4 мес.)
•8 сегментов
•3 проекта (WoT на первом этапе, WOWS,WOTB – на втором.)
•4 региона
•Всего 672 моделей
ЦЕЛЬ 2 : Продемонстрировать 5х прирост точности модели на 10% клиентской базы по отношению к
случайному распределению на моделях, построенных с помощью Factory Miner.
ЦЕЛЬ 3 : Реализовать процесс автоматического перестроения и развертывания моделей – все модели
должны быть перестроены и развернуты на Hadoop в течении 24-ч периода
ЦЕЛЬ 4 : Показать стабильность результатов моделирования и робастность – качество моделей,
измеренное в терминах uplift-а и коэффициента Gini не должно варьироваться более чем на 10% в
течении 14 дневного периода.
ЦЕЛЬ 5: Продемонстрировать стабильность работы платформы SAS Factory Miner – время простоя,
ассоциированное с ошибками ПО SAS не должно превышать 5 часов в месяц.
Мы такие разные -
Но все-таки мы вместе!
05 Мозговой Максим - Wargaming
05 Мозговой Максим - Wargaming

More Related Content

PPTX
Как сэкономить время и деньги? Тиражные решения и готовые интернет-магазины н...
PPTX
Crossss eshops-310313-short
PPTX
ExpertSender - Sales or Love? // Продажи или любовь?
PDF
30 полезных сервисов для владельцев интернет-магазинов
PPT
ExpertSender - Email-serving Brand // Емейл на службе бренда
PDF
Персонализация
PPTX
Современные технологии сайтостроения для решения бизнес-задач
PPTX
Предсказательная аналитика в e-commerce: есть ли жизнь после конверсии?
Как сэкономить время и деньги? Тиражные решения и готовые интернет-магазины н...
Crossss eshops-310313-short
ExpertSender - Sales or Love? // Продажи или любовь?
30 полезных сервисов для владельцев интернет-магазинов
ExpertSender - Email-serving Brand // Емейл на службе бренда
Персонализация
Современные технологии сайтостроения для решения бизнес-задач
Предсказательная аналитика в e-commerce: есть ли жизнь после конверсии?

What's hot (7)

PPTX
Сегментация подписчиков в Sendsay: разделяй и властвуй!
PPT
Advert expo-2013
PPTX
Как работать с каждым из тысячи клиентов индивидуально?
PPTX
Sendsay: вебинар новый интерфейс
PDF
E-Sputnik "Email маркетинг - как получить постоянных клиентов?"
PPTX
Подготовка интернет-магазина к новогодним акциям и распродажам
PDF
Александр Сербул. 1С Битрикс. Массовый скоринг в CRM — секреты и подводные камни
Сегментация подписчиков в Sendsay: разделяй и властвуй!
Advert expo-2013
Как работать с каждым из тысячи клиентов индивидуально?
Sendsay: вебинар новый интерфейс
E-Sputnik "Email маркетинг - как получить постоянных клиентов?"
Подготовка интернет-магазина к новогодним акциям и распродажам
Александр Сербул. 1С Битрикс. Массовый скоринг в CRM — секреты и подводные камни
Ad

Similar to 05 Мозговой Максим - Wargaming (20)

PPTX
Лямбда-архитектура с обратной связью
PDF
Как перестать бояться и начать любить медийку. Алгоритмический маркетинг.
PDF
Как перестать бояться и начать любить медийку. Алгоритмический маркетинг
PDF
Agora Omni Channel Engine
PDF
Максим Мозговой. Ценностное управление клиентской базой и предикативная анали...
PDF
Продвижение офлайн сети магазинов в интернете // eTargeting
PPTX
DataTalks #4: Использование предиктивной аналитики для управления ценностью к...
PPTX
СРА-mechanics.
PDF
пронин алексей. Hybris software hybris для больших и маленьких
PDF
модуль 5. развитие продукта. часть 1
PPTX
Монетизация интернет-проектов
PDF
Презентация Tibco spotfire
PDF
Sap Sales Cloud - АтлантКонсалт
PPTX
Интернет-маркетинг и веб-аналитика у автодилеров по системе ИБД (имитация бур...
PDF
Исследования отношения покупателей и прогнозирование продаж // GPS Research R...
PDF
Клуб Юных Программатиков. Лекция 4. Дмитрий Максаков
PPTX
Alytics - Александр Егоров - Тренды в контекстной рекламе для e-commerce
PPTX
Predictive Analytics/Data Mining – как извлечь максимум из корпоративных дан...
PPT
Рынок облачных сервисов. Маркетинг SaaS-решений.
PPT
Анализ поведения клиентов (Сбербанк)
Лямбда-архитектура с обратной связью
Как перестать бояться и начать любить медийку. Алгоритмический маркетинг.
Как перестать бояться и начать любить медийку. Алгоритмический маркетинг
Agora Omni Channel Engine
Максим Мозговой. Ценностное управление клиентской базой и предикативная анали...
Продвижение офлайн сети магазинов в интернете // eTargeting
DataTalks #4: Использование предиктивной аналитики для управления ценностью к...
СРА-mechanics.
пронин алексей. Hybris software hybris для больших и маленьких
модуль 5. развитие продукта. часть 1
Монетизация интернет-проектов
Презентация Tibco spotfire
Sap Sales Cloud - АтлантКонсалт
Интернет-маркетинг и веб-аналитика у автодилеров по системе ИБД (имитация бур...
Исследования отношения покупателей и прогнозирование продаж // GPS Research R...
Клуб Юных Программатиков. Лекция 4. Дмитрий Максаков
Alytics - Александр Егоров - Тренды в контекстной рекламе для e-commerce
Predictive Analytics/Data Mining – как извлечь максимум из корпоративных дан...
Рынок облачных сервисов. Маркетинг SaaS-решений.
Анализ поведения клиентов (Сбербанк)
Ad

More from Belarusian State University, Faculty of Economics, Ecocomics Informatics Division (20)

PDF
01 Марушко Дмитрий - BizTech BSU StartUp Contest - опыт создания университетс...
PDF
02 Штевнина Наталья - ЕРИП - история успеха национального стартапа
PDF
03 Артуганова Надежда - Как найти сотрудников для стартапа
PDF
04 Шумская Любовь Ивановна - Миссия ЦРМП ЭФ БГУ
PDF
01 Крупский Дмитрий - Малое инновационное предпринимательство
PDF
03 Герасимович Глеб - Как сделать так, чтобы за вами гонялись венчурные инвес...
PDF
04 Горшунов Владимир - AgileLAB: Product Ownership
PDF
03 Успенский Александр - РЦТТ EEN
PDF
04 Денисенков Виталий - Студия Борового
PDF
07 Комисаренко Владимир - РусКрипто
PDF
08 Кавецкая Юлия - Банк развития
PDF
10 Завадко Сергей - КриоМенеджер
PDF
02 Шабловский Алексей - Стартап технологии
PDF
03 Знак Максим - Боровцов и Салей
PDF
01 Марушко Дмитрий - BizTech BSU StartUp Contest - опыт создания университетс...
02 Штевнина Наталья - ЕРИП - история успеха национального стартапа
03 Артуганова Надежда - Как найти сотрудников для стартапа
04 Шумская Любовь Ивановна - Миссия ЦРМП ЭФ БГУ
01 Крупский Дмитрий - Малое инновационное предпринимательство
03 Герасимович Глеб - Как сделать так, чтобы за вами гонялись венчурные инвес...
04 Горшунов Владимир - AgileLAB: Product Ownership
03 Успенский Александр - РЦТТ EEN
04 Денисенков Виталий - Студия Борового
07 Комисаренко Владимир - РусКрипто
08 Кавецкая Юлия - Банк развития
10 Завадко Сергей - КриоМенеджер
02 Шабловский Алексей - Стартап технологии
03 Знак Максим - Боровцов и Салей

05 Мозговой Максим - Wargaming

  • 1. CRM DEVELOPMENT УПРАВЛЕНИЕ ЦЕННОСТЬЮ КЛИЕНТСКОЙ БАЗЫ В РЕАЛЬНОМ ВРЕМЕНИ Максим Мозговой Директор по CRM и аналитике Global Publisher
  • 2. • КОМПАНИЯ БЫЛА ОСНОВАНА В 1998 ГОДУ ГРУППОЙ ЭНТУЗИАСТОВ • 15 ОФИСОВ ПО ВСЕМУ МИРУ • КРУПНЕЙШЕЕ ИГРОВОЕ СООБЩЕСТВО В СНГ • БОЛЕЕ 180 МЛН ЗАРЕГИСТРИРОВАННЫХ ИГРОКОВ • БОЛЕЕ 4000 СОТРУДНИКОВ ПО ВСЕМУ МИРУ • «МИР ТАНКОВ» - ОБЛАДАТЕЛЬ МИРОВОГО РЕКОРДА ПО КОЛИЧЕСТВУ ОДНОВРЕМЕННО ИГРАЮЩИХ ИГРОКОВ НА СЕРВЕРЕ О КОМПАНИИ
  • 3. И это здорово ! Все игроки разные
  • 4. Так как все игроки разные, управлять взаимоотношениями с ними нужно, персонализируя клиентский опыт! Products Offers Content Dialogue Service Processes Player
  • 7. Наша миссия Наша миссия : эффективное управление интегральной ценностью клиентской базы в соответствии с индивидуальными потребностями клиента T1 TnT 0 Начало взаимоотношений Текущий момент отток $ Затраты на привлечение Затраты на сервис Затраты на удержание Пользование продуктом 1 Пользование продуктом 2 Потенциал Время Ценность Привлечение Развитие Удержание
  • 8. • БОЛЕЕ 300 МИЛЛИАРДОВ СОБЫТИЙ ГЕНЕРИРУЕТСЯ ЕЖЕДНЕВНО КАКИМИ ДАННЫМИ МЫ ОПЕРИРУЕМ ? • 40 ТЕРАБАЙТ ИГРОВОЙ ИНФОРМАЦИИ ДОСТУПНО ДЛЯ АНАЛИЗА ОДНОМОМЕНТНО • ТРЕБУЕМОЕ ВРЕМЯ РЕАКЦИИ НА СОБЫТИЕ: МЕНЬШЕ 5 СЕКУНД
  • 11. ПЕРВЫЕ РЕЗУЛЬТАТЫ • РОСТ КОНВЕРСИИ В 4-5 РАЗ ПО СРАВНЕНИЮ С ТРАДИЦИОННЫМИ КАНАЛАМИ • ВОЗМОЖНОСТЬ АВТОМАТИЧЕСКОЙ НАСТРОЙКИ КАМПАНИЙ ПО ОТКЛИКУ • ЗАПУСК ПЕРСОНАЛИЗИРОВАННЫХ A/B ТЕСТОВ РАЗЛИЧНЫХ ПРЕДЛОЖЕНИЙ • УВЕЛИЧЕНИЕ LTV БОЛЕЕ ЧЕМ В 2 РАЗА ДЛЯ КЛИЕНТОВ, ПРИНЯВШИХ ПРЕДЛОЖЕНИЕ
  • 12. Источники ценности клиентской базы Лояльность (срок жизни клиента), потенциал и ценность взаимосвязаны. Реализованный потенциал Нереализованный потенциал из-за недостатка релевантных предложений Нереализованный потенциал из-за ухода в отток отток $ время
  • 13. Модель предсказания ценности клиента Модели предсказания активности Модели предсказания потенциала Модели предсказания и оптимизации отклика Вероятность оттока по различным продуктам Вероятность оттока на различных периодах Вероятность возврата из состояния оттока Индивидуальная функция выживаемости в рамках продукта / экосистемы SNV / монетизационный потенциал соц.связей Вероятность покупки продукта Вероятность монетизации контента Индивидуальные модели Share of Wallet Вероятность каннибализации / перехода между продуктами Анализ внутриигровых триггеров покупки Анализ внутриигровых триггеров оттока Uplift (инкрементальное) моделирование Мультивариантные A/B тесты Эконометрическое моделирование в сегменте SNA / моделирование социального графа Анализ коммуникационных триггеров
  • 14. Система КПЭ управления ценностью клиентской базы % Реализации потенциала развития клиентской базы Потенциальная интегральная ценность клиентской базы Текущая интегральная ценность клиентской базы Пожизненная ценность клиента Потенциал клиента Вероятность покупки продукта Склонность клиента к оттоку Текущая ценность клиента
  • 15. Классический подход к анализу данных SEMMA
  • 16. 1. Предсказание активности - строим кривую выживаемости клиента Пример – предсказание ценности клиента и вероятности отклика Как решать такую задачу – сколько моделей нам нужно? • 7 временных интервалов (1,2,3 недели, 1,2,3,6 мес.) – на каждом интервале строится модель вероятности перехода в неактивное состояние и возврата из неактивного состояния • 4 поведенческих/транзакционных сегмента (может быть и больше) • 5 продуктов (WoT, WoTB, WoWS, WoWP, WoWG … ) • 4 региона (NA/EU/CIS/ASIA) ИТОГО: (7+7)*4*5*4 = 1120 моделей WTF?!? 2. Предсказание вероятности покупки контента • 4 временных интервала (1,2,3 недели, 1 мес.) – на каждом интервале строится модель вероятности покупки • 30 различных единиц контента / офферов (в среднем, на самом деле может быть и больше) • 4 платежных сегмента (может быть и больше) • 5 продуктов (WoT, WoTB, WoWS, WoWP, WoWG … ) • 4 региона (NA/EU/CIS/ASIA) ИТОГО: 4*30*4*5*4 = 9600 моделей 3. Предсказание вероятности отклика • 11 коммуникационных стратегий • 8 поведенческих сегментов • 5 оффер-темплейтов в среднем на каждый сегмент (Прем, голд, бандлы, и тп) • 3 дизайн-темплейта (A/B/C тест для каждой кампании) • 5 каналов (e-mail, in-game client, site, RTB campaign, push) • 5 продуктов (WoT, WoTB, WoWS, WoWP, WoWG … ) • 4 региона (NA/EU/CIS/ASIA) ИТОГО: 11*8*5*3*5*5*4 = 132000 моделей
  • 17. И что теперь делать?
  • 18. Нам нужна фабрика! Какая фабрика? Фабрика Моделей ! Такая? Хм… Не совсем, хотя тоже неплохо ;-) Вот такая!
  • 19. The Rise of Predictive Modeling Factories ЧТО ПОЧИТАТЬ? KDnuggets: Future of predictive analytics: human or machine ZD NET: SAS Factory Miner industrializes predictive analytics ВАРИАНТЫ РЕШЕНИЯ: SAS FACTORY MINER RAPIDMINER H2O
  • 20. Глобальная библиотека шаблонов моделей Автоматическое моделирование по сегментам Современные высокопроизводительные алгоритмы SAS FACTORY MINER:
  • 21. ФАБРИКА МОДЕЛЕЙ – ПРОТОТИП: КРИТЕРИИ УСПЕШНОСТИ ЦЕЛЬ 1 : Возможность поддержки процессов проактивного сохранения клиентской базы, на основе моделирования оттока •7 временных интервалов (1,2,3 недели, 1,2,3,4 мес.) •8 сегментов •3 проекта (WoT на первом этапе, WOWS,WOTB – на втором.) •4 региона •Всего 672 моделей ЦЕЛЬ 2 : Продемонстрировать 5х прирост точности модели на 10% клиентской базы по отношению к случайному распределению на моделях, построенных с помощью Factory Miner. ЦЕЛЬ 3 : Реализовать процесс автоматического перестроения и развертывания моделей – все модели должны быть перестроены и развернуты на Hadoop в течении 24-ч периода ЦЕЛЬ 4 : Показать стабильность результатов моделирования и робастность – качество моделей, измеренное в терминах uplift-а и коэффициента Gini не должно варьироваться более чем на 10% в течении 14 дневного периода. ЦЕЛЬ 5: Продемонстрировать стабильность работы платформы SAS Factory Miner – время простоя, ассоциированное с ошибками ПО SAS не должно превышать 5 часов в месяц.
  • 22. Мы такие разные - Но все-таки мы вместе!