Продакт Меменджер

по ходу пора прошарюватись в claude code

вечеряв 2 місяці тому з Віталіком @rozhevski з Numo ADHD і він розказав що записався на якийсь дуже дорогий і напастований курс з АІ.

"ой, ще один... 🙄" – подумав я і забив на цю інформацію

але останні кілька тижнів почав бачити в нього в лінкедіні пости про те, як він класно автоматизовує купу стартап і продакт рутин клодом, і в якийсь момент я зрозумів що по ходу Віталік все-таки тепер знає щось, чого не знаю я.

у нього РДУГ і через те що він зловив жосткий гіперфікс на клоді – у мене тепер зʼявилось реальне фомо дізнатись а як саме він тепер юзає його)

і якраз в цей момент він мені пише й каже що робитиме про це благодійний івент. куди ви всі теж можете підключитись – в четвер о 17:00.

точно буде корисно, Віталік дуже по ділу чувак, деталі і реєстрація тут, збір само собою на сили оборони:

https://koloua.com/targeted/campaigns/event1203-12610469

я точно буду, не пошкодуйте і ви виділити вечір трохи краще прошаритись в найбільш хот баззворді сьогодення клод коді

п.с. а я може спробую десь скоро нарешті і сам написати новий корисний пост про те, як ми закрили останній продукт (той самий, з яким у нас були проблеми з СПМ-ом).

кияни і львівʼяни, а хто б хотів зустрітись зі мною помережуватись? 😧

я вже знайомий з доволі багатьма підписниками мого каналу, але розумію, що його читають і купа інших людей, з якими я ніколи не бачився, але нам потенційно було б корисно познайомитись.

тому якщо ви теж коли-небудь думали про те, щоб розвіртуалитись зі мною, поговорити про продакт менеджмент, стартапи, мобільні апки, українську музику чи будь-що інше, а також ви живете у Києві або Львові (більше полюбляю оффлайн і зараз живу на ці 2 міста) – не вагайтесь написати мені. спробуємо домовитись про зустріч 🍜

app2web – пів року потому 🧑‍🌾

памʼятаєте наші тести по app2web в Ink AI на початку літа?

як ми спершу боролись з епплом, придумали хитре рішення, вони нас пустили, але вкінці-кінців pARPU в когорти з app2web флоу все одно був нижчий через сильний дроп в конверсії?

так ось – пройшло достатньо часу, щоб поміряти фактичний ребілл рейт в обох когорт.

в минулому пості про апп2веб я писав, що він мав би збільшитись хоча б на 25%, щоб перекрити дроп в конверсії.

так ось – ребілл рейт на фактичних 22 ребілах збільшився на 59.6%. багацько 😏

а все разом – дроп в конверсії, але ріст в ребілл рейті – дали +16% по pARPU в когорти з апп2вебом.

непоганий такий ріст насправді. а якщо прогнозувати ребіли ще до кінця року, то ріст буде десь близько 20%.

і важливий нюанс – ми робили все по білому: в налаштуваннях апки була кнопка cancel subscription. і щоб не задрочувати юзерів складним кенсел флоу, і щоб не ловити купу чарджбеків. і навіть при цьому виявився такий ріст.

то може пора повернутись до активних ітерацій апп2веб? 😏🤫🤔

гайз, а підтримайте продукт PawChamp від Марка із @wtf_is_pmf на продакт ханті 👇

https://www.producthunt.com/posts/pawchamp-puppy-dog-training

я тричі в житті запускав продукти на продакт ханті і знаю, наскільки це завжди трохи хвилююче)

Марк з командою дуже серйозно підійшли до цього лончу (тільки зацініть як весело переробили лого продакт ханту під свій продукт) - тому особливо треба ваш сапорт 😇

PMM-и і UAM-и, треба ваша допомога і експертна думка 🤜🤛

запустили ми коротше новий продукт

(я якраз був останнім часом зайнятий ним, тому трохи притих з постами 🌚)

ніша – едюкейшн. ринок – США.

наразі цей продукт хоститься в форматі навчального курсу на LMS-ці, поки ми перевіряємо економіку перед тим як прийняти рішення про розробку повноцінної мобільної апки.

перевіряємо економіку через квізовий веб-фаннел, який рекламуємо через meta. доволі класичний сетап.

лонч поки що тяжкуватий – у нас дуже високий CPM на meta. настільки високий, що ми розуміємо, що ніяк не зможемо з ним звести економіку.

тому питання до колективного розуму моїх підписників (особливо піемемів і юамів) – чи стикались ви коли-небудь з дуже високим CPM на старті веб-фаннел продукту, який не хоче зменшуватись, і що би ви порекомендували робити в такій ситуації?

що ми вже пробували:

1. оптимізація кампаній не на покупки, а на AddToCart – не допомогло. точніше, CPM це зменшило дуже добре (кратно), але покупок не було взагалі, бо мета почала приводити авдиторію, яка клікає, але не купує. тому цю гіпотезу відкинули

2. сетап кампаній на інші гео – не допомогло, CPM високий на всіх гео

3. сетап кампаній не з броад таргетингом, а по релевантних інтересах – не помогло. CPM все ще високий, конверт в покупку навпаки впав.

4. знайшли точно класний креатив, який має дуже хороший CTR i CR to Paid, + вже отримали на ньому 50 покупок щоб пройти льорнінг фазу оптимізації мети. CPM трохи зменшився, але незначно. далі не зменшується.

ми розуміємо, що проблема точно в CPM, бо CTR в нас хороший, а CR to Paid навіть трохи вищий ринку. лише от CPM тризначний, який ми ніколи раніше не бачили на жодному проєкті 💀

приймаю ваші думки, питання і рекомендації в коментах 👇

результати тесту хард пейволлу 💪

найкраще спрацював варіант, як ви і спрогнозували, з хард пейволлом по тапу на кнопку дженерейт 😏

і спрацював він прям суттєво краще за дефолт – у нього краща конверсія в покупку за дефолт із софт пейволлом на 31% на андроїді і на 22% на айосі.

щоправда, цей варіант не надто виграв у варіанту із хард пейволлом одразу на онбордінгу: він стат достовірно краще за нього лише на 6% на андроїді і не стат достовірно на 2% на айосі. тому в принципі можете в себе робити хард пейволл просто на онбордінгу і не ускладнювати.

загалом досить потужний апліфт порівняно із дефолтом. я до останнього не хотів робити хард пейволл в апці (бо це по факту дуже такий собі юікс), але результат виглядає прям worth it – він значно покращив нашу економіку.

---

оформив цей експеримент в статтю на рубриці ExperimentsHub на DOU.

зберігайте її собі або пересилайте колегам – https://dou.ua/forums/topic/54571/

результати тесту трьох підписок на веб-фаннелі

вони дуже неочікувані. неочікувано розйобні 😮‍💨

1. конверсія в покупку – ріст на 103%
2. ARPU – ріст на 255% 🥵

особливо здивував ріст конверсії в покупку. я не просто не очікував такого великого росту, а очікував дропу. очевидно чому – бо всі три нові підписки в тестовій групі дорожчі за єдину підписку в контрольній групі

але виявляється ціна не настільки вплинула. а) наявність трьох підписок і відповідно відчуття вибору, б) представлення цін через денний прайс, в) інтро оффери і г) зворотній каунтер цих офферів зробили своє діло – конверт дуже значно збільшився

в ідеальному світі нам звісно варто було кожну зміну тестити окремо, щоб зрозуміти що саме найбільше вплинуло, але на жаль в нас тоді не було такої можливості

тому мабуть основний практичний висновок цього тесту – не робіть на веб-пейволі лише одну підписку.
ми починали саме з неї, бо думали, що три підписки це валідно суто для квізових веб-фаннелів (а в нас, нагадаю, квіза не було), + ми знали потужного конкурента, в якого саме пейволл з одною підпискою presumably добре працював

ну і звісно окрім збільшення конверту в нас збільшився і LTV через високі ціни підписок. все це разом і дало величезний ріст в ARPU

щоправда, трек з веб-фаннелом ми все одно запаузили, бо через високі CPMи економіка все ще не сходилась (хоча в одиничку ми вже майже вийшли). але можливо ми ще повернемось до цього треку, коли в нас буде більше внутрішнього капасіті далі ітерувати його

результати тесту app2web флоу з ікстьорнал браузером

дроп у конверсії в покупку шалений – -38% 🫠

це очікувано. для користувача явно стрьомно, коли він лише скачав апку, проходить онбордінг, а тут його раптом перекидають на якусь сторонню сторінку для оплати

але звісно що нас більше цікавлять саме гроші – проте дива і тут не сталось. економії в комісії нам не вистачило, щоб вирівняти дроп в конверсії, – predicted ARPU в тестовій групі впав на -13%.

це вже не настільки велика різниця, але все одно тест програшний.

з важливого – у моїх розрахунках я закладав що ребілл рейт тижневих підписок в обох когорт буде однаковий.

але скоріш за все в юзерів, які платили через сторонню платіжку, він буде трохи вищий. я прикинув, що аби результати обох когорт були хоча б рівними, ребілл рейт в тестовій групі має вирости хоча б на 25%. це насправді можливо, але треба значно більше часу, щоб зібрати фактичні дані.

якщо завдяки покращеному фактичному ребілл рейту тестова група раптом вкінці-кінців таки матиме кращий результат, то я напишу про це ще окремий пост

але наразі на Ink AI ми вирішили відкатити наш app2web і не робити наступні ітерації. судове рішення проти еппла на жаль виявилось не таким уже й industry changing 😶‍🌫

на цьому app2web епопея на цьому каналі від мене всьо) але напишіть обовʼязково в коментарях про свій досвід з app2web – раптом ви його реалізували якось по-іншому і/або у вас були кардинально інші результати? 👇

результати аб-тесту app2web на Ink AI

знаю що ви довго чекали на це – і результати вас не розчарують

1. конверсія в покупку:

- тестова група А – дроп 15.2%
- тестова група B – дроп 12.6%

2. predicted ARPU (по суті це реальні гроші, наша основна цільова метрика):

- тестова група А – нема різниці
- тестова група B – апліфт 4.24%

тобто очікувано у веб2апп флоу зменшилась конверсія в оплату (хоча насправді доволі не на багато, не так як у РевенюКета).

але ставка була на те, що завдяки нижчій комісії – грошей ми заробимо все-таки більше.

і ця ставка дійсно спрацювала. але лише в тестовому варіанті B, і дуже на трохи 😪 не 30% економії 😃

можливо таким апліфтом і варто було б задовільнитись, але тут нізвідки прилітає найбільша проблема – після того як ми вперше пройшли ревʼю з таким стороннім чекаутом, на наступному ревʼю еппл нас уже зареджектив за нього. і після кількох переписок з ними мені не вдалось переконати їх, що наша реалізація стороннього чекауту через web view це ок 🗣

вони хочуть щоб девелопери редіректили юзерів в ікстьорнал браузер.

ідентична ситуація до речі недавно сталась і з Патреоном.

тому по великому рахунку бенчмарки то ми зняли цим тестом, але реалізувати його в проді на всіх юзерів легально ми не можемо ☹️

типовий еппл - спершу апрув, потім реджект. з тим самим функціоналом.

тому в наступній ітерації ми звісно все ще зробимо оплату через пейволл в ікстьорнал браузері, а не через веб-вью, але в такій реалізації я очікую, що конверсія надто сильно впаде і економії на комісії не вистачить щоб цей дроп перекрити.

такі от новини, сподіваюсь корисно для ваших планів по нереалізації апп2веб флоу.

якщо хтось вже встиг протестити апп2веб і в себе – будь ласка, діліться в коментах результатами 🙆

---

п.с. кілька дисклеймерів по моїх обрахунках тесту:

1. в нас комісія еппла 30% (не small business program)
2. комісія платіжки доволі не мала – 5% + 50 центів (юзаємо паддл)
3. ребілл рейт наших тижневих підписок я закладав на вебі такий же, як на мобілці. по конверсії в перший ребілл бачу, що дійсно десь так +- і буде. + це підтверджують результати тесту РевенюКета по їхній конверсії з траялу в пейд.