Сегодня мы рассмотрим простой базовый фреймворк для дизайна сплит-теста, который можно удобно использовать продуктовым аналитикам в своей работе. Разберем использование этого фреймворка, его теоретическую и математическую основу, и также поговорим о продуктовых аспектах заведения A/B-тестов — когда продакту и аналитику заводить A/B-тест не нужно. Вам понадобятся: представления о продуктовых метриках, знания python, первичные представления о математической статистике и чуточку воображения.
Маркетинг
Новости
Спам в маркетинге — всемирная боль, или чрезмерно эффективный инструмент?
О спаме в маркетинге. Почему используют? Почему скрывают использование? Как использовать. Диллетанство. Плохой юмор. Отсутствие цифр (потому что мои не авторитетны, а других не публикуют). Всё как всегда. А, ну и смешные картинки с голубями, сгенерированные нейросетью.
Краткое руководство по анализу данных и проведению продуктовых исследований
Привет. Я занимаюсь продуктовой аналитикой уже довольно давно, и так получилось, что чаще всего в работе мне прилетают именно продуктовые рисёрчи. Иногда нужно разобраться с какой-то фичей, которую никто никогда не изучал, иногда это моделирование перед какими-то изменениями, иногда просто раскопка какой-то проблемы.
По мере моего развития, я экспериментировал с разными подходами к таким задачам, пытался выработать удобный фреймворк, учась на предыдущих ошибках. Читал книги по теме и внедрял интересные идеи из опыта авторов.
Тут я хочу поделиться порядком действий, если хочешь — чек-листом, как я провожу аналитические исследования.
Получилось объёмно, и много где идеи очень простые. Но, как это обычно бывает, на некоторые этапы просто нет времени или желания, а в итоге может пострадать вся суть работы. Наливай чай, бери попкорн — приятного чтения.
Текст в стиле техно: есть ли жизнь за пределами Хабра?
Написав первый текст в августе 2011, за 12 лет я срослась с Хабром: сперва вела блоги двух компаний, затем левачила партизанскими статьями, и наконец, стала работать в самом Хабре. Меня как автора до Хабра особо и не было — так, разовые заказы на переводы, переделанные песни или двустишия для фирменных календарей как крохотная подработка «чтоб не отвыкнуть». Иногда приходила мысль: а есть ли жизнь меня как автора вне Хабра? А раз есть мысль, нужен эксперимент! За несколько лет я получила 7 публикаций в печатных деловых журналах федерального уровня, публиковалась на популярных площадках рунета (не во всех случаях под своим именем), даже пыталась развивать Дзен (но тут не хватило времени и идей). Мера успешности была разной, но с Хабром не сравнится ни одно из изданий. Итак, рассказываю.
Истории
Сувенирка как способ поднятия среднего чека и привлечения внимания к брэнду IT компании
Поделюсь опытом продажи брендированных товаров на #amazon, скажу сразу - первый блин комом.
И так, несколько месяцев назад было решено предложить товары широкого потребления пользователям cleantalk.org (поставщик вспомогательного программного обеспечения для веб-сайтов), соответственно под маркой CleanTalk.
Подборки книг и фильмов — отстой. Но не всегда
Подборки книг, фильмов и ИИ-плагинов — бесполезный формат, который не помогает ни читателю, ни бренду, который их публикует. Но иногда они могут приносить пользу: продажи и охваты
IT Elements, день сетей: White Box, импортозамещение и SD-WAN
Привет, Хабр! В конце ноября в Москве отшумела IT Elements — конференция про сети и инфраструктуру. За два дня мероприятие посетили более 1000 ИТ-архитекторов, сетевых и DevOps-инженеров, сетевых администраторов, производителей сетевых и инфраструктурных решений.
В последние несколько лет мероприятий, где специалисты по сетям могут обменяться опытом, практически не осталось, а тем для обсуждения стало только больше — начиная с того, что делать в отсутствие вендорской поддержки, и заканчивая внедрением продуктов на основе открытого кода и импортозамещенных решений, а также их совместимостью.
О чем говорили и даже спорили эксперты, какие решения продемонстрировали вендоры на своих стендах и где скачать презентации спикеров, если вы всё пропустили, ― читайте под катом.
CX Camp Росбанка: что мы узнали о клиентском опыте и его трансформации с помощью jobs to be done
В октябре у нас в Росбанке прошел CX Camp — офлайн-мероприятие на целый день с приглашенными экспертами, дискуссиями, воркшопами и, конечно же, тимбилдингом под вечер. Темой кэмпа стал клиентский опыт и, в частности, применение к нему инструмента jobs to be done. В этом посте мы поделимся основными тезисами экспертов из разных компаний, которые выступили в тот день.
Чек-лист для улучшения презентации
Недавно наши ребята выступали на конференции, к которой нужно было подготовить красивую презентацию. Мы решили поделиться советами, как собрать весь материал воедино и красиво его оформить, чтобы зрителю было проще воспринимать информацию и слушать самого спикера. Статья будет особенно полезна начинающим дизайнерам, менеджерам и всем, кто сталкивается с трудностями при подготовке презентации для выступления.
Все тренды на 2024 год в одной папке. Более 150 отчетов и прогнозов
Группа маркетологов и бренд-стратегов из Европы и Азии собрали открытый Google Диск, в котором содержится более 150 отчетов о трендах на 2024 год. Вот только часть того, что есть в папке: IPSOS, TRENDHUNTER, TIK-TOK, PWS, ADOBE и другие ТОПы из Fortune. Есть даже ежегодное исследование Бакарди о коктейльных трендах на 2024.
Это 100% мастрид для маркетологов, продактов, бренд-стратегов и всех, кто хочет быть в тренде.
Ссылка на диск с отчетами тут.
Я просмотрел большую часть папки, разбил на категории и перевел названия, чтобы было легче искать, что почитать. Вот тут те, что успел кратко посмотреть:
Один в поле разработчик: примеры российских видеоигр, которые создавал один человек
Может ли интересную игру создать один человек? Когда-то Пажитнов сделал Тетрис, а одним из развлечений программистов было создание или портирование игр с одной платформы на другую.
Есть зарубежные игры, созданные в одиночку и заработавшие миллионы – о них на Хабре уже писали. Мы поговорим об интересных инди-проектах от российских разработчиков. Одни имеют коммерческий успех, другие только начинают свой путь, третьи – уже стали легендами.
Эти примеры могут вдохновить кого-то на создание собственной видеоигры, доказать, что с достаточной долей веры в себя и упорством всё становится возможным.
Digital-мероприятия в Москве c 18 по 24 декабря
Подборка мероприятий на неделю
Неконфа: ИИ-итоги
- 18 декабря (понедельник)
- 1-я Брестская 2с3 PAPA BARVILLAGE Moscow
- от 2 590 р.
- Стань частью самого яркого и креативного ИИ-события года!
НЕКОНФА — это новый формат event-индустрии, которого ждали: уютное общение и ненавязчивый обмен опытом. Нетворкинг-вечеринки для профессиональных комьюнити, где ты точно встретишь близких по духу.
Хакатон X-MAS Hack
- 22 декабря (пятница) — 24 декабря (воскресенье)
- онлайн
- бесплатно
- Регистрируйся в секцию и решай кейсы от IT-компаний:
• Разведочный анализ данных с Wi-Fi роутеров о перемещениях пользовательских устройств по городу
• Средство автоматической коррекции цвета
• Планирование рекламных кампаний
• Предсказание потребностей и болей клиентов
Призовой фонд 1 000 000 р.
Образование для гуманитариев: попробуй выжить
Я прошла через журфак СПбГУ, и я желаю всем мужчинам пройти… В конце первого курса собиралась отчислиться, но меня остановила мама — сказала, что без диплома я сразу стану наркоманкой. Мне такой вариант развития событий не подходил, потому еще 3 года я знатно охреневала от самого лучшего в городе университета.
Ближайшие события
Как IT-компании работают с B2B-контентом и как он работает на них: первое интервью
Я задал эти вопросы коллегам в серии блицинтервью. Спросил, как они используют контент в компаниях, которые создают IT-продукты для бизнеса. Какие задачи решают. В материалах нет моих оценок и обобщений. Делайте выводы сами.
Открываю серию с Марией Кожуховой, CMO Frisbuy, сооснователем Make It Easy Team, независимым консультантом по маркетингу IT-B2B команд. Мария поделилась своим опытом работы с контентом.
Меня зовут Влад Мотрошилов. Я B2B-маркетолог, автор и редактор.
Надеюсь, материал будет полезен маркетологам, редакторам, директорам и основателям IT-компаний. Возможно, вы найдете в опыте коллег инсайты, которые примените в стратегиях и тактиках. А если захотите поделиться с читателями своим опытом, напишите мне.
Контент-маркетинг играет в B2B-сфере важную роль. Продукты сложные. Решения принимаются долго и рационально. Для знакомства с продуктом и принятия решения о покупке необходима информация и социальные доказательства.
Мария рассказала, как она справляется с этими задачами в своих компаниях.
Как рендерить R Markdown в PDF на кириллице
Так получилось, что за всё время, что я использую в работе R, мне не доводилось рендерить markdown-файлы в формат PDF. Иногда я хранил наработки просто в фалах .R, а исследования оформлял в Google Docs, накидывая туда скринов из viewer-а. Иногда это был рендер в .html, с интерактивной графикой, или проекты Shiny в облаке Posit. Да мало ли вариантов.
Но в связи с некоторыми изменениями в форматах хранения аналитических артефактов, судьба привела меня к PDF.
“Дело-то не хитрое, просто меняем формат вывода в markdown” — подумал я. Однако всё оказалось не так просто: и тексты и ggplot не видят кириллицу, движок xelatex не находит кастомные шрифты, LaTeX вообще всё бесит.
Каждая проблема отдельно худо-бедно гуглится или решается через chatGPT, но намного больше информации как посадить markdown-PDF на китайский, чем на кириллицу.
Рассмотрим на примере классического markdown, а в конце реализация для Quarto.
Феномен PlayStation. Как Sony совершила революцию в мире видеоигр и победила в войне консолей
На заре 1990-х годов в мире игровых консолей было всего два имени: Sega и Nintendo. Была конечно ещё Atari, но к тому моменту, выиграв спор по поводу прав на Тетрис, Nintendo оставила её далеко позади. И в то время никто не мог предвидеть, что компания по производству бытовой электроники с нулевым опытом в разработке видеоигр радикально изменит рынок так, что вскоре её имя станет де-факто нарицательным для домашних консолей. Более того, что её влияние навсегда изменит наше представление об играх.
PlayStation от Sony это не просто консоль. Это революция, положившая начало современной эпохе видеоигр. Действительно, для нескольких поколений подряд «PlayStation» подразумевался как общий термин для консолей в целом.
Это история о том, как началось наследие PS, ознаменовав рождение глобального игрового феномена, который изменил ландшафт развлечений.
АБ тесты и подводные камни при их автоматизации
Задача оценки нововведений в онлайн и мобильных приложениях возникает повсеместно. Один из наиболее надёжных и популярных способов решения этой задачи - двойной слепой рандомизированный эксперимент, также известный как АБ-тест.
На тему АБ-тестирования доступны как статьи на Хабре, так и целые книги (неполный список литературы в конце). В основе АБ-теста лежит следующая идея - случайно разделить пользователей на две или более группы, в одной из которых исследуемая функциональность выключена, а в других - включена. Затем можно сравнить метрики и сделать выводы.
Как директологу искать заказы: пошаговый алгоритм + примеры
Эта статья — крик души, потому что если бы я сейчас начинал работу как специалист по Яндекс Директ, я бы просто не нашел ни одного толкового мануала как стартануть быстро и без больших денежных вложений.
После закрытия всем известной сети (я до сих пор не знаю можно ли ее называть?) пошло тотальное заполнение специалистами ВКонтакте.
Одних только групп создается по 100 штук в неделю, а личные страниц, думаю, еще больше.
Только что группы, что личные страницы сделаны по принципу «купите у меня, вот вам кейсы, вот вам цены» иии… нифига нет денег. Ну точнее какие-то есть, но...
Праздник мы находим: поучаствуй в охоте на секреты и получи подарок от айтишного Деда Мороза
Хоу-хоу-хоу, Хабр! На связи айтишный Дед Мороз и его верный помощник — Санта-Хабраслизень. Мы вовсю готовимся к Новому Году и Рождеству, а вам перед праздниками предлагаем как следует развлечься и заодно размять мозги, поучаствовав в поиске новогодних секретов, надёжно спрятанных в статьях блоге Газпромбанка. Секреты помогут зарядиться праздничным настроением, а настойчивых искателей под ёлкой ждут новогодние подарки от Газпромбанка и Хабра. Интересно? Тогда пожалуйте под кат, навстречу приключениям.
Языковые модели – генераторы мультивселенных
Представляю вашему вниманию перевод интересной на мой взгляд статьи «Language models are multiverse generators», размещённой на сайте generative.ink 25 января 2021 г. Это упрощённое изложение научной публикации Ларии Рейнолдс и Кайла Макдонелла «Multiversal views on language models», в которой проводятся параллели между ветвящейся структурой мультивселенной Эверетта, генеративными языковыми моделями наподобие GPT и работой мозга как генератора виртуальной реальности. Автор сайта разработала программу Loom Space, использующую нейросеть GPT-3 для моделирования мультивселенной естественного языка. Её интерфейс может быть полезен для совместного написания с языковой моделью, а также для научно-популярных задач, таких как мозговой штурм и разработка промптов.
Статья сложная, поэтому я рекомендую для лучшего понимания основной мысли прочитать небольшой рассказ Хорхе Луиса Борхеса «Сад расходящихся тропок» (1941) - одно из первых литературных изложений идеи мультивселенной. «Сад расходящихся тропок» - вымышленный роман Цюй Пэна, в котором, как в лабиринте, ветвятся и переплетаются реальности, когда герой выбирает одновременно все находящиеся перед ним возможности. Цюй Пэн не верил в единую временную линию, а представлял себе сеть бесчисленных временных рядов. Поэтому он ни разу не употребил в романе слово «время», которое является ответом на загаданную автором загадку.