MiddleDevOps Engineer > Контейнеры и доставка > Надёжность и инцидент-менеджмент
Короткий ответ Резерв capacity должен учитывать не только прогнозируемый органический рост нагрузки, но и запас для устойчивости к отказам (N+1 или N+2 — способность выдержать потерю одной или нескольких зон/узлов без деградации), время, необходимое на масштабирование (lead time автомасштабирования или закупки), и сезонные/маркетинговые пики, которые не отражены в среднем тренде роста. Как это работает подробнее если вся текущая capacity рассчитана ровно под текущий пик без резерва, то отказ даже одного узла/зоны доступности означает, что оставшиеся ресурсы не смогут обслужить нагрузку, и автомасштабирование может не успеть среагировать достаточно быстро (особенно если новые инстансы требуют время на прогрев/инициализацию). Резерв N+1 означает, что система рассчитана на нормальную работу даже при потере одной единицы резервирования (узла, зоны, инстанса). Пример / кейс Ожидаемое поведение: при отказе одной из трёх зон оставшиеся две зоны (каждая рассчитана на 1500 RPS) покрывают весь трафик 3000 RPS без превы
capacity-planninggraceful-degradation
MiddleData Analyst > Метрики и эксперименты > A/B-тесты
Короткий ответ Размер выборки на группу рассчитывается по формуле для сравнения двух долей на основе базовой конверсии, желаемого MDE, уровня значимости alpha и мощности теста; обычно это делают через калькулятор или библиотеку, а не вручную по формуле каждый раз. Как это работает подробнее формула для сравнения двух пропорций использует дисперсию биномиального распределения при базовой конверсии p1, ожидаемой конверсии p2=p1+MDE, и квантили нормального распределения для alpha и мощности; итоговый размер выборки растёт при уменьшении MDE и росте требуемой мощности. Пример кода Что использовать на практике перед запуском теста считают n через готовую функцию (например, statsmodels.stats.power в Python) и сверяют с доступным трафиком за разумный срок — если трафика не хватает, пересматривают MDE или длительность, а не 'запускаем и посмотрим'. Ожидаемый результат: n ≈ 15700 пользователей на группу. Проверка: при увеличении MDE (например, до 1 п.п.) n должно заметно уменьшиться — это sanity check корректности нап
alphakonversiya
MiddleData Analyst > SQL и данные > Python для анализа данных
Короткий ответ Скользящая средняя считается через df['col'].rolling(window=N).mean(), где N — размер окна в количестве периодов (или временной интервал при отсортированном datetime-индексе). Как это работает подробнее rolling(window=N) создаёт объект скользящего окна, который для каждой позиции берёт N последних значений (включая текущее) и применяет указанную агрегатную функцию; первые N-1 значений результата будут NaN, так как для них не хватает полного окна (если не задан min_periods). Пример кода Что использовать на практике Практика. перед расчётом важно убедиться, что данные отсортированы по времени и не содержат пропущенных дат внутри ряда (иначе окно из N "строк" не будет соответствовать N календарным дням); min_periods можно использовать, чтобы считать статистику даже по неполному окну в начале ряда. Проверка. для day=3 rolling_3 должен равняться среднему значений дней 1,2,3 — (10+12+9)/3 = 10.33, а для day=1 и day=2 значения будут NaN из-за неполного окна. Подводные камни Частая ошибка. применяют ro
moving-averagepandas
MiddleDevOps Engineer > Контейнеры и доставка > Мониторинг, логирование и observability
Короткий ответ Error budget = (1 − SLO) за выбранный период; например, при SLO 99.9% за 30 дней допустимая "неудача" — 0.1% запросов, что при 10 млн запросов в месяц даёт budget 10 000 неуспешных запросов; при истощении budget команда обычно замораживает рискованные релизы и фокусируется на надёжности до восстановления запаса. Как это работает подробнее error budget переводит абстрактный процент SLO в конкретное, понятное число "допустимых неудач" за период, что упрощает принятие решений — вместо вопроса "это нормально?" команда смотрит "сколько budget осталось и с какой скоростью он тратится". Скорость расхода (burn rate) показывает, истощится ли budget раньше конца периода при текущем темпе деградации. Пример кода Что использовать на практике Практика. при истощении budget команды обычно применяют заранее согласованную политику (error budget policy): временный мораторий на non-critical релизы, приоритизация technical debt и надёжности над новыми фичами, обязательный post-mortem для крупных инцидентов, котор
error-budgetmonitoring
MiddleData Analyst > SQL и данные > SQL
Короткий ответ Нужно посчитать количество пользователей в каждой группе эксперимента через GROUP BY variant и сравнить фактическое соотношение с ожидаемым (например, 50/50) — SQL даёт только сырые числа, а формальную проверку (например, хи-квадрат) обычно делают уже вне SQL, хотя сами наблюдаемые и ожидаемые частоты можно посчитать запросом. Как это работает подробнее Как это работает: SELECT variant, COUNT(DISTINCT user_id) FROM experiment_assignments GROUP BY variant даёт фактическое число пользователей в каждой ветке; дальше это сравнивают с ожидаемым распределением (обычно пропорциональным доле трафика, заданной в конфигурации эксперимента) — большое отклонение сигнализирует о проблеме в рандомизации или в логировании, а не о реальном эффекте теста. Пример кода Что использовать на практике На практике: SRM нужно проверять до анализа основной метрики — если группы разъехались по размеру сильнее, чем можно объяснить случайностью, доверять результатам теста в целом нельзя, независимо от того, насколько «крас
ab-testingchi-square
MiddleSMM Manager > Общее > SMM-аналитика и метрики
Короткий ответ ROAS (return on ad spend) = выручка от рекламы / расход на рекламу и показывает, сколько выручки принёс каждый вложенный в рекламу рубль без учёта себестоимости товара; ROI учитывает всю прибыль (выручка минус все затраты, включая себестоимость) относительно вложений и отвечает на вопрос о реальной прибыльности. Как это работает подробнее ROAS считается по формуле выручка/расход×100% (или как коэффициент, например 4х), а ROI = (прибыль - затраты)/затраты×100%, где прибыль учитывает маржинальность, себестоимость товара, логистику и прочие издержки, а не только рекламный бюджет. Расход на рекламу 100 000 руб., выручка от рекламного трафика (по пикселю) 400 000 руб. ROAS = 4 (400%). При марже 20% реальная прибыль с этой выручки — 80 000 руб., то есть ROI = (80000-100000)/100000×100% = -20% — кампания убыточна несмотря на ROAS 4. Проверка: сопоставление ROAS с маржинальностью товара перед тем, как делать вывод об успешности кампании. Что использовать на практике Практический подход. ROAS удобен для
metricsreporting
MiddleSMM Manager > Общее > Репутация и кризис-коммуникации
Короткий ответ Нужно работать с содержанием жалобы по существу, проверить, нет ли реальной проблемы с продуктом или сервисом, параллельно фиксировать признаки подозрительной активности для внутреннего анализа, но не делать публичных заявлений о накрутке без доказательств. Как это работает подробнее даже если часть комментариев выглядит скоординированной, за этим может стоять как реальная массовая проблема, так и целенаправленная атака — публичное обвинение без доказательств рискует выглядеть как попытка бренда уйти от ответственности. У бренда «УютДиван» за час появляется 50 похожих комментариев о браке в одной партии диванов. Команда проверяет номера заказов у части авторов — часть жалоб реальна (бракованная партия), а часть текстов повторяется слово в слово у аккаунтов без истории. Публичный ответ фокусируется на признании проблемы с партией и плане замены, без публичных обвинений в накрутке. Проверка: по итогам разбора зафиксировано, какая доля жалоб подтверждена номерами заказов. Что использовать на практ
comment-moderationcommunity-management
JuniorSMM Manager > Общее > Репутация и кризис-коммуникации
Короткий ответ Нужно ответить по существу жалобы максимально нейтрально, не отвечать на эмоциональные формулировки тем же тоном, и при необходимости перевести детальное обсуждение в приватный канал. Как это работает подробнее публичный спор бренда с клиентом виден всем остальным пользователям и обычно воспринимается как непрофессионализм независимо от того, кто формально прав. Пользователь пишет под постом бренда «ТехноМаркет»: «Это самый худший магазин, я в бешенстве!». Ответ: «Понимаем ваше недовольство — расскажите в директе номер заказа, разберёмся». Если пользователь продолжает писать оскорбления, повторный публичный ответ не требуется. Проверка: ветка комментариев не перерастает в длинный публичный конфликт с участием бренда. Что использовать на практике Практический подход. стоит один раз спокойно ответить по делу; если пользователь продолжает эскалировать тон, достаточно короткого нейтрального ответа без повторного вовлечения в эмоциональную часть. Подводные камни Частые ошибки. отвечать в стиле «а во
comment-moderationcommunity-management
SeniorPerformance Marketer > Google Ads > Тестирование гипотез и запуск изменений
Короткий ответ Нужно систематически проверить вероятные причины расхождения (исчерпание наиболее отзывчивого сегмента аудитории при увеличении охвата, эффект новизны, изменившиеся внешние условия, контаминация или техническая ошибка) прежде чем делать вывод, что тест был «неверным»; решение — частично свернуть масштабирование, провести более масштабный повторный тест или принять новый, более скромный ожидаемый эффект — зависит от критичности скорости ответа против стоимости дополнительной проверки. Как это работает подробнее Результат теста на ограниченном бюджете/аудитории часто отражает эффект на наиболее отзывчивой части аудитории (первой охваченной при небольшом охвате); при расширении до полного бюджета реклама неизбежно достигает более широкой и в среднем менее отзывчивой аудитории, из-за чего средний эффект закономерно оказывается скромнее — это не всегда означает ошибку теста. Полезно заранее закладывать в план тестирования постепенное увеличение охвата (а не резкий скачок от 10% до 100%), чтобы заран
ab-testingad-creatives
JuniorSMM Manager > Общее > Публикация и кампании
Короткий ответ Нужно оценить серьёзность опечатки: если она не искажает смысл (например, пропущенная буква), достаточно тихо отредактировать текст, если площадка это позволяет; если опечатка искажает важную информацию (цену, дату, название), стоит исправить и, при значительном охвате, кратко прокомментировать исправление. Как это работает подробнее не каждая площадка позволяет редактировать текст после публикации — там, где редактирование невозможно, выбор стоит между удалением и повторной публикацией или оставлением поста с комментарием-уточнением; оценка серьёзности опечатки определяет уровень реакции. Что использовать на практике На практике. важно различать опечатку, которая не влияет на восприятие (не критично), и ошибку, которая меняет смысл или может ввести в заблуждение (например, неверная дата мероприятия) — для второй категории реакция должна быть быстрее и заметнее. Пример. В посте написано «мероприятие 15 марта» вместо «25 марта». Менеджер редактирует пост (если возможно) и добавляет комментарий «
campaign-managementpublishing-campaigns