País o región e idioma

    Elige tu país o región y tu idioma.

    Sugerido para ti

      Todos los países y regiones

        Elige tu personaje

        Aparece en la barra superior y en tu perfil. Puedes cambiarlo cuando quieras.

        Métricas y tests A/B

        Define un resultado, pon a prueba explicaciones alternativas y decide qué respaldan las pruebas.

        • 6 escenarios
        • 30 minutos cada uno
        • Habla o escribe tus respuestas
        • Un informe para tu nivel

        Una voz sintética hace las preguntas.

        Tu nivel de entrevista

        Escenarios de práctica

        Elige un escenario. Cada entrevista termina con un informe para el nivel que hayas elegido.

        30 min4 etapasIntermedio (nivel)

        Un experimento de checkout con un límite de seguridad

        Elm Tickets está probando un nuevo checkout con asignación aleatoria por persona usuaria. El grupo de control tiene 200 compras de 1,000 personas usuarias asignadas y 8 reembolsos; el de tratamiento tiene 230 compras de 1,000 personas usuarias asignadas y 23 reembolsos. El equipo necesita una decisión de despliegue que tenga en cuenta el aumento de compras y el daño a los clientes.

        Empezar la entrevista
        Rúbrica y preparaciónRespuesta de nivel mid: qué cubre · 4 lecciones para prepararte

        Intermedio estándar

        • Relaciona las suposiciones, el método y el resultado: uso las compras por persona usuaria asignada como resultado principal por intención de tratar, porque excluir a quienes no compran cambia la población aleatorizada. Defino un límite de seguridad de reembolsos con una ventana de seguimiento común y compruebo primero el registro y la asignación.
        • Prueba el caso límite que más importa: compruebo la asignación aleatoria, la proporción de la muestra, el registro de la exposición y si las personas usuarias pueden influirse entre sí, porque esas condiciones respaldan una interpretación causal. Estimo la incertidumbre del resultado definido de antemano y evito parar en el primer resultado favorable.
        • Explica una comprobación de validación u operativa de la que te encargues: retendría el despliegue amplio mientras compruebo la maduración de los reembolsos y el límite de seguridad, porque más compras por sí solas no demuestran mejores resultados para los clientes. Informo de los dos efectos y de la incertidumbre, y luego acuerdo una regla de decisión en lugar de cantar victoria por la tasa principal.
        30 min5 etapasIntermedio (nivel)

        Una caída en la finalización del onboarding

        Maple Desk cambió su flujo de alta para programar citas, y la persona responsable de producto quiere revertirlo. El flujo antiguo tuvo 240 finalizaciones de 400 inicios; el nuevo tuvo 252 de 600 inicios y recibió más tráfico móvil. Decide qué respalda la comparación y cómo investigarías la caída.

        Empezar la entrevista
        Rúbrica y preparaciónRespuesta de nivel mid: qué cubre · 3 lecciones para prepararte

        Intermedio estándar

        • Define cohortes maduras de personas usuarias elegibles, compara la mezcla de dispositivos y verifica los eventos antes de proponer una prueba controlada.
        • Comparo por separado las cohortes de móvil y de escritorio, porque un cambio en la mezcla de tráfico puede cambiar la tasa agregada, y cuadro los eventos en bruto antes de fiarme de la instrumentación. Hacer coincidir las ventanas de los informes ayuda a destapar finalizaciones que faltan cerca de la hora de corte.
        • Uso asignación aleatoria por persona usuaria con un límite de seguridad claro y una regla de parada, porque las personas usuarias que cambian de flujo contaminarían un experimento controlado. Fijo el tamaño de la muestra a partir de un efecto que valga la pena y dejo a cada cohorte asignada su ventana de finalización.
        30 min5 etapasIntermedio (nivel)

        Una discusión sobre un panel de retención

        Northstar Notes quiere saber si su nuevo plan mejoró la retención. De 100 clientes que empezaron en abril, 80 estuvieron activos en mayo; de 50 que empezaron en mayo, 30 estuvieron activos en junio, y un gráfico aparte los combina como 110 usuarios retenidos. Un cambio de plan puede crear otro registro de cuenta para el mismo cliente.

        Empezar la entrevista
        Rúbrica y preparaciónRespuesta de nivel mid: qué cubre · 3 lecciones para prepararte

        Intermedio estándar

        • Asigna los cambios de plan a identidades de cliente estables, excluye las observaciones inmaduras y distingue una tasa de retención de un recuento.
        • Asigno cada cambio de plan y cada cuenta duplicada a su identidad de cliente estable antes de contar, porque si no la misma persona puede ser a la vez cliente nuevo y cliente que vuelve. Compruebo las asignaciones sin coincidencia y distingo una caída del registro de una actividad cero.
        • Comparo grupos de clientes con un control o un experimento aleatorio, porque elegir el plan puede estar relacionado con la actividad previa antes de que el plan cambiara nada. Mantengo la asignación para el análisis por intención de tratar si algunos clientes rechazan el plan.
        30 min4 etapasIntermedio (nivel)

        Planifica un experimento antes de recoger resultados

        Pine Dispatch quiere probar un recordatorio que ayuda a los usuarios a terminar una reserva. Su base de planificación es un 20 por ciento de finalización, y el equipo considera que subir al 22 por ciento vale la pena. Necesita un plan de prueba antes del siguiente lanzamiento, que incluya cuánto esperar y cuándo decidir.

        Empezar la entrevista
        Rúbrica y preparaciónRespuesta de nivel mid: qué cubre · 3 lecciones para prepararte

        Intermedio estándar

        • Usa la base, el efecto mínimo detectable, la significación y la potencia en un cálculo del tamaño de la muestra, y luego convierte el tráfico que cumple los requisitos en duración.
        • Divido los usuarios asignados necesarios entre el tráfico diario que cumple los requisitos y luego dejo la ventana de resultado de siete días, porque que termine el alta no hace maduros los resultados más recientes. Cubro el ciclo operativo semanal y compruebo el equilibrio de la asignación antes de interpretar los resultados.
        • Mantengo la decisión de horizonte fijo definida de antemano salvo que se haya elegido un diseño secuencial válido, porque parar una y otra vez al ver significación aumenta los falsos positivos. Vigilo un control de daño definido por separado y puedo parar por seguridad sin declarar una victoria temprana en eficacia.
        30 min4 etapasIntermedio (nivel)

        Un pico de lanzamiento que se desvanece

        Birch Boards asignó al azar a sus usuarios a un nuevo diseño del espacio de trabajo durante cuatro semanas. El tratamiento mejoró las tareas completadas en la primera semana, pero su mejora semanal fue bajando hacia cero, y el equipo comprobaba la significación cada mañana. Decide si esto respalda un despliegue duradero.

        Empezar la entrevista
        Rúbrica y preparaciónRespuesta de nivel mid: qué cubre · 3 lecciones para prepararte

        Intermedio estándar

        • Separa la semana de alta del tiempo desde la exposición, conserva la asignación y compara los efectos semanales maduros con su incertidumbre.
        • Mirar los datos cada día y parar en el primer resultado significativo infla el riesgo de falsos positivos, porque la prueba de horizonte fijo da por hecho su plan de análisis declarado. Uso el análisis final definido de antemano o un método secuencial válido, e informo de todos los resultados planificados.
        • Frenaría un despliegue amplio hasta que estén claros el efecto sostenido y el control de calidad, porque una mejora temprana por novedad no demuestra un valor duradero. Una cohorte nueva definida de antemano o un seguimiento maduro más largo pueden probar la persistencia sin reescribir la regla de éxito después de ver los resultados.
        30 min4 etapasIntermedio (nivel)

        Una media que oculta un servicio más lento

        Spruce Support informa de una respuesta media más rápida después de un cambio de encaminamiento. Antes del cambio, 80 tickets sencillos tenían una media de 2 horas y 20 complejos una media de 10 horas; después, 95 tickets sencillos tenían una media de 3 horas y 5 complejos una media de 12 horas. Explica el resultado y recomienda el siguiente análisis.

        Empezar la entrevista
        Rúbrica y preparaciónRespuesta de nivel mid: qué cubre · 3 lecciones para prepararte

        Intermedio estándar

        • Mantén constante la mezcla de tickets, comprueba la censura de los tickets abiertos y define el evento de respuesta antes de atribuir un cambio.
        • Usar la mezcla antigua de 80 a 20 con los nuevos tiempos por segmento da 4.8 horas, porque 80 por 3 más 20 por 12 son 480. Los dos segmentos fueron más lentos, así que separo ese empeoramiento de la mayor proporción de tickets sencillos.
        • Recomiendo investigar la respuesta dentro de cada tipo de ticket, porque la media agregada más baja refleja la mezcla y no un servicio más rápido. Publicaría los recuentos por segmento y la latencia de la cola de la distribución junto a la media, y luego probaría el encaminamiento con llegadas comparables y un control del trabajo pendiente.

        Acceso al centro de entrevistas

        El Interview Hub está incluido en All Access. Elige un plan o inicia sesión en tu cuenta para continuar.

        Ver planesEntra o regístrate

        Your Work Gym account

        Save your progress and pick up on another device. Your browser's progress comes with you.

        or

        You can keep practicing without an account.

        Ayuda y comentarios

        Haz una pregunta, cuéntanos qué no funciona o comparte una idea. Te respondemos por correo electrónico.

        ¿De qué se trata?

        Solo lo usamos para responderte.