A/B test results inconclusive sau 3 tuần. Stakeholders push bạn make a decision. How do you proceed?

89

Conduct usability testing cho app đặt đồ ăn với 12 participants ở Hồ Chí Minh, mix demographics (sinh viên, nhân viên văn phòng, nội trợ). Sử dụng task-based testing với think-aloud protocol. Key findings: (1) 75% users confused bởi filter logic, (2) "Giao hàng nhanh" icon bị hiểu nhầm là "Đang giao", (3) elderly users (50+) cần font size lớn hơn 40%. Redesign theo findings, A/B test: task completion rate tăng từ 64% lên 89%.

21 0

80

Setup observability stack cho hệ thống 30 microservices: Prometheus cho metrics, Loki cho logs, Tempo cho traces — tất cả visualize qua Grafana. Implement distributed tracing với OpenTelemetry SDK, correlation ID propagate qua tất cả services. Define SLIs/SLOs cho mỗi service: availability >99.9%, latency P99 <500ms. Alert routing qua PagerDuty với escalation policy. MTTR giảm từ 45 phút xuống 12 phút nhờ trace-based debugging.

7 0

37

Approach của tôi là data-informed. Tôi collect data trước khi make decision. Tuy nhiên trong case đó data không đủ nên tôi dựa vào experience.

3 0