A/B Testing آزمایشی است که دو نسخه از یک صفحه یا قابلیت را روی گروه‌های تصادفی مقایسه می‌کند تا اثر تغییر بر معیار مشخص سنجیده شود.

از مفهوم تا اجرا

دو نسخه صفحه معرفی دوره می‌توانند با نرخ ثبت‌نام مقایسه شوند.

حجم نمونه، مدت آزمایش، تصادفی‌سازی و تعدد آزمون‌ها بر اعتبار نتیجه اثر می‌گذارند.

ای‌بی تست و نتیجه آماری

در آزمون A/B باید کاربران به شکل قابل اعتماد به گروه‌های جدا تخصیص داده شوند و معیار موفقیت از قبل تعریف شود. توقف آزمون صرفاً به خاطر نتیجه موقت مطلوب می‌تواند نرخ خطای آماری را افزایش دهد.