آمار و طراحی آزمایش

دوره‌ی آزمون A/B و طراحی آزمایش

A/B Testing & Experimentation

طراحی، تعیین حجم نمونه و تحلیل آزمایش‌های کنترل‌شده به روش تیم‌های محصول امروزی: تصادفی‌سازی، توان آزمون، آزمون نسبت‌ها و میانگین‌ها و خطاهایی که نتیجه را بی‌اعتبار می‌کنند، با تمرین عملی در پایتون. این دوره برای تیم‌های سازمانی، به‌صورت حضوری یا آنلاین و به زبان فارسی برگزار می‌شود.

سطح
متوسط
مدت دوره
۳ روز (۲۴ ساعت)
درس در ۸ بخش
۴۰
شیوه‌ی برگزاری
حضوری یا آنلاین

آنچه شرکت‌کنندگان می‌آموزند

  • طراحی آزمایش کنترل‌شده‌ای که دقیقاً به پرسش مطرح‌شده پاسخ دهد
  • محاسبه‌ی حجم نمونه و توان آزمون پیش از اجرای آزمایش
  • تحلیل شاخص‌های نرخ تبدیل و درآمد با آزمون مناسب هر کدام
  • شناخت خطاهایی که نتیجه را بی‌اعتبار می‌کنند؛ مانند نگاه زودهنگام به نتایج، مقایسه‌های چندگانه و تصادفی‌سازی معیوب

کار عملی: طراحی و تحلیل کامل یک آزمایش

سرفصل دوره

۸ بخش و ۴۰ درس، در ۳ روز آموزشی (۲۴ ساعت، هر روز ۸ ساعت). سرفصل، مدت و تمرین‌ها متناسب با سطح و نیاز تیم شما تنظیم می‌شود.

  1. ۱

    منطق آزمایش

    ۵ درس
    • چرا آزمایش انجام می‌دهیم
    • گروه کنترل و گروه آزمایش
    • چرا تصادفی‌سازی جواب می‌دهد
    • ساختار یک آزمون A/B
    • پروژه‌ی راهنمادار: اولین آزمایش روی محصول Lumen
  2. ۲

    طراحی آزمایش

    ۵ درس
    • از پرسش تا فرضیه
    • انتخاب شاخص‌ها
    • واحد تصادفی‌سازی
    • کمینه‌ی اثر قابل تشخیص
    • پروژه‌ی راهنمادار: طراحی آزمایش قیمت‌گذاری Lumen
  3. ۳

    توان آزمون و حجم نمونه

    ۵ درس
    • سطح معناداری و دو نوع خطا
    • توان آماری
    • محاسبه‌ی حجم نمونه
    • منحنی توان و شبیه‌سازی
    • پروژه‌ی راهنمادار: تعیین حجم نمونه‌ی آزمایش Lumen
  4. ۴

    تحلیل شاخص‌های نسبتی

    ۵ درس
    • آزمون Z دو نسبت
    • تفسیر مقدار p
    • بازه‌ی اطمینان برای تفاوت
    • تصمیم‌گیری برای انتشار تغییر
    • پروژه‌ی راهنمادار: تحلیل آزمایش ثبت‌نام Lumen
  5. ۵

    تحلیل شاخص‌های میانگین

    ۵ درس
    • آزمون t دو نمونه‌ای
    • آزمون t ولش و واریانس‌های نابرابر
    • شاخص‌های چوله و آزمون من–ویتنی
    • بازه‌ی اطمینان برای تفاوت میانگین‌ها
    • پروژه‌ی راهنمادار: آزمایش درآمد Lumen
  6. ۶

    خطاها و اعتبار نتایج

    ۵ درس
    • نگاه زودهنگام و توقف اختیاری
    • مقایسه‌های چندگانه
    • پارادوکس سیمپسون
    • بررسی‌های صحت و تهدیدهای اعتبار
    • پروژه‌ی راهنمادار: ممیزی یک آزمایش Lumen
  7. ۷

    فراتر از آزمون A/B پایه

    ۵ درس
    • کاهش واریانس با CUPED
    • آزمون ترتیبی
    • آزمون A/B بیزی
    • راهزن‌های چنددسته (Multi-Armed Bandit)
    • پروژه‌ی راهنمادار: آزمایشی هوشمندتر برای Lumen
  8. ۸

    پروژه‌ی پایانی

    ۵ درس
    • شرح مسئله و طراحی آزمایش
    • اجرا و اعتبارسنجی آزمایش
    • تحلیل نتایج
    • بررسی متقابل و تصمیم‌گیری
    • گزارش کامل نتایج و جمع‌بندی دوره

شیوه‌های برگزاری

حضوری در محل سازمان

برگزاری کلاس در سازمان شما، با تمرین روی ابزارها و نمونه‌هایی نزدیک به کار روزانه‌ی تیم. زمان و مکان با هماهنگی تعیین می‌شود.

آنلاین و زنده

کلاس‌های تعاملی آنلاین با پرسش و پاسخ، تمرین گروهی و بازخورد مستقیم؛ مناسب تیم‌هایی که در چند شهر یا دورکار هستند.

کارگاه کوتاه یا دوره‌ی جامع

از کارگاه یک‌روزه برای یک موضوع مشخص تا دوره‌ی چندماهه برای آماده‌کردن تیم در یک مسیر شغلی کامل.

دوره‌های مرتبط

همه‌ی دوره‌ها

برگزاری دوره‌ی آزمون A/B و طراحی آزمایش در سازمان شما

تعداد شرکت‌کنندگان، سطح تیم و زمان مدنظر را بفرستید تا برای نیازسنجی و هماهنگی برنامه‌ی دوره با شما تماس گرفته شود.