Modül 34

Deney ve belirsizlik: A/B testi

İleri modül (mezuniyetten sonra): şans payı, bootstrap aralığı, permütasyon testi, p-değeri, A/B testi, güç

Bu modülü bitirince şunu diyebilirsin:

İki sürümün farkının şans mı gerçek mi olduğunu bootstrap aralığı, permütasyon testi ve p-değeriyle sınayabiliyor, kaç örnek gerektiğini benzetimle bulabiliyor ve erken bakma, çoklu karşılaştırma gibi tuzaklara düşmeden dürüst bir karar raporu yazabiliyorum.

Bu modülün sonunda iki sürümün ya da iki modelin skor farkının şans mı gerçek mi olduğunu benzetimle sınayabilecek, kaç örnek gerektiğini hesaplayabilecek ve kararını aralık, p-değeri ve örnek sayısıyla raporlayabileceksin.

Dersler

6 ders · ≈ 64 dk

1. Şans ne kadar oynatır10 dk
2. Bootstrap ile güven aralığı10 dk
3. Permütasyon testi ve p-değeri11 dk
4. A/B testi11 dk
5. Tuzaklar: erken bakmak ve çoklu karşılaştırma11 dk
6. Proje: iki istemi dürüstçe karşılaştır11 dk · proje

Pratik alıştırmaları

Derslerden bağımsız, kısa yazma alıştırmaları: Alıştırmalara git

1. Medyan için aralık
2. Sayılardan p-değeri
3. A/B kararı