2008-09-16 19 views
1

geliştirmek ve size algoritmaya ince ayarları yapmak istedim ve gör daha iyi, buna nasıl yaklaşırsın?A/B testi alaka

Basit Giriş sonrası ile ilişkili DB'de günlüğe kaydetme? Eğer grup B'ye bir A togroup algoritmasının versiyonunu ve başka gösterilmesi ve tıklama ölçmek istiyorum

A/B testi?

değişikliklerin daha iyi olup olmadığı konusunda üzerine karar baz olur ne gibi özellikleri?

cevap

1

A/B testi iyi bir başlangıç ​​görünüyor ve katılımcıları rastgele. Onları asla hatırlamalısınız, böylece ikisini de hiç görmeyecekler.

Bir T-Testi vb yapmak, davranışsal psikoloji deneyi gibi davranın olabilir ...

1

tıklama izleme numarasına ek olarak, aynı zamanda onlar hikaye bakmak ne kadar izlemek için yararlı olabilir onlar tıklandı. Daha karmaşık verilerdir, ancak başka bir bilgi seviyesi sağlar. Daha sonra sadece seçmiş olduğunuz hikayelerin, kullanıcının dikkatini çekip çekmediğini değil, aynı zamanda hikayelerin bunu tutabildiğini de göreceksin.

Sen istatistiksel analiz yapabileceği (Tim gibi yani T-testi önerdi), ancak muhtemelen önemini kanıtlamak için ya önlem yeterli bir standart sapmasının düşük almazsınız. Her ne kadar gerçekten önemli değil: İhtiyacınız olan tek şey, algoritmalardan birinin daha yüksek ortalama tıklama sayısına ve/veya harcanan süreye sahip olmasıdır. Hipotez testi ile aldatmaya gerek yok, umarım. Tabii

, hep tavsiyeler ilgili olsaydı sadece kullanıcıyı sorma seçeneği yoktur, ama bu durumunuza uygun olmayabilir.