A/B测试结果统计分析工具
ABBA的Python项目详细描述
A/B测试结果统计分析工具。
abba提供了几种统计工具来分析二项式数据,通常是由a/b产生的。 测试:
- 二项比例上的wald和agresti coull置信区间
- 关于两个二项比例之差和比率的置信区间
- 二项比例不等式的假设检验
- 控制家庭错误率的多重测试校正
一些简单的用法示例:
>>> import abba.stats >>> abba.stats.confidence_interval_on_proportion( ... num_successes=50, num_trials=200, confidence_level=0.99) ValueWithInterval(value=0.25, lower_bound=0.17962262748069852, upper_bound=0.33643200973247306) >>> experiment = abba.stats.Experiment( ... num_trials=5, baseline_num_successes=50, baseline_num_trials=200) >>> results = experiment.get_results(num_successes=70, num_trials=190) >>> results.relative_improvement ValueWithInterval(value=0.4736842105263157, lower_bound=-0.014130868125315277, upper_bound=0.90421878236700903) >>> results.two_tailed_p_value 0.047886616311815511
abba需要scipy来实现底层的统计功能。
有关更多信息,请参见docstrings、单元测试和abba网站(包括交互式 javascript版本)位于http://www.thumbtack.com/labs/abba/。