나는 파이썬/장고 분할 테스트 또는 a/b 테스트 라이브러리를 사용하고 있습니다. 그러나 내 테스트가 통계적으로 중요한지 계산하는 방법을 모르겠습니다. 필자는 통계에 대한 지식이 없으므로이 주제에 대한 대부분의 위키 피 디아 기사 또는 웹 페이지를 이해할 수 없으므로 동료 프로그래머의 도움을 얻고 자합니다.여러 목표의 전환율의 통계적 유의성을 계산하는 방법은 무엇입니까?
나는 4 가지 옵션으로 간단한 실험을했고, 나는 그것을 사용하는 사용자의 데이터를 가지고있다. 각 사용자는 4 가지 옵션 중 하나에 있습니다 (인수로 컨트롤의 첫 번째 함수를 호출 할 수 있습니다). 각 사용자는 성공 또는 실패 했으므로 각 옵션의 전환율을 알고 있습니다. 내 테스트가 통계적으로 중요한지 또는 모두가 무작위인지 파악하는 방법은 무엇입니까?
본질적으로 내 입력은 [ (a_yes, a_total), (b_yes, b_total), (c_yes, c_total), (d_yes, d_total)]이 될 것이고 각 옵션에 대한 전환율을 쉽게 알 수 있습니다. 각 옵션의 전환율을 쉽게 비교할 수는 있지만 통계적 유의성을 어떻게 계산할 수 있습니까? 이 테스트는 나에게 아무 말도하지 않고 계속 실행하고 더 많은 데이터를 수집해야하는 경우에 사용됩니다.
두 가지 옵션 (전통적인 a/b 테스트)이있을 때 formulæ을 사용하는 것에 대한 몇 가지 지침을 보았습니다. 그러나이 라이브러리가 여러 옵션을 처리하기를 원합니다. 여러 값으로 통계적 유의성을 계산하는 것이 가능합니까?
본질적으로, 나는이 http://mixpanel.com/labs/split-test-calculator과 비슷하지만 파이썬에서하려고합니다. 보너스 포인트는 파이썬 라이브러리가 있다면 그냥 설치할 수 있습니다 ... "
자바 스크립트 코드가 페이지에 :
Scipy는 노력을 할 수있는 기능이 있습니다. 소스보기가 나타납니다. 해석하기가 너무 어려워 보이지 않습니다. 뭘 더 원하니? –