sql - BigQuery : how can I run a binomial test? 中的统计测试

Question

在 BigQuery 中提供高级统计功能会很有用。如何获得贝叶斯可信区间和二项式检验？

是否有可用的 UDF？

Answer 1

你可以写UDF为此。实际上并没有那么复杂，尽管调试起来可能有点麻烦。这是一个 link对于我为二项式检验和贝叶斯可信区间编写的一些 UDF，下面是如何使用它们的简短演示。如果您使用 Web 界面，请不要忘记将它们粘贴到 UDF 编辑器中，您可以通过按查询文本框右上角的按钮找到它。

假设您种植的草莓由兼职 worker 采摘到盒子里。平均每 100 个盒子中就有 1 个被客户拒绝，因为它包含太多坏浆果。你决定给最好的采摘者奖励，但意识到通过原始拒绝率来比较它们会给箱子很少的采摘者带来不公平的优势(因为 10 个箱子中的 0 个拒绝不一定比 100 个箱子中的 1 个拒绝更好).相反，您使用 binomial test计算谁最有可能比平均水平更好:

SELECT
   id,
   pvalue
 FROM
   binomial_test(
     SELECT
       *
     FROM
       (SELECT "Jim" AS id,  234 AS total, 0 AS observed, 1/100 AS probability),
       (SELECT "Bob" AS id, 1478 AS total, 3 AS observed, 1/100 AS probability),
       (SELECT "Sue" AS id,  482 AS total, 1 AS observed, 1/100 AS probability)
   )

Row  id   pvalue     
1    Jim  0.09519969035921706    
2    Bob  2.408837505151057E-4   
3    Sue  0.04620667666995042