Tarefa dgp.ri_null.fast
Veredito
passouPassou em todas as verificações obrigatórias.
Pergunta feita ao analista
Tarefa de ferramenta: nenhuma pergunta; a especificação de referência é chamada direto.
Valores esperados e de onde vêm
Nenhuma fonte citada pelas verificações.
Verificações
| # | Verificação | Obrigatória | Resultado | Esperado | Observado | Tolerância | Fonte | Chamada |
|---|---|---|---|---|---|---|---|---|
| 0 | situação da ferramenta 200/200 calls ok | obrigatória | passou | 200200 | 200200 | — | — | — |
| 1 | figura próxima rejection rate at 5% under the null: 0.0600 in [0.0038, 0.0962]? (MC SE 0.0168, R=200) — nominal 0.05 ± 3 MC SE | obrigatória | passou | [0.0037668949777326793,0.09623310502226733] | 0,060.06 | — | — | — |
| 2 | figura próxima mean p-value under the null: 0.5071 in [0.4413, 0.5637]? (MC SE 0.0208, R=200) — uniform p-values: 1/2 ± 3 MC SE | obrigatória | passou | [0.44125031861947533,0.5637248057586343] | 0,50710.5071 | — | — | — |
Caminho de referência e caminho do agente
A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.
a própria especificação da tarefa
Referência: infer.randomization_inferenceO agente não fez uma chamada de estimação que a resposta cite.
Trajetória
Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.
- 0Início
Tarefa de ferramenta: nenhuma pergunta; a especificação de referência é chamada direto.
- 1Ferramenta
infer.randomization_inferencev0.1.0call_7d93b5eddecidido pelo códigoreexecutávelArgumentos
{ "cluster": null, "dataset": "d", "n_perm": 200, "seed": 1800000, "strata": null, "treatment": "tratado", "y": "nota" }Figuras call_7d93b5ed Chave Valor Valor bruto Erro-padrão IC observed Difference in mean nota, treated minus control0,146037 0.14603734597643703— — p_value Randomization p-value of the sharp null of no effect0,555 probability 0.555— — Diagnósticosn_perm= 200200design="simple"null_sd= 0,2439940.24399390414032518p_value_mc_se= 0,03514080.03514078826662828
- Digests dos dados
d4f34dc979e5677f9040e043e4dbaef1a48bb36aafb0d7acbe8596b13e869f47b- sha256 do resultado
148606cc0a8503a949668792a444cded2018931ea98ec2127d7cbc70403d217b
- 2Ferramenta
infer.randomization_inferencev0.1.0call_87d6e3d9decidido pelo códigoreexecutávelArgumentos
{ "cluster": null, "dataset": "d", "n_perm": 200, "seed": 1800001, "strata": null, "treatment": "tratado", "y": "nota" }Figuras call_87d6e3d9 Chave Valor Valor bruto Erro-padrão IC observed Difference in mean nota, treated minus control-0,0133214 -0.013321366095912723— — p_value Randomization p-value of the sharp null of no effect0,97 probability 0.97— — Diagnósticosn_perm= 200200design="simple"null_sd= 0,2009140.2009144927835447p_value_mc_se= 0,01206230.012062338081814825
- Digests dos dados
d51190f634e16baee5aa4585827cd46d753cd0a4753ce400827bebc05c4598012- sha256 do resultado
7de6414043d54790d5755793f9f04173f8fe287abef92a6e22a60e19897177e6
- 3Ferramenta
infer.randomization_inferencev0.1.0call_fb72297bdecidido pelo códigoreexecutávelArgumentos
{ "cluster": null, "dataset": "d", "n_perm": 200, "seed": 1800002, "strata": null, "treatment": "tratado", "y": "nota" }Figuras call_fb72297b Chave Valor Valor bruto Erro-padrão IC observed Difference in mean nota, treated minus control0,00543399 0.005433986058040685— — p_value Randomization p-value of the sharp null of no effect0,975 probability 0.975— — Diagnósticosn_perm= 200200design="simple"null_sd= 0,2074620.20746249331323133p_value_mc_se= 0,01103970.011039701082909813
- Digests dos dados
db268b15c9251af24773b1ae6159ad878c3b4401e8d14ddc1d02922a150e4b085- sha256 do resultado
ded82dd7fac9fdac677c882aa423740e9208edc40d596f74e5c3397a0bbae8ea
- 4Nota
bench.capturedecidido pelo código{ "inputs": { "contexts": 200, "kept": 3 }, "outputs": { "outputs_sha256": "ad98b1b318b36c683133bd91dbb8ac07be121dd9926a0ee6742f239993fcddd4", "records": 200 } } - 5Pontuação#0situação da ferramentapassouobrigatória
200/200 calls ok - 6Pontuação#1figura próximapassouobrigatória
rejection rate at 5% under the null: 0.0600 in [0.0038, 0.0962]? (MC SE 0.0168, R=200) — nominal 0.05 ± 3 MC SE - 7Pontuação#2figura próximapassouobrigatória
mean p-value under the null: 0.5071 in [0.4413, 0.5637]? (MC SE 0.0208, R=200) — uniform p-values: 1/2 ± 3 MC SE
Épocas × verificações
| # | 0 | 1 | 2 |
|---|---|---|---|
| Época 1 | passou | passou | passou |
Tentativas
Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.
- época 1, tentativa 1passoupontuada(exibindo)
Downloads desta tarefa
Pacote da tarefa (.zip)
9,5 KB · sha256
2a3be1c97b952e7355f33b51b90cfaa23161f0e191d9cf78a35e0cbb8892ddf0O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.
| Arquivo | Tamanho | sha256 |
|---|---|---|
| specs/dgp.ri_null.fast.json | 738 B | 727f4b3b1f562b34d2dc277f8511cdd70ab9e17e8da0ab666d85ebf87561d5ff |
| traces/dgp.ri_null.fast.e1.a1.jsonl | 7,9 KB | e15ceba7c50fc368cf7f592085f0c233de7ff8d4b11a124dbd9e27126d7a0d90 |
| trajectories/dgp.ri_null.fast.e1.a1.jsonl | 9,9 KB | 4523f1e85d937658f6c8cb63f44c51bd9de0193acd0194c2bf832a34078f787c |