Tarefa crb_papers.q116
crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170050Z-suite-crb_papers-scripted-8b13b2Veredito
Motivo: no reference path (coverage gap)
Pergunta feita ao analista
Among districts with elections decided around the 50% Democratic vote-share threshold, what is the effect of electing a Democrat (versus a Republican) on the representative's likelihood of signing civil-rights discharge petitions in the 73rd Congress?
Valores esperados e de onde vêm
crb_papers.q116.gold
- Fonte
- CausalReasoningBenchmark, causal_queries.json, index 116 (revision edd0fe1c1d1c)
- Tipo
- benchmark_gold
- Localização
- causal_queries.json['116'].effect and .standard_error
- Trecho
index 116: effect -0.276851, standard_error 0.255946
- Valor como publicado
-0.2768511542844426- Erro-padrão como publicado
0.25594624262841237- Valor
- -0,276851
-0.2768511542844426(se 0,2559460.25594624262841237) - Conferido por
- arquivo do benchmark · Read from the catalog at the pinned revision by scripts/freeze_crb_papers.py; the catalog states the value its estimation script prints.
- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json- Licença
- MIT
crb_papers.q116.script
- Fonte
- CausalReasoningBenchmark reference estimation script for index 116
- Tipo
- software
- Localização
- solutions/research_papers/RDD/schickler_etal_2009a/question_1/estimation.py
- Valor
- —
- Conferido por
- arquivo do benchmark · sha256 of the script's 979 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
- Implementação
- independente da ferramenta
- sha256 da cópia lida
3316ace6a4e3c540eed1d8565f4b8318bcb637ce087eb2519f5b21b648cfe83d(identifica a cópia lida, não um arquivo canônico)- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/schickler_etal_2009a/question_1/estimation.py- Licença
- MIT
Verificações
| # | Verificação | Obrigatória | Resultado | Esperado | Observado | Tolerância | Fonte | Chamada |
|---|
Caminho de referência e caminho do agente
A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.
Nenhum caminho de referência registrado para esta tarefa.
Trajetória
Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.
Esta tentativa não tem trajetória publicada.
Épocas × verificações
Tentativas
Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.
- época 1, tentativa 1puladapontuada(exibindo)
no reference path (coverage gap)
Downloads desta tarefa
8442bfa400229cdfd71f1bf50d082180b8b8ad8a48344466787102bf7867bc7eO hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.
| Arquivo | Tamanho | sha256 |
|---|---|---|
| native/crb_papers/crb_papers.q116.e1.a1.json | 2,7 KB | 09bcae480113afbe5ca856b90d35f83865957ea06f0b620d1faa360b56dc04d1 |
| sources/crb_papers.q116.gold.json | 1,1 KB | 0a5fb370ead26958bbb70b1812e2450f9d2a97427553afde2dd0cfa2a2a99da3 |
| sources/crb_papers.q116.script.json | 1,1 KB | dbf66cabaaacadfb85c643b3465ecd513e8ea5915a66d997a6327127f87eb00a |
| specs/crb_papers.q116.json | 6,1 KB | 621a1f4aa828d3dc1cb28d337e1cabc424c6ce3809de4b6bacf3ddf737b6cf67 |