Tarefa crb_papers.q108
crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170925Z-suite-crb_papers-scripted-2dbcf5Veredito
Motivo: no reference path (coverage gap)
Pergunta feita ao analista
Among districts at the margin where a more extreme candidate just wins versus just loses the primary, what is the average causal effect of nominating the extremist (versus a relatively moderate candidate) on the party's probability of winning the subsequent general election?
Valores esperados e de onde vêm
crb_papers.q108.gold
- Fonte
- CausalReasoningBenchmark, causal_queries.json, index 108 (revision edd0fe1c1d1c)
- Tipo
- benchmark_gold
- Localização
- causal_queries.json['108'].effect and .standard_error
- Trecho
index 108: effect -0.424046, standard_error 0.254618
- Valor como publicado
-0.42404560086430654- Erro-padrão como publicado
0.2546179674647909- Valor
- -0,424046
-0.42404560086430654(se 0,2546180.2546179674647909) - Conferido por
- arquivo do benchmark · Read from the catalog at the pinned revision by scripts/freeze_crb_papers.py; the catalog states the value its estimation script prints.
- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json- Licença
- MIT
crb_papers.q108.script
- Fonte
- CausalReasoningBenchmark reference estimation script for index 108
- Tipo
- software
- Localização
- solutions/research_papers/RDD/hall_2015/question_2/estimation.py
- Valor
- —
- Conferido por
- arquivo do benchmark · sha256 of the script's 1280 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
- Implementação
- independente da ferramenta
- sha256 da cópia lida
95c99fc91f434c56e10a9cb3131453752991d46761099e1705217f1f0f074a4d(identifica a cópia lida, não um arquivo canônico)- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/hall_2015/question_2/estimation.py- Licença
- MIT
Verificações
| # | Verificação | Obrigatória | Resultado | Esperado | Observado | Tolerância | Fonte | Chamada |
|---|
Caminho de referência e caminho do agente
A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.
Nenhum caminho de referência registrado para esta tarefa.
Trajetória
Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.
Esta tentativa não tem trajetória publicada.
Épocas × verificações
Tentativas
Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.
- época 1, tentativa 1puladapontuada(exibindo)
no reference path (coverage gap)
Downloads desta tarefa
e4e9404f8fc8030d5268d7bd32a28b07daa69e24f368d4e3efea693718dfa7c7O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.
| Arquivo | Tamanho | sha256 |
|---|---|---|
| native/crb_papers/crb_papers.q108.e1.a1.json | 2,7 KB | ac3e3b38ec5d31f735f6be9bf0b6c3816ed12589cd03c4c57c7509ecabc74a62 |
| sources/crb_papers.q108.gold.json | 1,1 KB | 387be7bab3a5c54addfddccfecd7ad51b810f2f21408e6375f22ec0039816c7d |
| sources/crb_papers.q108.script.json | 1,1 KB | cec55c80190b06cdf581121dde813f2dfbdd2628a46799336d7fb9c46e404ed3 |
| specs/crb_papers.q108.json | 6,1 KB | 99f9c1bd3698b7e5c5c4f1d2e5a55b0d1c2299ab6d7b9de32253596ff9218780 |