Tarefa crb_papers.q099
crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170050Z-suite-crb_papers-scripted-8b13b2Veredito
puladaPulada: falta um recurso que a tarefa exige.
Motivo: no reference path (coverage gap)
Pergunta feita ao analista
What is the average effect of serving in Parliament on log gross wealth at death for Conservative candidates comparable to those at the win-loss boundary?
Valores esperados e de onde vêm
crb_papers.q099.gold
- Fonte
- CausalReasoningBenchmark, causal_queries.json, index 99 (revision edd0fe1c1d1c)
- Tipo
- benchmark_gold
- Localização
- causal_queries.json['99'].effect and .standard_error
- Trecho
index 99: effect 0.909593, standard_error 0.462262
- Valor como publicado
0.9095928753918407- Erro-padrão como publicado
0.46226187421948006- Valor
- 0,909593
0.9095928753918407(se 0,4622620.46226187421948006) - Conferido por
- arquivo do benchmark · Read from the catalog at the pinned revision by scripts/freeze_crb_papers.py; the catalog states the value its estimation script prints.
- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json- Licença
- MIT
crb_papers.q099.script
- Fonte
- CausalReasoningBenchmark reference estimation script for index 99
- Tipo
- software
- Localização
- solutions/research_papers/RDD/eggers_hainmueller_2009a/question_1/estimation.py
- Valor
- —
- Conferido por
- arquivo do benchmark · sha256 of the script's 2120 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
- Implementação
- independente da ferramenta
- sha256 da cópia lida
030cae66db41bb68f3e193e9bd2677f22d15569db49bb8c15ba6117c63162bb7(identifica a cópia lida, não um arquivo canônico)- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/eggers_hainmueller_2009a/question_1/estimation.py- Licença
- MIT
Verificações
| # | Verificação | Obrigatória | Resultado | Esperado | Observado | Tolerância | Fonte | Chamada |
|---|
Caminho de referência e caminho do agente
A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.
Nenhum caminho de referência registrado para esta tarefa.
Trajetória
Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.
Esta tentativa não tem trajetória publicada.
Épocas × verificações
Tentativas
Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.
- época 1, tentativa 1puladapontuada(exibindo)
no reference path (coverage gap)
Downloads desta tarefa
Pacote da tarefa (.zip)
61,2 KB · sha256
342394070b7cee58ae353a0864c1b827d22eaf01630d5e7eb28a512f68997ba2O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.
| Arquivo | Tamanho | sha256 |
|---|---|---|
| native/crb_papers/crb_papers.q099.e1.a1.json | 2,7 KB | c4831379a0b9cab599687c65e2ddc6f52a16e5a45560a611fa70bc030850e84f |
| sources/crb_papers.q099.gold.json | 1,1 KB | 005fc4e5a4d930bf2d92b44ddd3d38e332e1efb514726a1093e977368d178aa1 |
| sources/crb_papers.q099.script.json | 1,1 KB | 427f5a94d018ad21d6f35e493538dd37319a6afaa47d4a8fde17416e1f6ace6c |
| specs/crb_papers.q099.json | 6,9 KB | 6629362560206ff5a4e26a30d9f72e14b67671d06c3f950176792396d139f8cf |