Tarefa crb_papers.q099
crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170925Z-suite-crb_papers-scripted-2dbcf5Veredito
puladaPulada: falta um recurso que a tarefa exige.
Motivo: no reference path (coverage gap)
Pergunta feita ao analista
What is the average effect of serving in Parliament on log gross wealth at death for Conservative candidates comparable to those at the win-loss boundary?
Valores esperados e de onde vêm
crb_papers.q099.gold
- Fonte
- CausalReasoningBenchmark, causal_queries.json, index 99 (revision edd0fe1c1d1c)
- Tipo
- benchmark_gold
- Localização
- causal_queries.json['99'].effect and .standard_error
- Trecho
index 99: effect 0.909593, standard_error 0.462262
- Valor como publicado
0.9095928753918407- Erro-padrão como publicado
0.46226187421948006- Valor
- 0,909593
0.9095928753918407(se 0,4622620.46226187421948006) - Conferido por
- arquivo do benchmark · Read from the catalog at the pinned revision by scripts/freeze_crb_papers.py; the catalog states the value its estimation script prints.
- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json- Licença
- MIT
crb_papers.q099.script
- Fonte
- CausalReasoningBenchmark reference estimation script for index 99
- Tipo
- software
- Localização
- solutions/research_papers/RDD/eggers_hainmueller_2009a/question_1/estimation.py
- Valor
- —
- Conferido por
- arquivo do benchmark · sha256 of the script's 2120 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
- Implementação
- independente da ferramenta
- sha256 da cópia lida
030cae66db41bb68f3e193e9bd2677f22d15569db49bb8c15ba6117c63162bb7(identifica a cópia lida, não um arquivo canônico)- Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/eggers_hainmueller_2009a/question_1/estimation.py- Licença
- MIT
Verificações
| # | Verificação | Obrigatória | Resultado | Esperado | Observado | Tolerância | Fonte | Chamada |
|---|
Caminho de referência e caminho do agente
A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.
Nenhum caminho de referência registrado para esta tarefa.
Trajetória
Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.
Esta tentativa não tem trajetória publicada.
Épocas × verificações
Tentativas
Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.
- época 1, tentativa 1puladapontuada(exibindo)
no reference path (coverage gap)
Downloads desta tarefa
Pacote da tarefa (.zip)
61,2 KB · sha256
0f0e4894d61aedf4deb5785b11eb32a5b3100c82278edb14e37b024fc7a95ff6O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.
| Arquivo | Tamanho | sha256 |
|---|---|---|
| native/crb_papers/crb_papers.q099.e1.a1.json | 2,7 KB | c4831379a0b9cab599687c65e2ddc6f52a16e5a45560a611fa70bc030850e84f |
| sources/crb_papers.q099.gold.json | 1,1 KB | 005fc4e5a4d930bf2d92b44ddd3d38e332e1efb514726a1093e977368d178aa1 |
| sources/crb_papers.q099.script.json | 1,1 KB | 427f5a94d018ad21d6f35e493538dd37319a6afaa47d4a8fde17416e1f6ace6c |
| specs/crb_papers.q099.json | 6,9 KB | 6629362560206ff5a4e26a30d9f72e14b67671d06c3f950176792396d139f8cf |