Pular para o conteúdo

Tarefa crb_papers.q093

crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170925Z-suite-crb_papers-scripted-2dbcf5

Veredito

puladaPulada: falta um recurso que a tarefa exige.

Motivo: no reference path (coverage gap)

Pergunta feita ao analista

Among parents whose child's age is arbitrarily close to the voting-age threshold, what is the average effect of the child being just eligible to vote on the parent's probability of voting in 2009?

Valores esperados e de onde vêm

crb_papers.q093.gold

Fonte
CausalReasoningBenchmark, causal_queries.json, index 93 (revision edd0fe1c1d1c)
Tipo
benchmark_gold
Localização
causal_queries.json['93'].effect and .standard_error
Trecho
index 93: effect 0.0418309, standard_error 0.0185473
Valor como publicado
0.041830899000118826
Erro-padrão como publicado
0.018547340275271815
Valor
0,04183090.041830899000118826 (se 0,01854730.018547340275271815)
Conferido por
arquivo do benchmark · Read from the catalog at the pinned revision by scripts/freeze_crb_papers.py; the catalog states the value its estimation script prints.
Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json
Licença
MIT

    crb_papers.q093.script

    Fonte
    CausalReasoningBenchmark reference estimation script for index 93
    Tipo
    software
    Localização
    solutions/research_papers/RDD/dahlgard_2018a/question_1/estimation.py
    Valor
    —
    Conferido por
    arquivo do benchmark · sha256 of the script's 1672 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
    Implementação
    independente da ferramenta
    sha256 da cópia lida
    086af51b889d8e6fd97c986e593e1cbd130c422982f45ffe439fe8a26374362d (identifica a cópia lida, não um arquivo canônico)
    Endereço
    https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/dahlgard_2018a/question_1/estimation.py
    Licença
    MIT

      Verificações

      Cada verificação, o que esperava, o que observou e a chamada que leu
      #VerificaçãoObrigatóriaResultadoEsperadoObservadoTolerânciaFonteChamada

      Caminho de referência e caminho do agente

      A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.

      Nenhum caminho de referência registrado para esta tarefa.

      Trajetória

      Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.

      Esta tentativa não tem trajetória publicada.

      Épocas × verificações

      Tentativas

      Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.

      Downloads desta tarefa

      Pacote da tarefa (.zip)
      61,0 KB · sha256 acff076b3bf7b51aa588e00ce267579de2a3f4f320593a707550f97fe154897b

      O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.

      Downloads desta tarefa
      ArquivoTamanhosha256
      native/crb_papers/crb_papers.q093.e1.a1.json2,7 KB978b56aee167ba04d1f6a5d183f92056b00228251783d6a7c6ae558f7909440f
      sources/crb_papers.q093.gold.json1,1 KB506b7bb5545830273b1ef6fa94dba1d095763eb0f3b57a5f0274e5600caecc2c
      sources/crb_papers.q093.script.json1,1 KBe00880c59b8eb0a3a361eb95499c75c5261d5a91b89738d72d6b261c32ad8db4
      specs/crb_papers.q093.json5,8 KB4c0efcf5bf94ef631af9dda7749757b588dfe11e89e63c43c9a18fb9044c5025