Pular para o conteúdo

Tarefa crb_papers.q090

crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170050Z-suite-crb_papers-scripted-8b13b2

Veredito

puladaPulada: falta um recurso que a tarefa exige.

Motivo: no reference path (coverage gap)

Pergunta feita ao analista

Among individuals whose schooling increased due to compulsory schooling laws and who were born near the reform thresholds, what is the effect of one additional year of completed secondary schooling on the probability of saying at least one immigrant group should be allowed 'none' to enter?

Valores esperados e de onde vêm

crb_papers.q090.gold

Fonte
CausalReasoningBenchmark, causal_queries.json, index 90 (revision edd0fe1c1d1c)
Tipo
benchmark_gold
Localização
causal_queries.json['90'].effect and .standard_error
Trecho
index 90: effect -0.0977845, standard_error 0.0452098
Valor como publicado
-0.0977844845011214
Erro-padrão como publicado
0.045209848588741615
Valor
-0,0977845-0.0977844845011214 (se 0,04520980.045209848588741615)
Conferido por
arquivo do benchmark · Read from the catalog at the pinned revision by scripts/freeze_crb_papers.py; the catalog states the value its estimation script prints.
Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json
Licença
MIT

    crb_papers.q090.script

    Fonte
    CausalReasoningBenchmark reference estimation script for index 90
    Tipo
    software
    Localização
    solutions/research_papers/RDD/cavaille_marshall_2018/question_1/estimation.py
    Valor
    —
    Conferido por
    arquivo do benchmark · sha256 of the script's 731 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
    Implementação
    independente da ferramenta
    sha256 da cópia lida
    9c65b536483c862b89a43f132dd0f002ef8929b6dd00929320a13f5c63a4b98a (identifica a cópia lida, não um arquivo canônico)
    Endereço
    https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/cavaille_marshall_2018/question_1/estimation.py
    Licença
    MIT

      Verificações

      Cada verificação, o que esperava, o que observou e a chamada que leu
      #VerificaçãoObrigatóriaResultadoEsperadoObservadoTolerânciaFonteChamada

      Caminho de referência e caminho do agente

      A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.

      Nenhum caminho de referência registrado para esta tarefa.

      Trajetória

      Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.

      Esta tentativa não tem trajetória publicada.

      Épocas × verificações

      Tentativas

      Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.

      Downloads desta tarefa

      Pacote da tarefa (.zip)
      62,6 KB · sha256 a6feac9f4f021b59a7b3f72691048aba6d1c13f404cf437665be770f51020d37

      O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.

      Downloads desta tarefa
      ArquivoTamanhosha256
      native/crb_papers/crb_papers.q090.e1.a1.json2,7 KBc04f361bb91e44aee6eaa93a10a9c929bf639febfc2d99147c5c1fa067ebd636
      sources/crb_papers.q090.gold.json1,1 KB6d027d1ca31efefc7319569702ba93ed4ffa40abe2dbd06a1a9462e238db4f2e
      sources/crb_papers.q090.script.json1,1 KB796c1f8d1df23128b1abd10501face23767434bcbee58b46139da65e198b95b4
      specs/crb_papers.q090.json15,1 KB4db088130dd7f6b4b53a5f72bd2b7153717960f24552903ba03e19c1a684e26d