Pular para o conteúdo

Tarefa crb_papers.q087

crb_papersagentT2publicépoca 1, tentativa 1Execução: 20261015T170925Z-suite-crb_papers-scripted-2dbcf5

Veredito

puladaPulada: falta um recurso que a tarefa exige.

Motivo: no reference path (coverage gap)

Pergunta feita ao analista

Among voters in U.S. House districts decided at an infinitesimally small margin, what is the average effect of being represented by a copartisan, compared to an outpartisan, on the probability of reporting contact with the representative?

Valores esperados e de onde vêm

crb_papers.q087.gold

Fonte
CausalReasoningBenchmark, causal_queries.json, index 87 (revision edd0fe1c1d1c)
Tipo
benchmark_gold
Localização
causal_queries.json['87'].effect and .standard_error
Trecho
index 87: effect 0.256129, standard_error 0.00220367
Valor como publicado
0.2561292663559078
Erro-padrão como publicado
0.0022036723506216947
Valor
0,2561290.2561292663559078 (se 0,002203670.0022036723506216947)
Conferido por
arquivo do benchmark · Catalog value, read at the pinned revision by scripts/freeze_crb_papers.py. It is rdrobust's res.tau_bc[0], the left-side bias-corrected intercept, not the jump the question asks for (B-join review: an independent WLS gives 0.2561292663559082); scored as CRB scores it, tagged gold_defect.
Endereço
https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/causal_queries.json
Licença
MIT

    crb_papers.q087.script

    Fonte
    CausalReasoningBenchmark reference estimation script for index 87
    Tipo
    software
    Localização
    solutions/research_papers/RDD/broockman_ryan_2016/question_1/estimation.py
    Valor
    —
    Conferido por
    arquivo do benchmark · sha256 of the script's 1718 bytes at the pinned revision; the reference path of the item is a transcription of this script into typed transforms and tool calls (never executed here).
    Implementação
    independente da ferramenta
    sha256 da cópia lida
    6d51bb5b5a72fa39e945b30d1018c35064f6e0b20ee9b113e430f568040c77ea (identifica a cópia lida, não um arquivo canônico)
    Endereço
    https://huggingface.co/datasets/syrgkanislab/CausalReasoningBenchmark/resolve/edd0fe1c1d1c5c0a4f0e3e67a50481ac679fb888/solutions/research_papers/RDD/broockman_ryan_2016/question_1/estimation.py
    Licença
    MIT

      Verificações

      Cada verificação, o que esperava, o que observou e a chamada que leu
      #VerificaçãoObrigatóriaResultadoEsperadoObservadoTolerânciaFonteChamada

      Caminho de referência e caminho do agente

      A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.

      Nenhum caminho de referência registrado para esta tarefa.

      Trajetória

      Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.

      Esta tentativa não tem trajetória publicada.

      Épocas × verificações

      Tentativas

      Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.

      Downloads desta tarefa

      Pacote da tarefa (.zip)
      62,0 KB · sha256 2284c08c1ec5820f62e21b9d24078633297cd5da09f9465c54e1ad4f9c1cd508

      O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.

      Downloads desta tarefa
      ArquivoTamanhosha256
      native/crb_papers/crb_papers.q087.e1.a1.json2,7 KB575a3baf9a33f4187a0b03b32d74e9bd23abeb9d93e94470605dfc2a4750d469
      sources/crb_papers.q087.gold.json1,2 KB77875c13edbfa2057fb6ac2364cd06c75555b467ccc70542871f18df183d0591
      sources/crb_papers.q087.script.json1,1 KB75e095d27837cee06a4d4740bc1667c744f213e906fef8bd27010d68d4f22996
      specs/crb_papers.q087.json10,1 KB39260b45636873f688a67648805cee40577d6e5c4b1106edf5e259a02f24bfd3