Tarefa causcibench_real.q072
causcibench_realagentT2publicépoca 1, tentativa 1Execução: 20261015T171059Z-suite-causcibench_real-scripted-ded01dVeredito
Motivo: no reference path (coverage gap)
Pergunta feita ao analista
What is the effect of being contacted by a get-out-the-vote phone call on voter turnout in the November 2005 Rochester, NY election?
Aprofundamento técnico para especialistas
Acesso direto às fontes primárias, tabela formal de verificações, comparação de argumentos, trajetória completa com prompts brutos e somas SHA-256.
Valores esperados e de onde vêm
causcibench_real.gold.q072
- Fonte
- CauSciBench real split, data/metadata_json/real_input.json at d9bb43a, id 72
- Tipo
- benchmark_gold
- Localização
- real_input.json, record id 72: fields effect and std_error
- Trecho
id 72 effect 0.009 std_error 0.011
- Valor como publicado
0.009- Erro-padrão como publicado
0.011- Valor
- 0,009
0.009(se 0,0110.011) - Conferido por
- arquivo do benchmark · Written by scripts/freeze_causcibench_real.py from the pinned file; equal to the `answer` and `std_error` of the same id in data/metadata_csv/real_input.csv at the pin.
- sha256 da cópia lida
c1f4c8930675afff63d816d8ed066941ae92697e7bfc31e9d38519398dd80438(identifica a cópia lida, não um arquivo canônico)- Endereço
https://raw.githubusercontent.com/causalNLP/CauSciBench/d9bb43a2d90f261978cc5ac0b628c0484f6e8956/data/metadata_json/real_input.json- Licença
- CauSciBench repository (MIT for code; metadata as published in the repository)
Especificação técnica do gabarito
CauSciBench real_input.json @ d9bb43a, id 72: effect 0.009
Verificações
| # | Verificação | Obrigatória | Resultado | Esperado | Observado | Tolerância | Fonte | Chamada |
|---|
Caminho de referência e caminho do agente
A chamada de referência ao lado da chamada que deu a resposta, argumento por argumento.
Nenhum caminho de referência registrado para esta tarefa.
Trajetória
Cada evento na ordem em que aconteceu: turnos do modelo, chamadas de ferramentas, guardas, transformações e pontuação.
Esta tentativa não tem trajetória publicada.
Épocas × verificações
Tentativas
Cada tentativa é seu próprio arquivo e é publicada; só a última de cada época é pontuada.
- época 1, tentativa 1puladapontuada(exibindo)
no reference path (coverage gap)
Downloads desta tarefa
4790b19f1e676709c70081b98f264eb6c2bad747b47c11fa65170dc90581e418O hash de um zip é só de transporte: o que ancora a integridade é o RUN_SHA256SUMS que vai dentro dele, cópia exata do SHA256SUMS da execução.
| Arquivo | Tamanho | sha256 |
|---|---|---|
| native/causcibench_real/causcibench_real.q072.e1.a1.json | 1,5 KB | f24873f3d0b7a186c17f3379881ab17ac593e58ba1f9f5efda4c3adfc279b9fe |
| sources/causcibench_real.gold.q072.json | 1,2 KB | eb4f08bd23891b64b5159af1844d6f7d34fcd5060fcf8a50bf7d98b6f53df8e7 |
| specs/causcibench_real.q072.json | 5,4 KB | 69b5ff3b8b780f42418acce647ead8555ee8e4c3c31e279ddf8d54b03bb20a1c |