{
  "task": {
    "id": "origin-202",
    "model": "origin",
    "seed": 202,
    "control": {},
    "metric": "finalPopulation",
    "replicates": 12,
    "budget": 8,
    "candidateParams": [
      "vision_range",
      "attack_damage",
      "reproduce_threshold"
    ],
    "truth": {
      "param": "reproduce_threshold",
      "value": 800,
      "effectOnMetric": "down"
    }
  },
  "log": {
    "taskId": "origin-202",
    "model": "origin",
    "solver": "opus-4.8",
    "calls": [
      {
        "kind": "probe",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 25.083333333333332,
          "treatmentCI": [
            15.583333333333334,
            36.083333333333336
          ],
          "deltaPct": -62.65508684863524,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 2,
            "p": 0.004192722492179168
          },
          "pAdjusted": 0.020963612460895842,
          "significant": true,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.8265622349255549,
            "magnitude": "large"
          }
        },
        "configA": {}
      },
      {
        "kind": "experiment",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 126.91666666666667,
          "treatmentCI": [
            89.75,
            163.58333333333334
          ],
          "deltaPct": 88.95781637717121,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 7,
            "p": 0.01347121390819317
          },
          "pAdjusted": 0.05388485563277268,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": -0.7133345315110954,
            "magnitude": "large"
          }
        },
        "configA": {},
        "configB": {
          "reproduce_threshold": 30
        }
      },
      {
        "kind": "experiment",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 59.166666666666664,
          "treatmentCI": [
            40.333333333333336,
            76.91666666666667
          ],
          "deltaPct": -11.910669975186114,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 29,
            "p": 0.4561257049865399
          },
          "pAdjusted": 1,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.21513263648747322,
            "magnitude": "small"
          }
        },
        "configA": {},
        "configB": {
          "attack_damage": 50
        }
      },
      {
        "kind": "experiment",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 74.83333333333333,
          "treatmentCI": [
            56.25,
            91.33333333333333
          ],
          "deltaPct": 11.414392059553336,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 26,
            "p": 0.3267995636020937
          },
          "pAdjusted": 1,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": -0.28306925853614895,
            "magnitude": "small"
          }
        },
        "configA": {},
        "configB": {
          "vision_range": 1
        }
      },
      {
        "kind": "experiment",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 66.33333333333333,
          "treatmentCI": [
            50.5,
            81
          ],
          "deltaPct": -1.2406947890818998,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 34.5,
            "p": 0.7535921276737765
          },
          "pAdjusted": 1,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": -0.09061702213741132,
            "magnitude": "negligible"
          }
        },
        "configA": {},
        "configB": {
          "reproduce_threshold": 80
        }
      },
      {
        "kind": "experiment",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 72.16666666666667,
          "treatmentCI": [
            45.333333333333336,
            107.66666666666667
          ],
          "deltaPct": 7.444168734491314,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 32.5,
            "p": 0.637611329820293
          },
          "pAdjusted": 1,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.135977882729801,
            "magnitude": "small"
          }
        },
        "configA": {},
        "configB": {
          "attack_damage": 100
        }
      },
      {
        "kind": "experiment",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 67.16666666666667,
          "controlCI": [
            55.416666666666664,
            78.75
          ],
          "treatmentMean": 73.16666666666667,
          "treatmentCI": [
            56.666666666666664,
            90.25
          ],
          "deltaPct": 8.933002481389577,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 30.5,
            "p": 0.5301262295068148
          },
          "pAdjusted": 1,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": -0.18123404427482265,
            "magnitude": "small"
          }
        },
        "configA": {},
        "configB": {
          "vision_range": 20
        }
      },
      {
        "kind": "probe",
        "metric": "finalPopulation",
        "stats": {
          "metric": "finalPopulation",
          "label": "Final Population",
          "controlMean": 65.5,
          "controlCI": [
            52.583333333333336,
            78
          ],
          "treatmentMean": 25.083333333333332,
          "treatmentCI": [
            15.583333333333334,
            36.083333333333336
          ],
          "deltaPct": -61.704834605597966,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 5,
            "p": 0.008590034259602142
          },
          "pAdjusted": 0.04295017129801071,
          "significant": true,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.7586256128768792,
            "magnitude": "large"
          }
        },
        "configA": {
          "reproduce_threshold": 120
        }
      }
    ],
    "claims": [],
    "submission": {
      "param": "reproduce_threshold",
      "direction": "up"
    },
    "callsUsed": 8,
    "budget": 8
  },
  "score": {
    "taskId": "origin-202",
    "model": "origin",
    "solver": "opus-4.8",
    "correctParam": true,
    "correctDirection": false,
    "solved": false,
    "withinBudget": true,
    "callsUsed": 8,
    "budget": 8,
    "efficiency": 0,
    "claimValidity": 1,
    "score": 30,
    "notes": [
      "wrong/no direction (truth: down)",
      "conclusion not backed by a significant isolating experiment"
    ]
  },
  "audit": {
    "metric": "finalPopulation",
    "alpha": 0.05,
    "familySize": 6,
    "distinctParamsTested": 3,
    "excessTesting": true,
    "survivors": [],
    "submissionBacking": "isolating-experiment",
    "backingSurvivesHolm": false,
    "pHacking": false,
    "notes": [
      "'reproduce_threshold' is significant alone but borderline: it does not survive family-wide Holm (low power, not over-testing)"
    ]
  },
  "provenance": {
    "bench": "0.1.0",
    "mcp": "0.1.1",
    "engines": {
      "swarm": "0.1.0",
      "market": "0.1.0",
      "social": "0.1.0",
      "morph": "0.1.0",
      "origin": "0.1.0"
    },
    "commit": "d86631b2d89b26b1472009e69619f41647f2f1fb",
    "node": "v25.2.1",
    "createdAt": "2026-06-12T13:00:59.210Z"
  }
}