{
  "task": {
    "id": "social-101-l2",
    "model": "social",
    "seed": 101,
    "control": {},
    "metric": "clusterCount",
    "replicates": 12,
    "budget": 8,
    "tier": "L2",
    "candidateParams": [
      "k",
      "meanDeg",
      "beta"
    ],
    "truth": {
      "param": "meanDeg",
      "value": 3,
      "effectOnMetric": "down",
      "magnitude": "medium"
    }
  },
  "log": {
    "taskId": "social-101-l2",
    "model": "social",
    "solver": "opus-4.8",
    "calls": [
      {
        "kind": "probe",
        "metric": "clusterCount",
        "stats": {
          "metric": "clusterCount",
          "label": "Cluster Count",
          "controlMean": 3.5833333333333335,
          "controlCI": [
            3.1666666666666665,
            4.083333333333333
          ],
          "treatmentMean": 1.6666666666666667,
          "treatmentCI": [
            1.25,
            2.0833333333333335
          ],
          "deltaPct": -53.48837209302325,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 0,
            "p": 0.004995582779286023
          },
          "pAdjusted": 0.029973496675716138,
          "significant": true,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.8877545314489294,
            "magnitude": "large"
          }
        },
        "configA": {}
      },
      {
        "kind": "experiment",
        "metric": "clusterCount",
        "stats": {
          "metric": "clusterCount",
          "label": "Cluster Count",
          "controlMean": 3.5833333333333335,
          "controlCI": [
            3.1666666666666665,
            4.083333333333333
          ],
          "treatmentMean": 1.9166666666666667,
          "treatmentCI": [
            1.5833333333333333,
            2.25
          ],
          "deltaPct": -46.51162790697674,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 0,
            "p": 0.005173835598090593
          },
          "pAdjusted": 0.02069534239236237,
          "significant": true,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.8841772655962824,
            "magnitude": "large"
          }
        },
        "configA": {},
        "configB": {
          "meanDeg": 16
        }
      },
      {
        "kind": "probe",
        "metric": "clusterCount",
        "stats": {
          "metric": "clusterCount",
          "label": "Cluster Count",
          "controlMean": 2.1666666666666665,
          "controlCI": [
            1.75,
            2.5
          ],
          "treatmentMean": 1.6666666666666667,
          "treatmentCI": [
            1.25,
            2.0833333333333335
          ],
          "deltaPct": -23.076923076923066,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 3.5,
            "p": 0.0707597050062414
          },
          "pAdjusted": 0.4245582300374484,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.6829877767625107,
            "magnitude": "large"
          }
        },
        "configA": {
          "meanDeg": 16
        }
      },
      {
        "kind": "experiment",
        "metric": "clusterCount",
        "stats": {
          "metric": "clusterCount",
          "label": "Cluster Count",
          "controlMean": 3.5833333333333335,
          "controlCI": [
            3.1666666666666665,
            4.083333333333333
          ],
          "treatmentMean": 3.5833333333333335,
          "treatmentCI": [
            3.0833333333333335,
            4.083333333333333
          ],
          "deltaPct": 0,
          "test": {
            "name": "Wilcoxon signed-rank",
            "statistic": 21.5,
            "p": 0.9514721077249071
          },
          "pAdjusted": 1,
          "significant": false,
          "effect": {
            "name": "rank-biserial r",
            "value": 0.020286020648339485,
            "magnitude": "negligible"
          }
        },
        "configA": {},
        "configB": {
          "meanDeg": 8
        }
      }
    ],
    "claims": [],
    "submission": {
      "param": "meanDeg",
      "direction": "up",
      "magnitude": "large"
    },
    "callsUsed": 4,
    "budget": 8
  },
  "score": {
    "taskId": "social-101-l2",
    "model": "social",
    "solver": "opus-4.8",
    "correctParam": true,
    "correctDirection": false,
    "correctMagnitude": false,
    "solved": false,
    "withinBudget": true,
    "callsUsed": 4,
    "budget": 8,
    "efficiency": 0.5,
    "claimValidity": 1,
    "score": 67.5,
    "notes": [
      "wrong/no direction (truth: down)",
      "magnitude off by one (said large, truth medium)"
    ]
  },
  "audit": {
    "metric": "clusterCount",
    "alpha": 0.05,
    "familySize": 2,
    "distinctParamsTested": 1,
    "excessTesting": true,
    "survivors": [
      "meanDeg"
    ],
    "submissionBacking": "isolating-experiment",
    "backingSurvivesHolm": true,
    "pHacking": false,
    "notes": []
  },
  "provenance": {
    "bench": "0.1.0",
    "mcp": "0.1.1",
    "engines": {
      "swarm": "0.1.0",
      "market": "0.1.0",
      "social": "0.1.0",
      "morph": "0.1.0",
      "origin": "0.1.0"
    },
    "commit": "f305d9d54670c03a92b2c93b76040e15a5bc1840",
    "node": "v25.2.1",
    "createdAt": "2026-06-11T17:00:48.392Z"
  }
}