karlexmarin's picture
feat: ship paper artefacts + CLI diagnostic alongside browser tool
535348a
{
"model": "gpt2",
"N": 12,
"L_crit": 11,
"N_sem": 1,
"tipo": "I",
"acc_d1": 0.03333333333333333,
"d_half": 20,
"by_distance": {
"1": {
"acc": 0.03333333333333333,
"gap": 0.0,
"n": 30
},
"5": {
"acc": 0.03333333333333333,
"gap": 0.436801815032959,
"n": 30
},
"10": {
"acc": 0.03333333333333333,
"gap": 0.7799602349599203,
"n": 30
},
"20": {
"acc": 0.0,
"gap": 0.6915457248687744,
"n": 30
},
"50": {
"acc": 0.0,
"gap": 0.7360549132029216,
"n": 30
},
"100": {
"acc": 0.0,
"gap": 0.8788070201873779,
"n": 30
},
"200": {
"acc": 0.03333333333333333,
"gap": 0.8997215747833252,
"n": 30
},
"500": {
"acc": 0.0,
"gap": 0.7841876029968262,
"n": 30
}
},
"d_half_gap": 10,
"max_gap": 0.8997215747833252,
"note_acc": "top-1 acc unusable (baseline 1/30); use gap metric"
}