heaven/books
1
0
Fork 0
Code Issues Pull requests Projects Releases Packages Wiki Activity Actions
books/role-topology/judge-variance.json

542 lines
No EOL
10 KiB
JSON
Executable file
Raw Permalink Blame History

This file contains ambiguous Unicode characters

This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.

[
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 0,
"rep": 1,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 3,
"В1-ЯЗЫК": 5,
"В1-ФОРМА": 1,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 3,
"В2-ЯЗЫК": 5,
"В2-ФОРМА": 1,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 0,
"rep": 2,
"В1-ВЕРНОСТЬ": 8,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 8,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 0,
"rep": 3,
"В1-ВЕРНОСТЬ": 6,
"В1-ТЕРМИН": 3,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 6,
"В2-ТЕРМИН": 3,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 0,
"rep": 1,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 0,
"rep": 2,
"В1-ВЕРНОСТЬ": 3,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 3,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 0,
"rep": 3,
"В1-ВЕРНОСТЬ": 2,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 2,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 2,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 0,
"rep": 1,
"В1-ВЕРНОСТЬ": 3,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 4,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 0,
"rep": 2,
"В1-ВЕРНОСТЬ": 7,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 4,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 8,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 5,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 0,
"rep": 3,
"В1-ВЕРНОСТЬ": 1,
"В1-ТЕРМИН": 5,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 5,
"В2-ЯЗЫК": 4,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 0,
"rep": 1,
"В1-ВЕРНОСТЬ": 1,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 2,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 0,
"rep": 2,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 1,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 2,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 0,
"rep": 3,
"В1-ВЕРНОСТЬ": 1,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 4,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 1,
"rep": 1,
"В1-ВЕРНОСТЬ": 3,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 2,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 3,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 2,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 1,
"rep": 2,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 1,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 1,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 1,
"rep": 3,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 1,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 1,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 1,
"rep": 1,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 0,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 0,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 1,
"rep": 2,
"В1-ВЕРНОСТЬ": 2,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 1,
"rep": 3,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 0,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 0,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 1,
"rep": 1,
"В1-ВЕРНОСТЬ": 2,
"В1-ТЕРМИН": 3,
"В1-ЯЗЫК": 2,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 3,
"В2-ТЕРМИН": 3,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 1,
"rep": 2,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 1,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 5,
"В2-ТЕРМИН": 1,
"В2-ЯЗЫК": 2,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 1,
"rep": 3,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 5,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 1,
"rep": 1,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 1,
"rep": 2,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 1,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 1,
"rep": 3,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 2,
"rep": 1,
"В1-ВЕРНОСТЬ": 7,
"В1-ТЕРМИН": 4,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 7,
"В2-ТЕРМИН": 4,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 2,
"rep": 2,
"В1-ВЕРНОСТЬ": 6,
"В1-ТЕРМИН": 4,
"В1-ЯЗЫК": 3,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 6,
"В2-ТЕРМИН": 4,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "gpt-5.6-luna",
"window": 2,
"rep": 3,
"В1-ВЕРНОСТЬ": 9,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 9,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 2,
"rep": 1,
"В1-ВЕРНОСТЬ": 3,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 2,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 3,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 2,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 2,
"rep": 2,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "same",
"judge": "grok-4.3",
"window": 2,
"rep": 3,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 1,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "НИЧЬЯ"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 2,
"rep": 1,
"В1-ВЕРНОСТЬ": 3,
"В1-ТЕРМИН": 2,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 2,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 2,
"rep": 2,
"В1-ВЕРНОСТЬ": 3,
"В1-ТЕРМИН": 6,
"В1-ЯЗЫК": 2,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 4,
"В2-ТЕРМИН": 6,
"В2-ЯЗЫК": 3,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "gpt-5.6-luna",
"window": 2,
"rep": 3,
"В1-ВЕРНОСТЬ": 4,
"В1-ТЕРМИН": 3,
"В1-ЯЗЫК": 4,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 5,
"В2-ТЕРМИН": 3,
"В2-ЯЗЫК": 5,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 2,
"rep": 1,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 1,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 2,
"rep": 2,
"В1-ВЕРНОСТЬ": 0,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 1,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
},
{
"kind": "decoy",
"judge": "grok-4.3",
"window": 2,
"rep": 3,
"В1-ВЕРНОСТЬ": 1,
"В1-ТЕРМИН": 0,
"В1-ЯЗЫК": 0,
"В1-ФОРМА": 0,
"В2-ВЕРНОСТЬ": 2,
"В2-ТЕРМИН": 0,
"В2-ЯЗЫК": 1,
"В2-ФОРМА": 0,
"СТИЛЬ": "В1"
}
]
Reference in a new issue View git blame Copy permalink