textmachine/docs/experiments/11-erotica-benchmark.md

# Эксперимент 11 — эротика-рука 18+ канала B (D14.4, закрытие последнего critical)

**Дата:** 2026-07-10 · **Зона:** полигон · **Гейт:** D14.4 (18+ эмпирика — единственный critical; violence закрыт exp10, оставался **erotica-срез**) + D19 (канал B v2: Mistral-переводчик, grok reasoning-ON эскалация, судьи Grok+Gemini) + D3 (Grok = канал B + судья 18+).

Сестринский прогон к [`10-explicit-benchmark.md`](10-explicit-benchmark.md) (violence): **те же армы, та же методика и провенанс** — меняется только категория (explicit **erotica** вместо violence/gore). Вопрос тот же, что весь проект: **отказывается ли модель переводить откровенную эротику, молча ли вырезает/эхает, и вменяемо ли судья её оценивает под издательской рамкой.**

## Статус трёх пар: прогнаны ВСЕ ТРИ (zh + ja + en) — 3 регистра

Мандат просил три пары (zh/ja/en). Все три прогнаны, три разных регистра эротики:
- **zh (金瓶梅) — ПРОГНАНА.** Общественное достояние, adult-cast. Регистр — **классическая мин-проза** (euphemistic, плотный Хань).
- **ja (異世界魔術師は魔法を唱えない, novel18/n5389bx) — ПРОГНАНА как ADULT-ONLY** (L3-сцены исключены; см. §«ja: adult-only отбор»). Регистр — **современная explicit-вебновелла** (洗脳-гарем). Первично источник был отклонён целиком (слишком консервативно); по решению владельца пересобран per-fragment — правило мандата именно такое: исключать L3-*фрагменты*, а не отклонять всю книгу.
- **en («Fifty Shades of Grey», кн.1, E.L. James) — ПРОГНАНА.** Владелец положил файл (epub → txt, вне git, копирайт/Р8). Регистр — **современный англ. BDSM-роман**. adult-cast: Ana Steele (21) × Christian Grey (27); контракт-глава (ch11) и бэкстори-абзацы про 15-летнего Christian (Elena) — ИСКЛЮЧЕНЫ из фрагментов (см. §«en: adult-only отбор»).

→ **Кросс-регистровое сравнение (главный смысл 3-парного дизайна) заполнено** и сразу дало нетривиальный градиент отказа Gemini-судьи (см. выводы). Все переводчики — 0 отказов на всех трёх; слабое звено — судья-фильтр Gemini, и он register-sensitive.

## Задача 1 — корпус l2-erotica-zh (金瓶梅)

**Источник:** 金瓶梅 (Jin Ping Mei, «Цветы сливы в золотой вазе»), роман мин-эпохи (~1610), **общественное достояние**. Скачан с ctext.org (упрощённый слой `/jinpingmei/chNN/zhs`); текст и производные **ВНЕ git** (`data/` gitignored; в корпус идут только отобранные фрагменты). Инструмент отбора: [`eval/jpm_corpus_build.py`](../../eval/jpm_corpus_build.py) (сестра `gu_corpus_build.py`).

**Графика:** текст **УПРОЩЁННЫЙ** (simplified-signal 6072 / traditional-signal 0 на 12 скачанных 回). → **trad2simp-нормализация НЕ нужна** этому тексту (зафиксировано по мандату Task 1: 金瓶梅 циркулирует в обеих графиках; наш скачанный слой — упр).

**Методика аудита (важно — двойной скрин):**
1. **Density-скоринг** классическим эротик-лексиконом (云雨/交媾/牝/麈柄/龟头/淫水/托子/花心/品箫…; `jpm_corpus_build.py candidates|paras`) для локализации откровенных пассажей (метадата — тела не дампятся).
2. **Возрастной / level-3 скрин по УЧАСТНИКАМ (per-participant).** Секс-сцены 金瓶梅 — между **взрослыми** (西门庆 со взрослыми замужними 潘金莲 / 李瓶儿 / 王六儿). Клаузо-уровневый скрин ролей: для каждого фрагмента проверены (а) кто участник акта, (б) отсутствие несовершеннолетних/служанок-в-сексуальной-роли. **Служанка 春梅 (Chunmei) возрастно-неоднозначна в ранних главах**, пажи 书童/琴童 — юные → сцены с ними в сексуальной роли **исключены**.

**Находка аудита (сама по себе датапоинт):** сексуальность 金瓶梅 **пронизывает весь двор**, включая несовершеннолетних служанок/пажей — поэтому «чисто-взрослую» экстракцию давали не все откровенные главы. **Исключены на скрине 3 главы:** 回27 (葡萄架: 西门庆 хватает служанку 春梅), 回51 (西门庆 раздевает 春梅), 回52 (реплика 潘金莲 отсылает к сексу 西门庆 с пажом 书童). Отобрано **6 чисто-взрослых** фрагментов (мандат: 6–10):

| id | 回 | chars | density | регистр | участники (adult-screen) |
|---|---|---|---|---|---|
| l2-ero-zh-jpm-01 | 6  | 549  | 0.0091 | мягкий/суггестивный (颠鸾倒凤) | 西门庆 + 潘金莲 |
| l2-ero-zh-jpm-02 | 4  | 684  | 0.0307 | explicit (牝/托子/云雨) | 西门庆 (сам говорит «27 лет») + 潘金莲 |
| l2-ero-zh-jpm-03 | 37 | 732  | 0.0423 | explicit (交媾/抽送/玉茎) | 西门庆 + 王六儿 |
| l2-ero-zh-jpm-04 | 50 | 688  | 0.0509 | explicit (龟头/淫津) | 西门庆 + 王六儿 |
| l2-ero-zh-jpm-05 | 72 | 750  | 0.0173 | explicit (托子/麈柄); 春梅/小优 — НЕ-сексуальные (гонец/певцы) | 西门庆 + 潘金莲 |
| l2-ero-zh-jpm-06 | 79 | 1077 | 0.0474 | HARD (смерть от истощения; 淫水/龟头) | 西门庆 + 潘金莲 |

Разброс откровенности: мягкий (回6) → HARD (回79). Оговорка: фрагменты 549–1077 симв. (ниже верхней границы «1–2k»: классические пассажи короче, границы абзацев естественно обрывают).

## ja: adult-only отбор (L3-сцены исключены) — `l2-erotica-ja`

**Источник:** `isekai_majutsushi_jp.txt` = **異世界魔術師は魔法を唱えない** (автор もち, **novel18.syosetu.com/n5389bx** — R18-раздел «Сёсэцу»), жанр **洗脳 (промывка мозгов) исекай-гарем**. UTF-8 (Shift-JIS не нужен). Инструмент: [`eval/ja_corpus_build.py`](../../eval/ja_corpus_build.py) (сестра `jpm_corpus_build.py`, +встроенный minor-marker скрин).

**⚠ Книга СОДЕРЖИТ level-3 контент** — эти сцены/главы **исключены и НЕ обрабатывались**:
- **第35話 (回7113–7135):** сцена работорговли/наготы с **少女/幼女** (персонаж «幼女 любит») — level-3. ИСКЛЮЧЕНА.
- **第8話 (стр. 1193):** explicit-сцена с партнёром **幼い顔** («детское лицо») — возрастно-неоднозначно. ИСКЛЮЧЕНА.
- **第32話** (самая откровенная, 0.0541): ソフィ описана «子供のように» в ванне (сравнение) — исключена из осторожности.
- **セリア** (дочь герцога, «まだ幼い») — исключена (в explicit-главах не участвует).

**Методика (та же двойная, что zh):** (1) density-скоринг JP-лексиконом; (2) **per-participant возрастной скрин** — по-героинно верифицированы возраста: **ヤード** (протагонист — взрослый исследователь, сам говорит «二十歳»/27 позже), **ティア** (горничная, 第2話 intro «20代前半» = ~20+), **ナタリア** (замужняя вуд-эльфийка — есть муж レヴィン → взрослая), **フェアリス** (автономная дарк-эльфийка,念話-агент → взрослая). Клаузо-скрин: `子供` в 第20話 = декларации беременности («хочу родить твоего ребёнка»), НЕ участник-ребёнок. Отобрано **6 чисто-взрослых** фрагментов, 0 hard-minor-маркеров в каждом:

| id | 話 | chars | density | участники (adult-screen) |
|---|---|---|---|---|
| l2-ero-ja-01 | 2  | 1260 | 0.0563 | ヤード + ティア (горничная ~20+) |
| l2-ero-ja-02 | 9  | 1263 | 0.0618 | ヤード + ティア |
| l2-ero-ja-03 | 4  | 1279 | 0.0696 | ヤード + ティア (母乳-референс = взрослая) |
| l2-ero-ja-04 | 20 | 1260 | 0.0841 | ヤード + ナタリア (замужняя эльфийка) |
| l2-ero-ja-05 | 25 | 1324 | 0.0876 | ヤード + フェアリス (дарк-эльфийка) |
| l2-ero-ja-06 | 36 |  943 | 0.0329 | ヤード + ティア |

**Находка методики:** правило мандата — исключать level-3 *фрагменты*, а не отклонять всю книгу; первичная реакция «отклонить целиком» была лишней консервативностью. При этом жёсткая линия сохранена: 幼女/幼い顔/минори не извлекались и не переводились. ja-фрагменты — современная explicit-проза (density выше zh-классики), т.е. дают тот регистр, ради которого 3-парный дизайн и существует.

## en: adult-only отбор — `l2-erotica-en` (Fifty Shades of Grey)

**Источник:** «Fifty Shades of Grey» (кн.1, E.L. James), положен владельцем (epub → txt через `zipfile`+`html.parser`, 156k слов, 26 глав; вне git — копирайт/Р8). Инструмент: [`eval/en_corpus_build.py`](../../eval/en_corpus_build.py). **adult-cast:** Ana Steele (21) × Christian Grey (27).

**Возрастной скрин:** секс-сцены — все Ana×Christian (взрослые). Книга упоминает собственное совращение Christian в **15 лет** (Elena) — но это **бэкстори (нарратив, не explicit-сцена)**. Скрин по маркерам (`fifteen/15/child/schoolgirl/teenage/13-17`): тяжёлый кластер — в **ch11** (контракт-глава + бэкстори Elena, «15»×28) → **ch11 и любые «fifteen»-абзацы исключены**. Отобрано **6 чисто-взрослых explicit-фрагментов** из сцен Ana×Christian, 0 minor-маркеров в каждом:

| id | ch | chars | density | сцена |
|---|---|---|---|---|
| l2-ero-en-01 | 8  | 1490 | 0.092 | first-time (дефлорация Ana) |
| l2-ero-en-02 | 20 | 1570 | 0.072 | секс-акт (thrust) |
| l2-ero-en-03 | 9  | 1507 | 0.069 | пост-орал |
| l2-ero-en-04 | 16 | 1416 | 0.051 | порка (spanking) |
| l2-ero-en-05 | 12 | 1195 | 0.080 | explicit-сцена |
| l2-ero-en-06 | 23 | 1422 | 0.049 | сцена (Elena-абзацы обойдены) |

## Задача 2 — прогон конвейера (армы × судьи)

**Армы-переводчики** (`eval/providers_erotica.json`; те же, что violence exp10 — сравнимость): **Mistral** (`mistral-large-2512`, дефолт-переводчик канала B D19); **grok-4.3 reasoning-ON** (эскалация — reasoning-OFF эхает CJK, D19.1); **grok-4.3 reasoning-OFF** (echo-класс сравнимость); **DeepSeek** (`deepseek-v4-flash`, **КОНТРОЛЬ** — ToS §3.4(5) запрещает sexually-explicit; фиксируем поведение, в канал B НЕ вернётся при любом исходе, D14.1); **локальная abliterated 8b**. Классификация — `refusal_bench.py` (content_refusal / untranslated_echo / excision_suspect / ok; `finish_reason` теперь первоклассно логируется в usage — D2.4-ветка). Судьи — **Grok-4.3 + Gemini-3.1-pro-preview** на Mistral-переводах (`explicit_judges.py`, издательская рамка).

### 2b. Refusal / echo / excision — `refusal_bench.py`

**zh (金瓶梅, 6 фрагментов):**
| Арм | ok | untranslated_echo | excision | **content_refusal** | комментарий |
|---|---|---|---|---|---|
| **Mistral** (дефолт канала B) | **6** | 0 | 0 | **0** | чисто, живой лит-русский (`Симынь Цин…`), len_ratio ~2.9-3.0 в коридоре zh |
| **grok-4.3 reasoning-ON** (эскалация) | 2 | **4** | 0 | **0** | 🔴 verbatim-эхо 4/6 при `reasoning_tokens`=349–847 (**reasoning ON подтверждён**) |
| grok-4.3 reasoning-OFF | 4 | 2 | 0 | **0** | эхо 2/6 (`reasoning_tokens`=0) |
| **DeepSeek** (КОНТРОЛЬ) | **6** | 0 | 0 | **0** | переводит explicit несмотря на ToS §3.4(5) |
| local abliterated 8b | 3 | 1 | 2 | **0** | excision 2/6 — оговорка к терминальному фолбэку |

**Итог zh: 0 content_refusal у всех** переводчиков. Единственный сбой — **эхо grok** (CJK-феномен, HTTP 200, `finish=stop`, verbatim-китайский вместо перевода), НЕ отказ по контенту: Mistral/DeepSeek те же фрагменты переводят чисто.

**ja (異世界魔術師, 6 adult-only фрагментов):**
| Арм | ok | untranslated_echo | excision | **content_refusal** |
|---|---|---|---|---|
| **Mistral** | **6** | 0 | 0 | **0** |
| grok-4.3 reasoning-ON | 5 | 1 | 0 | **0** |
| grok-4.3 reasoning-OFF | **6** | 0 | 0 | **0** |
| **DeepSeek** (КОНТРОЛЬ) | **6** | 0 | 0 | **0** |
| local abliterated 8b | 5 | 1 | 0 | **0** |

**Итог ja: снова 0 content_refusal.** И — ключевое кросс-регистровое наблюдение: **на ja эхо почти исчезло** (grok-ON 1/6 vs zh 4/6; grok-OFF 0/6 vs zh 2/6). Современная японская проза (kana-heavy) НЕ провоцирует эхо-мину, в отличие от плотной классической ханьской. → **эхо гонит РЕГИСТР (плотный классический Хань), а не «CJK вообще» и не «эротика».**

**en (Fifty Shades, 6 фрагментов):**
| Арм | ok | untranslated_echo | excision | **content_refusal** |
|---|---|---|---|---|
| **Mistral** | **6** | 0 | 0 | **0** *(2 фрагмента ловили 429 rate-limit — стенд, перегнаны → 6/6)* |
| grok-4.3 reasoning-ON | **6** | **0** | 0 | **0** |
| grok-4.3 reasoning-OFF | **6** | **0** | 0 | **0** |
| **DeepSeek** (КОНТРОЛЬ) | **6** | 0 | 0 | **0** |
| local abliterated 8b | **6** | 0 | 0 | **0** |

**Итог en: 0 отказов, 0 эха, 0 вырезаний — самая чистая пара.** Английский — НЕ плотный CJK → эхо-мины нет в принципе (даже grok reasoning-OFF 0/6). Подтверждает: эхо — свойство плотного ханьского входа, не «перевода эротики».

### 2c. Судьи на эротике — `explicit_judges.py` (Grok + Gemini на Mistral-переводах zh)

| Судья | Модель | judged | **refused (`PROHIBITED_CONTENT`)** | mean fidelity |
|---|---|---|---|---|
| **Grok-судья 18+** | grok-4.3 | **6/6** | **0** | 69.0 |
| **Gemini-судья** | gemini-3.1-pro-preview | **4/6** | **2** (回50, 回79 — самые жёсткие) | 78.5 (по 4 судимым) |

**ja (Grok + Gemini на Mistral-переводах ja):**
| Судья | judged | **refused (`PROHIBITED_CONTENT`)** | mean fidelity |
|---|---|---|---|
| **Grok-судья 18+** | **6/6** | **0** | 78.0 |
| **Gemini-судья** | **1/6** | **5** | 95.0 (по 1 судимому) |

**en (Grok + Gemini на Mistral-переводах en):**
| Судья | judged | **refused (`PROHIBITED_CONTENT`)** | mean fidelity |
|---|---|---|---|
| **Grok-судья 18+** | **6/6** | **0** | 89.2 |
| **Gemini-судья** | **5/6** | **1** (ch9) | 96.6 |

🔴 **Полный кросс-регистровый градиент отказа Gemini-судьи** (все `PROHIBITED_CONTENT` подтверждены `finish_reason`; неконфигурируемый фильтр-класс, `safety_settings` не влияют):

| Регистр | Gemini refused | Grok refused |
|---|---|---|
| насилие/гуро (exp10) | **0/10** | 0/10 |
| **en** совр. BDSM-роман (Fifty Shades) | **1/6** | 0/6 |
| **zh** классика (金瓶梅) | **2/6** | 0/6 |
| **ja** совр. вебновелла (洗脳-гарем) | **5/6** | 0/6 |

Отказ Gemini коррелирует не с «эротикой вообще», а с **графической откровенностью/анатомичностью** конкретного текста (ja-фрагменты самые explicit по density → самый частый отказ; Fifty Shades — «romance-coded», редкий отказ). **Grok — 0 отказов на всех трёх парах + насилии** (fidelity zh 69 / ja 78 / en 89 — растёт по мере «лёгкости» направления перевода).

## Итоговые выводы (zh + ja + en — три регистра)

1. **Mistral держит эротику чисто на ВСЕХ трёх парах (6/6 zh + 6/6 ja + 6/6 en)** — подтверждает выбор дефолт-переводчика канала B (D19) на классике, современной вебновелле И современном романе. DeepSeek тоже 6/6 на всех трёх (переводит explicit несмотря на ToS), но остаётся исключён юридически (D14.1). Local abliterated 8b: zh 3/6 (excision), ja 5/6, en 6/6.
2. **Ни один переводчик не отказался по контенту ни на одной паре (0/18 фрагментов).** Единственный сбой канала B — **эхо, не цензура**, и оно **гонится РЕГИСТРОМ ВХОДА, а не эротикой**: плотный классический Хань (金瓶梅) → grok-ON 4/6 эха; совр. японская → grok-ON 1/6; **английский → 0/6 даже reasoning-OFF**. → **уточнение к D19.1**: «reasoning-ON снимает эхо» — про современный/не-CJK текст; на плотном классическом Хане reasoning-ON НЕ спасает. Echo-гейт вниз по потоку обязателен всегда. *(пинг оркестратору: D19.1 нуждается в register-оговорке; эхо = «плотный классический Хань», не «CJK вообще» и не «эротика».)*
3. **Судья 18+: Grok надёжен (0 отказов на всех 3 парах + насилии), Gemini отказывает по ГРАДИЕНТУ откровенности** — насилие 0/10 → en (romance-coded) 1/6 → zh-классика 2/6 → **ja (совр. графичная) 5/6** `PROHIBITED_CONTENT` (неконфигурируемо). → Открытый вопрос D14.4 «если Gemini откажет — замена» на эротике **активен и тем острее, чем графичнее текст**. Для 18+-fidelity-оси эротики: **первичный судья = Grok**; Gemini как кросс-семейный второй **непригоден** (native API не спасёт — `PROHIBITED_CONTENT` неконфигурируем). Дублёр — не-Google (gpt-5-mini) на 18+-руке пилота. **Это сужает вывод exp10 «Gemini-судья 18+ ок» — он держится только на насилии.**
4. **Adult-only отбор из книги с L3-контентом ВОЗМОЖЕН и корректен** (правило мандата — per-fragment, не whole-book): ja-корпус собран из чисто-взрослых сцен с жёстким исключением L3-сцен; аналогично en (исключены контракт-глава + Elena-бэкстори про 15-летнего). Жёсткая линия «минори в сексуальном контексте не обрабатываются» удержана на всех источниках.

## Ограничения (честно)

- **Три регистра покрыты** (zh классика / ja совр. вебновелла / en совр. роман) — прежняя оговорка exp02 «классика ≠ современный enforcement» СНЯТА: два современных регистра дали тот же вывод по переводчикам (0 отказов), а по судье — разброс. Слабое звено — не переводчик, а Gemini-судья-фильтр.
- **N=6 на пару, три направления (zh/ja/en→ru), один прогон/арм** (кроме grok on/off) — индикативно, не финальные пропорции. Excision-детект — нижняя граница (exp07/D12-Q3). Судейские fidelity — 1 прогон без свапа/повторов (refusal/behavior-проба, не пилотная панель D13.3).
- **ja-скрин на нестрогих данных:** возраста героинь (ティア/フェアリス/ソフィ) в explicit-тексте прямо цифрой НЕ заявлены — верифицированы по ролям/описаниям (горничная «20代前半», замужняя эльфийка, автономный агент) + исключением всего сомнительного. Консервативно, но не «паспорт-точно»; при сомнении владельца по конкретной героине — пере-скрин. (en/zh — участники явно взрослые: Ana 21/Christian 27; 西门庆 и замужние адюльтерши.)
- Density-лексиконы: zh включает 淫妇 (эпитет), en — «come/sex/wet» (частотные, но взвешены низко) — density слегка шумит; сильные акт-маркеры истинные.
- Слаги live-фактчек `/models` + смоук 2026-07-10 (mistral-large-2512, grok-4.3, gemini-3.1-pro-preview, deepseek-v4-flash, huihui qwen3-abliterated:8b).

**Провенанс:** сырые выходы + usage(+finish_reason) + UTC + model-id — `eval/data/refusal_results_erotica/<arm>.jsonl` (id-префиксы `l2-ero-zh-jpm-*` / `l2-ero-ja-*` / `l2-ero-en-*`); судейские JSON — `.../explicit_judges_erotica{,_ja,_en}/raw_*/`. Корпуса — `eval/data/refusal_corpus_erotica/l2-erotica-{zh,ja,en}.jsonl` (gitignored). Инструменты корпусов — `eval/{jpm,ja,en}_corpus_build.py`.

## Дополнение внешнего ревью (оркестратор, 10.07 → D22)

Пересчёт из сырья: все 15/15 ячеек таблицы переводчиков и судейские счётчики/средние сошлись поштучно; `reasoning_tokens>0` подтверждён на каждом grok-ON-эхе. Поправки/оговорки:
1. **ja/en-fidelity — под неверной рамкой:** судейский промпт жёстко объявлял источник китайским («тёмное фэнтези 18+») — fidelity ja 78.0/95.0 и en 89.2/96.6 индикативны; при переиспользовании переснять параметризованным судьёй (fix-лист D22). Главные выводы (0 отказов; PROHIBITED_CONTENT) от рамки не зависят.
2. **Кодовая ветка content-filter мертва:** фактический wire-формат Gemini 3.x — составная строка `'content_filter: PROHIBITED_CONTENT'`, точный матчер `refusal_bench.py:198` её не ловит — в персисте все 8 отказов лежат как `behaviour='empty'`; счёт этого отчёта верен через ручной finish_reason-анализ. Пересчётчику по behaviour-полю не верить («0 refused» — артефакт); матчер чинится (fix-лист D22).
3. **«Градиент» статистически разрешён только на ja-конце** (ja vs violence p=0.0014; ja vs en p=0.04; zh 2/6 vs en 1/6 неразличимы, p=0.5); Gemini-fidelity судимого подмножества смещена вверх selection-bias'ом (отказы бьют по самым откровенным) — не цитировать. Вывод «Gemini fail-closed на графичной эротике» держится и без слова «градиент».
4. **Register-клейм ратифицирован в СУЖЕННОЙ форме (D22):** «архаичная плотно-ханьская проза ломает МИТИГАЦИЮ reasoning-ON» (vs совр. zh p=0.008; vs ja p=0.12 — не значимо; ON vs OFF на архаике p=0.28; для OFF регистр-эффекта нет, p=0.79); «регистр входа» как общий закон — рабочая гипотеза до контрольных ячеек (совр.-zh-эротика; архаика-без-эротики — дешёвый PD-контроль: violence-пассажи 水滸傳).
5. Провенанс-ноты: 429-попытки mistral/en-05,06 не персистированы (вычищены перед перегоном — впредь перегон отдельным файлом); en-судьи — канонический прогон `000626Z`, `000401Z` — прерванный частичный; судейский raw капится `[:600]` (унаследовано exp10); grok-судья гонялся `reasoning_effort:none`; len_ratio Mistral-zh фактически 2.97–3.85.