README: метрики модели 02.11.2026 (test 4 377 строк, e2e по трекерам), размер датасета, kinozal-вкладки. dataset.md: размер снимка, колонки studio_source и audio_raw. architecture.md: кодек-строки как позитивы сегментатора, E2E_MODEL. collecting.md: tools/audit_tracks.py. training-windows.md: доразметка, сравнение кандидата и постановка в models/best и Docker. plan.md: шаг «аудит дорожек». Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
588b1f1579
commit
89ffe4375b
6 files changed
+40
-18
No files matched your search
@@ -81,15 +81,19 @@ BIO-разметка строится по символьным спанам ч
|
||||
«Релиз», `segmenter.page_text`): в `data/pages/kz-*.txt` нет ни заголовка, ни
|
||||
«Техданных», откуда взята половина меток kinozal, а сервис (`fetch_html`)
|
||||
видит обе вкладки.
|
||||
* Кодек-строка русской дорожки («Аудио 3: AC3 … Русский (MVO, LostFilm)»,
|
||||
«Аудио Rus: … | LostFilm»), не попавшая в разметку, в обучение не идёт
|
||||
* Кодек-строки со студией с 02.11.2026 размечены сами (`studio_source=codec`, см.
|
||||
`docs/collecting.md`): их `raw`/`audio_raw` дают позитивы. Кодек-строка русской
|
||||
дорожки («Аудио 3: AC3 … Русский (MVO, LostFilm)», «Аудио Rus: … | LostFilm»),
|
||||
не попавшая в разметку, в обучение не идёт
|
||||
(метка -1): у rutracker `raw` — строка «Перевод N:», и как негатив она учила
|
||||
модель отбрасывать кодек-строки — а на kinozal студии только в них.
|
||||
* В `predict_release` выбранные моделью кодек-строки — второстепенный источник
|
||||
(`source: codec`): подключаются, только если у какой-то дорожки страницы нет
|
||||
студии; если других строк нет (nnm), они и есть дорожки.
|
||||
* e2e: `tests/e2e_segmenter.py [каталог]` — пары (тип, студия) на тестовых
|
||||
страницах, не больше `E2E_MAX` (400) на трекер; `--train-pages` — ещё и train.
|
||||
страницах, не больше `E2E_MAX` (400) на трекер; `--train-pages` — ещё и train;
|
||||
основная модель — `E2E_MODEL` (по умолчанию `models/best`), например
|
||||
`set E2E_MODEL=models/runs/<запуск>` перед запуском, чтобы сравнить кандидата.
|
||||
* Нарезка ВНУТРИ строки («Дублированный, многоголосый») в данных не размечена
|
||||
(91 группа из 6735) — остаётся на правилах `_split_entries`, но только на
|
||||
строках, выбранных моделью.
|
||||
|
||||
Reference in new issue
Block a user