[core] Eval извлечения и safety на размеченном наборе → цифры для слайда #24

Open
opened 2026-10-03 14:38:58 +03:00 by Eleboba · 0 comments
Owner

Описание

SPEC §10. scripts/eval_extraction.py по data/eval/labels.jsonl (разметка психиатра): точное совпадение, ±1, MAE, доля confidence < 0.5; safety recall = 100%. Mock и GigaChat (если есть ключ). Отчёт docs/eval.md. Делает lane B после этапа 1.


Лог выполнения

## Описание SPEC §10. `scripts/eval_extraction.py` по `data/eval/labels.jsonl` (разметка психиатра): точное совпадение, ±1, MAE, доля confidence < 0.5; safety recall = 100%. Mock и GigaChat (если есть ключ). Отчёт `docs/eval.md`. Делает lane B после этапа 1. --- ## Лог выполнения
Eleboba added this to the M3 Сдача milestone 2026-10-03 14:38:58 +03:00
Eleboba added the size/1featurecoreP1 labels 2026-10-03 14:38:58 +03:00
Eleboba added the lane/B label 2026-10-03 15:16:53 +03:00
Sign in to join this conversation.
1 Participants
Notifications
Due Date
No due date set.
Reference: MedITron/PTSRaiAgent#24