holdout_threshold — EMPROOF `evaluate` op

• Datenarten: signal × signal × signal × signal → table

• Aufruf: import fullseye as fs; fs.ledger.holdout_threshold(train_pos, train_neg, test_pos, test_neg, target_fpr: 'float' = 0.05) -> 'dict' (die Implementierung direkt: import emproof; emproof.holdout_threshold(train_pos, train_neg, test_pos, test_neg, target_fpr: 'float' = 0.05) -> 'dict'; aus dem Register: opsemproof.get("holdout_threshold"))

Verwendung

Wählt den Schwellwert auf der Trainingsseite und misst die Evaluierung auf der anderen Seite (je höher der score, desto "verdächtiger").

tau = der kleinste Schwellwert, bei dem die Falsch-positiv-Rate der Trainings-Negativbeispiele (nicht eingepflanzte Komponenten und Paare) höchstens target_fpr beträgt (das obere target_fpr-Quantil der Negativ-Scores). Zurückgegeben werden tau sowie für Training und Auswertung jeweils AUC, TPR, FPR und Anzahlen. Nur die Zahlen der Auswertungsseite werden für Aussagen verwendet -- eine TPR, gemessen auf der Seite, auf der der Schwellwert gewählt wurde, ist immer optimistisch (die holdout-Disziplin von evolve als op herausgelöst). AUC ist Mann–Whitney (Gleichstand 0.5).

>>> r = holdout_threshold(tr_pos, tr_neg, te_pos, te_neg, target_fpr=0.05)

>>> r["tau"], r["test_auc"], r["test_tpr"], r["test_fpr"]

Ausführlicher Anwendungsleitfaden

• Leitfaden zur Familie emproof

Referenzen (Beispieldaten, Literatur)

• Katalog der Beispieldaten (Download-URLs / Lizenzen) — 2-D nutzt skimage.data (BSD/Public Domain) plus synthetische Bilder, 3-D nennt Download-URLs echter Datenquellen (Stanford, PDS, …).

• Herkunft und Literatur der Operatoren — die Quellen der Forschung/Verfahren, auf denen diese Operatorfamilie beruht.

• Der kanonische Algorithmus (Autor, Jahr) und seine Anwendungen stehen im Familienleitfaden oben.

Ausführbare Beispiele (verifizierte Samples, die diesen Operator wirklich aufrufen)

• poc_em_second_opinion — py -3.11 examples/poc_em_second_opinion.py

Typkompatible Folge-Operatoren (nehmen `table` als Eingabe)

seg_synapse_partners · seg_wiring_variation · seg_synapse_nri · seg_wiring_exposure

Gleiche Kategorie (`evaluate`)

—

*Provenance: emproof.py — EMPROOF Operator-Registry. Diese Notiz wird von tools/opdocs.py md erzeugt (nicht von Hand bearbeiten).*

holdout_threshold — EMPROOF evaluate op