TruncationSelectionPolicy Classe

Constructeur

TruncationSelectionPolicy(truncation_percentage, evaluation_interval=1, delay_evaluation=0)

Paramètres

Remarques

Cette stratégie annule régulièrement le pourcentage donné d’exécutions qui se classent le plus bas pour leurs performances sur la métrique principale. La politique s’efforce d’assurer l’équité dans le classement des exécutions en tenant compte de l’amélioration des performances du modèle avec le temps de formation. Lors du classement d’une série relativement jeune, la stratégie utilise les performances correspondantes (et antérieures) des exécutions plus anciennes pour la comparaison. Par conséquent, les exécutions ne sont pas arrêtées pour avoir des performances inférieures, car elles sont exécutées pendant moins de temps que d’autres exécutions.

La stratégie sélection de troncation prend les paramètres de configuration suivants :

• truncation_percentage: pourcentage d’exécutions les plus basses pour se terminer à chaque intervalle d’évaluation.

• evaluation_interval: fréquence d’application de la stratégie. Chaque journalisation de la métrique principale par le script d’entraînement compte pour un intervalle.

• delay_evaluation: nombre d’intervalles pour retarder l’évaluation de la stratégie. Utilisez ce paramètre pour éviter l’arrêt prématuré des exécutions d’entraînement. Si elle est spécifiée, la stratégie applique chaque multiple supérieur evaluation_interval ou égal à delay_evaluation.

Par exemple, lors de l’évaluation d’une exécution à un intervalle N, ses performances ne sont comparées qu’aux performances des autres exécutions jusqu’à l’intervalle N, même si elles ont signalé des métriques pour des intervalles supérieurs à N.

delay_evaluation

evaluation_interval

truncation_percentage

POLICY_NAME

POLICY_NAME = 'TruncationSelection'