Udostępnij przez


BpeDecoder Klasa

Definicja

Umożliwia dekodowanie oryginalnego narzędzia BPE przez dołączenie wszystkich tokenów, a następnie zastąpienie sufiksu użytego do identyfikacji końca wyrazów przez białe spacje

public sealed class BpeDecoder : Microsoft.ML.Tokenizers.TokenizerDecoder
type BpeDecoder = class
    inherit TokenizerDecoder
Public NotInheritable Class BpeDecoder
Inherits TokenizerDecoder
Dziedziczenie

Konstruktory

BpeDecoder()

Skonstruuj nowy obiekt dekodera Bpe.

BpeDecoder(String)

Skonstruuj nowy obiekt dekodera Bpe.

Metody

Decode(IEnumerable<String>)

Zdekoduj oryginalny kod BPE, dołączając wszystkie tokeny, a następnie zastępując sufiks używany do identyfikowania końca wyrazów przez białe spacje.

Dotyczy