Udostępnij przez


EnglishRoberta Konstruktory

Definicja

Przeciążenia

EnglishRoberta(Stream, Stream, Stream)

Konstruowanie obiektu tokenizatora do użycia z angielskim modelem Robert.

EnglishRoberta(String, String, String)

Konstruowanie obiektu tokenizatora do użycia z angielskim modelem Robert.

EnglishRoberta(Stream, Stream, Stream)

Konstruowanie obiektu tokenizatora do użycia z angielskim modelem Robert.

public EnglishRoberta(System.IO.Stream vocabularyStream, System.IO.Stream mergeStream, System.IO.Stream highestOccurrenceMappingStream);
new Microsoft.ML.Tokenizers.EnglishRoberta : System.IO.Stream * System.IO.Stream * System.IO.Stream -> Microsoft.ML.Tokenizers.EnglishRoberta
Public Sub New (vocabularyStream As Stream, mergeStream As Stream, highestOccurrenceMappingStream As Stream)

Parametry

vocabularyStream
Stream

Strumień pliku JSON zawierającego słownik kluczy ciągów i ich identyfikatory.

mergeStream
Stream

Strumień pliku zawierającego listę par tokenów.

highestOccurrenceMappingStream
Stream

Zamapuj ponownie oryginalne identyfikatory modelu GPT-2 na wysokie rangi i wartości wystąpień.

Dotyczy

EnglishRoberta(String, String, String)

Konstruowanie obiektu tokenizatora do użycia z angielskim modelem Robert.

public EnglishRoberta(string vocabularyPath, string mergePath, string highestOccurrenceMappingPath);
new Microsoft.ML.Tokenizers.EnglishRoberta : string * string * string -> Microsoft.ML.Tokenizers.EnglishRoberta
Public Sub New (vocabularyPath As String, mergePath As String, highestOccurrenceMappingPath As String)

Parametry

vocabularyPath
String

Ścieżka pliku JSON zawierająca słownik kluczy ciągów i ich identyfikatory.

mergePath
String

Ścieżka pliku zawierająca listę par tokenów.

highestOccurrenceMappingPath
String

Zamapuj ponownie oryginalne identyfikatory modelu GPT-2 na wysokie rangi i wartości wystąpień.

Dotyczy