EnglishRoberta 생성자
정의
중요
일부 정보는 릴리스되기 전에 상당 부분 수정될 수 있는 시험판 제품과 관련이 있습니다. Microsoft는 여기에 제공된 정보에 대해 어떠한 명시적이거나 묵시적인 보증도 하지 않습니다.
오버로드
| EnglishRoberta(Stream, Stream, Stream) |
영어 Robert 모델과 함께 사용할 tokenizer 개체를 생성합니다. |
| EnglishRoberta(String, String, String) |
영어 Robert 모델과 함께 사용할 tokenizer 개체를 생성합니다. |
EnglishRoberta(Stream, Stream, Stream)
영어 Robert 모델과 함께 사용할 tokenizer 개체를 생성합니다.
public EnglishRoberta(System.IO.Stream vocabularyStream, System.IO.Stream mergeStream, System.IO.Stream highestOccurrenceMappingStream);
new Microsoft.ML.Tokenizers.EnglishRoberta : System.IO.Stream * System.IO.Stream * System.IO.Stream -> Microsoft.ML.Tokenizers.EnglishRoberta
Public Sub New (vocabularyStream As Stream, mergeStream As Stream, highestOccurrenceMappingStream As Stream)
매개 변수
- vocabularyStream
- Stream
문자열 키 및 해당 ID의 사전을 포함하는 JSON 파일의 스트림입니다.
- mergeStream
- Stream
토큰의 쌍 목록을 포함하는 파일의 스트림입니다.
- highestOccurrenceMappingStream
- Stream
원래 GPT-2 모델 ID를 높은 발생 순위 및 값에 다시 매핑합니다.
적용 대상
EnglishRoberta(String, String, String)
영어 Robert 모델과 함께 사용할 tokenizer 개체를 생성합니다.
public EnglishRoberta(string vocabularyPath, string mergePath, string highestOccurrenceMappingPath);
new Microsoft.ML.Tokenizers.EnglishRoberta : string * string * string -> Microsoft.ML.Tokenizers.EnglishRoberta
Public Sub New (vocabularyPath As String, mergePath As String, highestOccurrenceMappingPath As String)
매개 변수
- vocabularyPath
- String
문자열 키 및 해당 ID의 사전을 포함하는 JSON 파일 경로입니다.
- mergePath
- String
토큰의 쌍 목록을 포함하는 파일 경로입니다.
- highestOccurrenceMappingPath
- String
원래 GPT-2 모델 ID를 높은 발생 순위 및 값에 다시 매핑합니다.