BpeDecoder 클래스

참조

정의

네임스페이스:: Microsoft.ML.Tokenizers

어셈블리:: Microsoft.ML.Tokenizers.dll

패키지:: Microsoft.ML.Tokenizers v0.20.1

중요

일부 정보는 릴리스되기 전에 상당 부분 수정될 수 있는 시험판 제품과 관련이 있습니다. Microsoft는 여기에 제공된 정보에 대해 어떠한 명시적이거나 묵시적인 보증도 하지 않습니다.

모든 토큰을 조인한 다음 단어 끝을 공백으로 식별하는 데 사용되는 접미사를 대체하여 원래 BPE를 디코딩할 수 있습니다.

public sealed class BpeDecoder : Microsoft.ML.Tokenizers.TokenizerDecoder

type BpeDecoder = class
    inherit TokenizerDecoder

Public NotInheritable Class BpeDecoder
Inherits TokenizerDecoder

상속: Object

TokenizerDecoder
BpeDecoder

생성자

BpeDecoder()	새 Bpe 디코더 개체를 생성합니다.
BpeDecoder(String)	새 Bpe 디코더 개체를 생성합니다.

메서드

Decode(IEnumerable<String>)

모든 토큰을 조인한 다음 단어 끝을 공백으로 식별하는 데 사용되는 접미사를 대체하여 원래 BPE를 디코딩합니다.

적용 대상