Home › Fóruns › Fórum Processamento de Linguagem Natural com Deep Learning › ARQUITETURA TRANSFORMER › Responder a: ARQUITETURA TRANSFORMER
9 de junho de 2021 às 23:14 #29121
Olá Roberto, utilize o comando abaixo:
tokenizer_en = tfds.deprecated.text.SubwordTextEncoder.build_from_corpus(corpus_en, target_vocab_size=2**13)
Fabio