Home › Forums › Fórum Processamento de Linguagem Natural com Deep Learning › ARQUITETURA TRANSFORMER › Reply To: ARQUITETURA TRANSFORMER
9 de junho de 2021 at 23:14
#29121
Olá Roberto, utilize o comando abaixo:
tokenizer_en = tfds.deprecated.text.SubwordTextEncoder.build_from_corpus(corpus_en, target_vocab_size=2**13)
Fabio
