BigBird é o modelo de processamento de linguagem natural para textos longos

O novo modelo do Google aplica mecanismos de atenção esparsos para contornar as limitações dos modelos anteriores, assim alcançando desempenho superior em tarefas de NLP com textos longos.