Validação cruzada em datasets grandes

Home Fóruns Fórum Deep Learning de A à Z com PyTorch e Python Validação cruzada em datasets grandes

Visualizando 2 posts - 1 até 2 (de 2 do total)
  • Autor
    Posts
  • #35012
    Profile photo ofwillfantLuis Garcia
    Participante

    Olá, relativamente a validação cruzada(pelo menos na classificação binária, que é só onde estou ainda) reparei que é usado o CPU. É possível fazer o mesmo com GPU? Como é que os pesquisadores (por exemplo) fazem este tipo de validação cruzada em datasets com milhões de dados? Há alguma forma de optimizar esta validação?

     

    Obrigado!

    #35077
    Profile photo ofdennyDenny Ceccon
    Moderador

    Olá Luis,

    A biblioteca skorch que usamos para fazer validação cruzada no curso suporta o uso de GPUs, como é documentado aqui. Mesmo assim, é possível implementar a validação cruzada de forma mais manual, criando os folds explicitamente, e aproveitar o suporte a GPUs que o próprio PyTorch já tem.

Visualizando 2 posts - 1 até 2 (de 2 do total)
  • Você deve fazer login para responder a este tópico.