Boa tarde Carlos, é melhor não pular as fases, pois no conjunto de dados de treinamento as amostras são usadas para criar o modelo, enquanto o conjunto de dados de teste ou validação é usado para qualificar o desempenho.
No link abaixo você pode encontrar uma excelente discussão sobre esse assunto:
Fabio