建模时一定需要验证集或者测试集吗？

验证集(validation set)和测试集(test set)本身就并不是完全等价的。

参考：validation set和test set的区别？

在这两个集合上可以分别得到验证误差和测试误差，用来衡量模型表现精度。

参考：训练误差、测试误差、泛化误差的区别

有时候我们用cross valiadtion来代替training set和validation set，但是即便如此，我们也最好要留一份test set。

参考：如果我用交叉验证，还是否需要单独分出测试集？

需要验证集和测试集的。

验证集用来调参，测试集用来得到真实的泛化误差。