Список проголосовавших за комментарий "Sergey Pavlov, разумеется, не для того, чтобы посмотреть, какая из моделей даёт лучшие результаты. Мы хотим в первую очередь удостовериться, что сама наша модель и наш способ подбора параметров для неё вообще имеют смысл в плане появления у модели предсказательной способности. Поэтому да, делим выборку на две части, на одной обучаем, на другой проверяем — считаем чиселку какую-то; повторяем некоторое количество раз, получаем распределение этой чиселки, смотрим на него и думаем ) А как можно ещё по-другому?"