مجموعه اعتبارسنجی برای انتخاب مدل و تنظیم ابرپارامترها استفاده می‌شود. مدل مستقیماً وزن‌های خود را با این داده‌ها آموزش نمی‌دهد، اما نتایج آن بر انتخاب نسخه نهایی اثر دارد.
استفاده مکرر از این مجموعه ممکن است انتخاب‌ها را به آن وابسته کند، بنابراین باید مجموعه آزمون مستقلی برای ارزیابی نهایی نگه داشت.
برای انتخاب تعداد درخت‌های جنگل تصادفی، از Validation Set استفاده می‌کنیم. Test Set را برای تصمیم‌گیری مکرر درباره پارامترها مصرف نمی‌کنیم.
درک تفاوت این موضوع با دیتاست و ترینینگ ست به انتخاب راهکار مناسب‌تر کمک می‌کند.