Tanítás, validáció és teszt
Miért nem elég visszakérdezni a modelltől azt, amit már látott?
A lényeg
A tanítóhalmaz alakítja a paramétereket; a validációs adatok a beállítások és modellválasztás támogatására szolgálnak; a tesztadatok a végső, korábban nem használt kiértékelésre valók. Szivárgás esetén a teszt már nem független, így a becsült teljesítmény túl optimista lesz.
A tanítóhalmaz a paraméterek beállítására, a validáció például hiperparaméter-választásra, a teszthalmaz végső értékelésre szolgál. A teszthalmaz ismételt felhasználása torzíthatja a mérést.
Egy dokumentumosztályozó tanításába véletlenül bekerülő tesztpéldák mesterségesen magas pontosságot eredményezhetnek.
Azonos ügyfélhez tartozó rekordok külön halmazba osztása is adatszivárgást okozhat.
Próbáld ki!
Rajzolj három dobozt: tanítás, validálás, teszt. Írd hozzá, mikor melyiket használjuk.
Szánj erre 1–2 percet. A saját megoldás többet ér, mint a kész válasz olvasása. Nem kell AI-fiók a feladathoz.
Mondd el saját szavaiddal a lecke lényegét. Hogyan magyaráznád el valakinek, miért téves a fent bemutatott félreértés? Hozz még egy saját példát!
Saját jegyzeted (automatikus helyi mentés)
Ellenőrizd a tudásod
Helyes válasz: A kész rendszer független teljesítménymérése. A tanítóhalmaz alakítja a paramétereket; a validációs adatok a beállítások és modellválasztás támogatására szolgálnak; a tesztadatok a végső, korábban nem használt kiértékelésre valók. Azonos ügyfélhez tartozó rekordok külön halmazba osztása is adatszivárgást okozhat.
Források és továbbolvasás
A magyarázatok ismeretterjesztő összefoglalók. A hivatkozások modulonkénti szakmai háttéranyagok, nem mondatonkénti, elsődleges bizonyítékok. Kétség esetén ellenőrizd az eredeti dokumentumot.