Gwerthusiad Model

Diffiniad

Gwerthuso modelau yw'r broses o asesu pa mor dda y mae model dysgu peirianyddol yn perfformio ar ddata anweledig gan ddefnyddio metrigau fel cywirdeb, manylder, atgof, neu sgôr F1.

Diben

Y pwrpas yw dilysu perfformiad model, canfod gor-ffitio, a sicrhau dibynadwyedd cyn ei ddefnyddio. Mae'n darparu tystiolaeth bod modelau'n bodloni'r nodau a fwriadwyd.

Pwysigrwydd

• Yn sicrhau bod modelau'n cyffredinoli y tu hwnt i ddata hyfforddi.
• Yn arwain gwelliannau mewn dylunio a hyfforddiant.
• Yn helpu i gymharu algorithmau cystadleuol.
• Yn cefnogi atebolrwydd rheoleiddiol a moesegol.

Sut Mae'n Gwaith

1. Rhannwch y data yn setiau hyfforddi, dilysu a phrofi.
2. Model hyfforddi ar ddata hyfforddi.
3. Gwerthuso rhagfynegiadau ar ddata prawf gan ddefnyddio metrigau.
4. Dadansoddi gwallau a rhagfarnau.
5. Ailadroddwch i wella perfformiad.

Enghreifftiau (Y Byd Go Iawn)

• Cystadlaethau Kaggle: modelau wedi'u gwerthuso gyda setiau prawf wedi'u dal allan.
• Deallusrwydd Artiffisial Gofal Iechyd: modelau wedi'u gwerthuso am sensitifrwydd a manylder.
• Deallusrwydd artiffisial gyrru ymreolus: wedi'i werthuso gyda senarios gyrru o'r byd go iawn.

Cyfeiriadau / Darllen Pellach

• Han et al. Dysgu Peirianyddol: Persbectif Tebygolrwydd. Gwasg MIT.
• Fframwaith Rheoli Risg AI NIST.
• Trafodion IEEE ar Ddadansoddi Patrymau a Deallusrwydd Peirianyddol.
• Canllaw i Ddechreuwyr I Werthuso Modelau Iaith Fawr