Cómo evalúa una red neuronal la calidad de las descripciones de imágenes

Para comprobar hasta qué punto su red neuronal describe bien las imágenes, reconoce documentos o analiza diagramas, hace falta un sistema de verificación fiable. AWS ha presentado Strands Evals, un evaluador multimodal que ve no solo la respuesta del modelo, sino también la propia imagen.

¿Por qué los evaluadores de texto no sirven para las redes neuronales

que trabajan con imágenes? Los evaluadores de texto comparan la respuesta del modelo con una respuesta de referencia, pero no ven la imagen. Un evaluador multimodal comprueba si la descripción contiene detalles precisos de la foto y si los datos se han extraído correctamente.