NeuralTalk es un software de Andrej Karpathy, una red neuronal de esas que identifican objetos en las fotos y los «explican» con lenguaje normal y corriente, solo que ha sido modificado para recoger las imágenes de una webcam. El resultado a pesar de ser inexacto es bastante impresionante.
Para entrenar este software en concreto se ha utilizado una base de datos llamada MS COCO en la que hay más de 100 000 imágenes perfectamente catalogadas que pueden utilizarse por semejanza (aunque en la grabación aparezcan muy pocas esas imágenes, pero pueden aparecer partes similares). Resulta interesante que todo el procesamiento lo puede hacer un portátil con una tarjeta gráfica Nvidia 750M de 2 GB de memoria – sin tener que acceder a la nube como hacen Siri, Cortana y otros «asistentes inteligentes».
