En juegos como pinball, el sistema de recompensa ya existe de manera natural pues conforme se acumulan puntos, la máquina puede ir identificando qué es lo que tiene que hacer para obtener mayores números: qué botones presionar, qué movimientos hacer y otras claves para tener buenos resultados. Sin embargo, en juegos como “La venganza de Moctezuma”, el sistema no es tan sencillo de detectar para la Inteligencia Artificial.
Todo tiene que ver con el proceso de aprendizaje que sistemas de Inteligencia Artificial como DQN utilizan en este tipo de juegos. Por ejemplo, en videojuegos como pinball, DQN realizó múltiples intentos de prueba y error, a través de los cuales fue descartando las posibilidades de movimiento que le hacían perder puntos. Algo así como “si me muevo a la izquierda gano puntos, pero si me muevo a la derecha, no”. Luego, conforme avanzan los intentos y la IA memoriza sus posibilidades, comienza a encontrar las mejores fórmulas para triunfar. En juegos como “La venganza de Moctezuma”, por su parte, un simple error en la prueba causa que el personaje muera, por lo que no hay oportunidad de aprender las claves con base en la repetición y absorción de información, que es la clave de la Inteligencia Artificial.
Y aquí es cuando inicia la participación de los bebés. Los investigadores de Deepmind recordaron que los bebés suelen mirar por más tiempo las fotografías de imágenes que no conocen o no han visto antes que las que ya conocen, demostrando que hay algo en la simple sensación de novedad que emociona a los bebés (y probablemente a todos los humanos, si pensamos en cómo nos causa felicidad ir de compras, entre otras formas en que el dinero llega a dar felicidad).
Ellos aprovecharon esto y agregaron a DQN la capacidad de emocionarse y sentir atracción por la novedad, así que cada vez que aparecía algo nuevo en la pantalla, esto llamaba su atención y lo hacía adquirir las recompensas, como las monedas y otros premios de este tipo de juegos, permitiéndole convertirse en jugador estrella también de este tipo de juegos.