Cet ordi devine ce qu’il voit à travers la webcam


NeuralTalk est un programme capable de décrire ce qu’il voit à l’écran.

NeuralTalk par Spi0n

Kyle McDonald est un programmeur qui a mis au point un programme baptisé « NeuralTalk2 » , capable de décrire ce qu’il voit à travers la webcam de l’ordinateur. Il réussit a deviner le contexte, le décor et les textures de ce qu’il capte via la webcam. Ce programme est une version modifiée du code « NeuralTalk » de Andrej Karpathy. Tout le traitement se fait sur un MacBook Pro de 2013 possédant une carte NVIDIA 750M et 2 Go de mémoire GPU.

Kyle se filme avec son ordinateur portable en marchant près du canal d’Amsterdam, tandis que son laptop retranscrit sur l’écran ce qu’il voit à travers la webcam. Il va ainsi décrire un graffiti, les passants etc…

Le code de ce programme est disponible sur Github.

via spi0n.com