Software do Google cria legendas para fotos

Um software desenvolvido por engenheiros do Google é capaz de oferecer uma sugestão de legenda para a sua foto. Chamado de Neural Image Caption, o programa tem como base técnicas de computação visual e processamento de linguagem natural, que permitem às máquinas, de certa forma, enxergar e entender palavras.

Realizado por Oriol Vinyals, Alexander Toshev, Samy Bengio e Dumitru Erhan, o projeto foi publicado no site da Cornell University Library e divulgado no blog do Google.

As legendas geradas possuem caráter descritivo, como mostra o exemplo acima. “As pessoas podem resumir uma cena complexa em poucas palavras sem precisar pensar duas vezes. Mas isso é muito mais difícil para computadores”, diz o blog da empresa.

Uma das origens dessa tecnologia é o avanço recente em tradução de máquina (machine translation) de idiomas. Uma rede neural↳Deep learning9 conteúdosRedes neurais roots – Parte 01Dev (Back & Front) · abr 2019Redes neurais roots – Parte 02: treinamentoDev (Back & Front) · mai 2019Redes neurais roots – Parte 03: show me the codeDev (Back & Front) · mai 2019Ver tudo em AI → recorrente consegue converter uma frase escrita em uma língua em uma representação vetorial e, em seguida, traduzi-la em outro idioma. O projeto utiliza uma rede neural recorrente como a descrita acima em conjunto com uma rede neural convolucional que foi treinada para analisar imagens e, dessa forma, criar uma frase que resume uma determinada cena.

Agora, o objetivo dos pesquisadores é tornar as legendas mais naturais e menos mecânicas.

Com informações de Info