Imagine ser capaz de ver uma imagem vívida apenas com sua mente. Cientistas da Escola de Graduação de Ciências Bioscience da Universidade de Osaka fizeram isso possível usando avanços em tecnologia e inteligência artificial.
Em um estudo recente, os pesquisadores conseguiram reconstruir imagens de alta resolução a partir da atividade cerebral usando o modelo de geração de imagens Stable Diffusion.
Diferentemente de outros estudos, os pesquisadores não precisaram treinar ou ajustar modelos de IA para criar essas imagens.
Eles usaram uma representação latente da imagem a partir de sinais de ressonância magnética funcional (fMRI) e processaram o modelo adicionando ruído através do Stable Diffusion.
Eles decodificaram as representações de texto das fMRI no córtex visual superior e as usaram como entrada para produzir uma imagem reconstruída final.
Este estudo é único porque não precisou de treinamento de modelos complexos. O estudo anterior se limitava a produzir reconstruções de imagens de alta resolução usando modelos generativos treinados e ajustados.
Este novo estudo mostra uma interpretação quantitativa do modelo de Stable Diffusion de uma perspectiva biológica.
Os pesquisadores também descobriram uma correlação entre os níveis de estímulo e ruído no cérebro. À medida que aumenta o nível de estímulo, aumenta também o nível de ruído, o que, por sua vez, aumenta a resolução da imagem.
O estudo também mostra a participação de diferentes redes neuronais no cérebro e como elas eliminam o ruído para reconstruir a imagem.
À medida que a IA generativa avança, os pesquisadores estão explorando novas maneiras de trabalhar com o cérebro humano.
Em um estudo de janeiro de 2022, pesquisadores da Universidade de Radboud nos Países Baixos usaram dados de 1.050 rostos únicos para treinar uma rede de IA generativa e, em seguida, converteram os resultados da imagem cerebral em imagens reais. O estudo descobriu que a IA era capaz de realizar uma reconstrução de estímulo sem precedentes.
