Мексиканский изобретатель Диего Трухильо Пизанти недавно разработал уникальную камеру, которая вместо того, чтобы улавливать свет через объектив для создания снимка, строит изображение окружающей обстановки, слушая звук. В камере используется модуль Raspberry Pi 3B и искусственная нейронная сеть, которая преобразует звук в изображение.
Камера напоминает рог с огромным отверстием в передней части для усиления захвата звука. Пользователь просто направляет рог в ту сторону, где он хочет сделать снимок, нажимает кнопку, и камера генерирует изображение на основе захваченного звука с помощью искусственного интеллекта. Камера также оснащена небольшим экраном, на котором отображается ход обработки изображения и предварительный просмотр результатов.
Пизанти говорит, что для проекта он разработал искусственную нейронную сеть и обучил ее с помощью собственных видеозаписей окрестностей Мехико. Он сопоставил каждый кадр видео с соответствующей секундой звука, создав ассоциацию между звуком и видео. В результате изображения, создаваемые этой камерой, основаны на снимках видов Мехико.
Пизанти говорит, что хотел исследовать связь между звуком и зрением, а также то, как искусственный интеллект может понимать и создавать мир. Он рассматривает этот проект как художественный эксперимент, а также как техническую задачу. Он надеется, что камера вдохновит людей задуматься о связях и различиях между звуком и изображением.