ИИ может преобразовывать звуки в изображения с картой

00:20, ноября 30, 2024 Используя генеративный искусственный интеллект, группа исследователей Техасского университета в Остине преобразовала звуки из аудиозаписей в изображения с видом на улицу. Визуальная точность этих сгенерированных изображений демонстрирует, что машины могут воспроизводить человеческую связь между аудио- и визуальным восприятием окружающей среды. В статье, опубликованной в журнале Computers, Environment and Urban Systems , исследовательская группа описывает обучение модели искусственного интеллекта, преобразующей звуковой ландшафт в изображение, с использованием аудио- и визуальных данных, собранных с различных городских и сельских улиц, а затем использование этой модели для генерации изображений из аудиозаписей. «Наше исследование показало, что акустическая среда содержит достаточно визуальных подсказок для создания высокоузнаваемых изображений уличного пейзажа, которые точно отображают различные места», — сказал Юхао Кан, доцент кафедры географии и окружающей среды в Техасском университете и соавтор исследования. «Это означает, что мы можем преобразовать акустическую среду в яркие визуальные представления, эффективно переводя звуки в зрелища». Используя видео и аудио YouTube из городов Северной Америки, Азии и Европы, команда создала пары 10-секундных аудиоклипов и кадров изображений из разных мест и использовала их для обучения модели ИИ, которая могла создавать изображения высокого разрешения из аудиовхода. Затем они сравнили творения ИИ по преобразованию звука в изображение...

Источник: android-robot.com

Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Software

Таким может быть совершенно новый Mitsubishi Pajero: первые изображения внедорожника Mitsubishi уже вывела на дорожные тесты внедорожник Pajero (на некоторых рынках модель называется Montero) нового поколения: на основе шпионских сним …

Наука и Технологии 16:20, июля 30, 2025 | ixbt.com

В интернете появились изображения, характеристики и цена на Vivo V40 Lite, который может появится в Европе Скоро состоится запуск смартфона среднего класса Vivo V40 Lite и свежая утечка предоставила новую информацию о его дизайне и спецификациях. Наши колл …

Гаджеты 20:00, июня 10, 2024 | gagadget.com

Звуки взрывов ночью испугали волгоградцев В Краснооктябрьском районе минувшей ночью жители некоторых домов обеспокоились, услышав похожие на взрывы звуки. …

Главные новости 00:20, сентября 8, 2024 | novostivolgograda.ru

Межпланетные звуки. Артемий Троицкий – о предвкушении космоса В 350-м выпуске подкаста "Музыка на Свободе" Артемий Троицкий предлагает послушать композиции на космические темы. Какое, наверное, приятное и увлека …

Музыка 08:20, ноября 12, 2024 | svoboda.org

Игровые мыши способны улавливать звуки голоса Ученые из Калифорнийского университета в Ирвайне (UCI) обнаружили, что современные высокоточные оптические мыши, особенно игровые модели с разрешение …

Наука и Технологии 00:20, октября 9, 2025 | ilenta.com

В одном из районов Тюмени услышали звуки выстрелов В одном из районов Тюмени были слышны выстрелы. Эту информацию подтвердили местные жители. По их словам, инцидент произошел на Заречном проезде. Снач …

Происшествия 08:20, июля 24, 2024 | pravda.ru

На громкие звуки во дворе воронежского ЖК «Лазурный» пожаловались горожане Скриншот видео. Вечером воскресенья, 1 декабря, во дворе жители воронежского ЖК «Лазурный» услышали громкие звуки. Хулиганы взорвали петарду возле до …

Главные новости 08:20, декабря 5, 2024 | vrn.vestipk.ru

В подмосковной Балашихе горят склады, слышны звуки взрывов На складах в подмосковной Балашихе разгорелся крупный пожар, слышны звуки взрывов. Об этом пишут сегодня, 31 августа, российские телеграм-каналы. …

Происшествия 16:20, августа 31, 2025 | eadaily.com