ИИ помог ученым извлечь звук из фото и немого видео

ИИ помог ученым извлечь звук из фото и немого видео

ИИ помог ученым извлечь звук из фото и немого видео

Метод, разработанный университетскими исследователями, позволяет получать аудиоданные из фотографий и видео, снятого с выключенным микрофоном. Созданный учеными ИИ-инструмент способен даже определить пол комментатора, созерцавшего фотосессию.

Концепция, нареченная Side Eye, предполагает использование стабилизатора изображения и механизма скользящего затвора, присутствующих во встроенных камерах многих современных телефонов. Созданный в ходе исследования инструмент использует средства машинного обучения, и его можно натренировать на аудиозаписях с тем, чтобы он научился распознавать часто употребляемые слова — например, «да» и «нет».

«Представьте себе, что кто-то снимает для TikTok видео, отключив звук, чтобы наложить музыку, — говорит профессор Кевин Фу (Kevin Fu) из Северо-Восточного университета в Бостоне. — А вдруг кому-нибудь захочется узнать, что сказал герой ролика? Вспомнил детский стишок про арбуз или выдал свой пароль? И о чем это шушукаются за его спиной? Все это можно выяснить».

Оказалось, что разговор рядом с объективом камеры вызывает слабые вибрации в стабилизаторе, компенсирующем дрожание рук при съемке. Угол света при этом почти незаметно изменяется.

Извлечь звуковую частоту из этих микровибраций трудно, однако задачу исследователям облегчил эффект скользящего затвора — когда сканирование пикселей происходит построчно, за сотни тысяч прогонов для каждого изображения. Это открывает возможность для детализации изменений, вызванных речью фотографа, его модели или наблюдателя.

По словам исследователей, Side Eye исправно работает даже с материалами, отснятыми при плохом освещении. Не смущают его и неудачные снимки вроде потолка во весь кадр, однако чем больше отображаемой информации, тем лучше.

На выходе вначале получались приглушенные звуки, похожие на человеческую речь. После обучения Side Eye начал извлекать больше полезной информации и стал узнавать людей по голосу — в тех случаях, когда образцы присутствовали в тренировочных наборах данных.

С точки зрения кибербезопасности подобные инструменты составляют потенциальную угрозу, однако их также можно использовать в криминалистике для получения цифровых свидетельств. Так, например, обработанная по методу Side Eye запись с камеры видеонаблюдения сможет подтвердить или опровергнуть алиби подозреваемого в совершении преступления.

HWall от Крайон: WAF-решение в Реестре отечественного ПО

Крайон объявляет о запуске HWall – решения, которое помогает компаниям быстро закрыть ключевые риски веб-безопасности без сложных внедрений. Продукт включен в Реестр отечественного ПО (№33121 от 17.04.2026), что подтверждает его соответствие требованиям российского законодательства и делает продукт актуальным для компаний, реализующих стратегию импортонезависимости.

HWall объединяет в себе фаервол для веб-приложений (WAF), антибот и защиту от DDoS-атак. Он обеспечивает противодействие наиболее распространённым и критичным угрозам, включая OWASP Top 10, автоматизированные атаки и целевые попытки взлома.

Решение анализирует трафик в реальном времени, блокирует вредоносную активность и предотвращает атаки ещё на этапе разведки, до того, как они превращаются в инциденты. HWall защищает сайты, API, интернет-магазины, административные панели, IoT-шлюзы и их веб-панели, а также другие веб-интерфейсы, как внешние, так и внутренние.

Среди ключевых возможностей HWall:

  • Блокирование сканеров уязвимостей и попыток разведки;
  • Фильтрация трафика по репутации IP-адресов, блокировка подозрительных IP и вредоносных User-Agent;
  • Выявление аномалий в трафике и автоматическое ограничение подозрительной активности;
  • Блокирование обращений к командно-контрольным серверам (C2);
  • Предотвращение типовых веб-атак (SQLi, XSS, RCE, LFI/RFI и др.) в автоматическом режиме;
  • Встроенные механизмы антибот и защиты от DDoS-атак на уровне L3, L4, L7.

В HWall также встроен собственный ИИ-ассистент, который существенно упрощает работу специалистов по информационной безопасности. Он способен классифицировать угрозы, определять их критичность, предлагать оптимальные сценарии реагирования, помогать быстро формировать корректные правила фильтрации, генерировать рекомендации по созданию правил исключений при ложных срабатываниях.

У пользователей есть возможность гибко настроить уровень защиты: от режима мониторинга (без блокировок, но с полным анализом) до полноценной фильтрации трафика.

HWall работает по SaaS-модели, поэтому не требует установки и интеграции сложной инфраструктуры. Компании достаточно направить трафик через фильтрующие узлы и сервис сразу начнет работать. Все обновления и поддержка выполняются автоматически. Это снижает нагрузку на внутренние ИТ-команды и ускоряет запуск.

Данные пользователей и телеметрия событий безопасности хранятся раздельно, в изолированном контуре у сертифицированного облачного провайдера. Это обеспечивает высокий уровень сохранности данных и исключает несанкционированный доступ.

HWall предлагает прозрачную модель лицензирования: единый тариф составляет 1 900 000 рублей в год за 1000 QPS. Количество защищаемых приложений не ограничено, что позволяет масштабировать защиту без дополнительных затрат. В стоимость входят также интеграция с SIEM (Syslog), вводный инструктаж для команды, а также техническая и консультационная поддержка.

«Сегодня веб-приложения становятся ключевой точкой взаимодействия с клиентами и одновременно – основной точкой атаки. По статистике три четверти успешных атак на сетевой периметр начинаются именно с опубликованных веб-ресурсов. Поэтому бизнесу важно закрыть этот вектор атаки, при этом сделать это быстро и без сложных интеграций. HWall как раз отвечает на этот запрос. С ним компании могут быстро закрыть ключевые риски веб-безопасности и повысить устойчивость цифровых сервисов без развёртывания дополнительной инфраструктуры и с предсказуемой экономикой», – отмечает Вадим Юн, генеральный директор Крайон.

Компании могут бесплатно протестировать HWall и оценить его эффективность в реальных условиях, для этого достаточно оставить заявку на сайте продукта.

Реклама, 18+. ООО «Крайон». ИНН 9717087315
ERID: 2VfnxxSTGfC

RSS: Новости на портале Anti-Malware.ru