#безопасность
Если бы фотографии могли говорить
Исцелю по фотографии. Так говорят ясновидящие и прочие экстрасексы.
Воспроизведу разговор по фотографии. Так говорят учёные.
Фантастика? "Ну, мы уже это сделали", — говорит профессор Северо-Восточного университета в США Кевин Фу.
О чём речь?
Профессор Фу и его команда нашли способ восстановить из фотографий или видео речь, звучавшую в момент съёмки. Суть метода в следующем. Когда вы снимаете на телефон, вибрации голоса рядом с камерой провоцируют крошечные искривления света, которые фиксируются на снимке или видео. Дело в том, что камеры почти всех современных смартфонов имеют функцию стабилизации: объектив "подвешен" на пружинках, которые компенсируют дрожание рук при съёмке и позволяют делать более чёткие снимки. И именно на эти чувствительные пружинки (и как следствие — объектив) оказывают влияние вибрации голоса рядом с камерой. Это создаёт искажения на снимке, исчезающе малые — но не для того, кто знает, что именно он на картинке ищет и имеет при этом инструмент для обработки такой "мелочи". А для обработки этой информации исследователи разработали и обучили специальную нейросеть, которую назвали Side Eye ("Боковое зрение"). Side Eye определяет слова человека, говорящего в комнате, где была сделана фотография, и его пол (по тембру голоса). Нейронка может даже идентифицировать конкретного человека, если ранее она была обучена его голосу, хотя эта функция пока работает не очень хорошо.
Что нам здесь важно?
С точки зрения кибербезопасности Side Eye открывает совершенно новый класс угроз, который должны иметь в виду и эксперты по инфобезу, и обычные пользователи. Для специалистов это важно тем, что при должном уровне развития таких технологий визуальные каналы утечки информации смешиваются с акустическими, что потребует переработки ряда действующих моделей угроз. А обывателю теперь стоит иметь в виду, что выложенный в соцсеть видеоролик с музыкой, наложенной вместо звукового ряда, всё равно может поведать, о чём говорили во время его съёмки. Равно как и фотки со вчерашней вечеринки.
Кроме того, по мере своего развития данная технология может породить новый вид цифровых доказательств для судебной системы, если будет создана соответствующая экспертная и правовая база. Ведь если по фотографии или видео, сделанным в известное время и в известном месте, можно будет достоверно определить наличие рядом с камерой конкретного человека или его слова, то это создаёт новые возможности для адвокатов и прокуроров (про оперов и говорить не стоит).
Если бы фотографии могли говорить
Исцелю по фотографии. Так говорят ясновидящие и прочие экстрасексы.
Воспроизведу разговор по фотографии. Так говорят учёные.
Фантастика? "Ну, мы уже это сделали", — говорит профессор Северо-Восточного университета в США Кевин Фу.
О чём речь?
Профессор Фу и его команда нашли способ восстановить из фотографий или видео речь, звучавшую в момент съёмки. Суть метода в следующем. Когда вы снимаете на телефон, вибрации голоса рядом с камерой провоцируют крошечные искривления света, которые фиксируются на снимке или видео. Дело в том, что камеры почти всех современных смартфонов имеют функцию стабилизации: объектив "подвешен" на пружинках, которые компенсируют дрожание рук при съёмке и позволяют делать более чёткие снимки. И именно на эти чувствительные пружинки (и как следствие — объектив) оказывают влияние вибрации голоса рядом с камерой. Это создаёт искажения на снимке, исчезающе малые — но не для того, кто знает, что именно он на картинке ищет и имеет при этом инструмент для обработки такой "мелочи". А для обработки этой информации исследователи разработали и обучили специальную нейросеть, которую назвали Side Eye ("Боковое зрение"). Side Eye определяет слова человека, говорящего в комнате, где была сделана фотография, и его пол (по тембру голоса). Нейронка может даже идентифицировать конкретного человека, если ранее она была обучена его голосу, хотя эта функция пока работает не очень хорошо.
Что нам здесь важно?
С точки зрения кибербезопасности Side Eye открывает совершенно новый класс угроз, который должны иметь в виду и эксперты по инфобезу, и обычные пользователи. Для специалистов это важно тем, что при должном уровне развития таких технологий визуальные каналы утечки информации смешиваются с акустическими, что потребует переработки ряда действующих моделей угроз. А обывателю теперь стоит иметь в виду, что выложенный в соцсеть видеоролик с музыкой, наложенной вместо звукового ряда, всё равно может поведать, о чём говорили во время его съёмки. Равно как и фотки со вчерашней вечеринки.
Кроме того, по мере своего развития данная технология может породить новый вид цифровых доказательств для судебной системы, если будет создана соответствующая экспертная и правовая база. Ведь если по фотографии или видео, сделанным в известное время и в известном месте, можно будет достоверно определить наличие рядом с камерой конкретного человека или его слова, то это создаёт новые возможности для адвокатов и прокуроров (про оперов и говорить не стоит).