iInvisible motion in video

[avva]

Вот это очень круто, по-моему. Они придумали усиливать крохотные цветовые изменения, невидимые невооруженным взглядом, так, что после обработки видно биение сердца человека, движение крови вдоль кожи, дыхание младенца, итд. Очень впечатляет.

Comments

[ypolozov.livejournal.com]

Ого, впечатляет! Думаю, будет хорошим плагином для гугль-очков :)

[niobium0.livejournal.com]

блин.

[ztarlitz.livejournal.com]

Видео очень смахивает на разводилово.

[oleg-umnik.livejournal.com]

Какие проблемы? Добро пожаловать: http://people.csail.mit.edu/mrub/vidmag/
Скачайте исходники (МатЛаб), воспроизведите сами.

[illy-drinker.livejournal.com]

У них там (CSAIL и близкие к ним коллективы) очень много совершенно удивительных людей (я бы, сказал, гениальных, но все же у нас русскоязычных это очень сильное слово)
Вот, например, этот профессор
http://web.media.mit.edu/~tod/

[enternet.livejournal.com]

Люди уже делали это. Говорят, что эффект наблюдается только на демонстрационных видео, на своих роликах воспроизвести не получилось. Что вполне понятно и ожидаемо: всё зависит от камеры и кодека.

[ztarlitz.livejournal.com]

я думаю еще и от освещения.

[ztarlitz.livejournal.com]

Я уже взял свои слова обратно. Но как они решили проблему с компрессией? И что лично меня насторожило, это видео ребенка, там усиление цвета падает на рукав. Одежда не должна менять цвет.
И потом там все это снимается при лампах дневного света, они все мерцают 60гц (или сколько там в америке?) Это оказывает существенное влияние на цвет.

[shtyrlez.livejournal.com]

Там же частотные фильтры перед обработкой. Все эти 50-60 Гц не усиливаются. Ниже в коментах посняющий ролик есть.

[spamsink]

Если у вас есть андроидный смартфон, поставьте на него аппликацию Instant Heart Rate.

[ztarlitz.livejournal.com]

Фантастика, реально работает.

A long long time ago in a galaxy far, far away

[toothedgoo.livejournal.com]

[sleeping-death.livejournal.com]

отлично подходит для дистанционного определения, волнуется человек или нет. "полезно" в аэропортах.

[centralasian.livejournal.com]

или на допросах; выступлениях политиков; отчётных собраниях; etc

[shufel.livejournal.com]

Наверное, самое хитрое в этой системе - отделить сигнал, который надо увеличивать, от шума. Собственно, должно быть очень нетривиально решить, что есть шум.

[sunch.livejournal.com]

Насколько я понимаю, шум идет попиксельный, а сигнал - относительно большими зонами, по многу пикселей сразу.

[shufel.livejournal.com]

А вполне может быть и наоборот.

[nikita-penyzil.livejournal.com]

в айфоне (и андроид кажись тоже)уже около года есть аппликация в которой приложив палец к камере можно проверить пульс.Ето та же технология, я так понимаю,и уже давно там..Непойму отчего ажиотаж.

[kray-zemli.livejournal.com]

Полагаясь на истину, что люди -- зазнавшиеся неразумные животные, не способные на создание нового, а только на копированию, приходим к выводу, что, видимо, эта информация и без всяких быдлодевайсов по возможности используется нашей интуицией.

«The thought has occurred to us.»

[salas.livejournal.com]

У других учёных с похожими картинками вообще есть орисс (http://healthland.time.com/2012/07/06/why-humans-have-color-vision-and-other-qs-as-with-neuroscientist-mark-changizi/), что цветовое зрение придумано именно для этого.

Но те учёные специальные очки делают — и с тех пор, как я увидел их на /. (http://science.slashdot.org/story/13/02/04/2335237/glasses-that-hack-around-colorblindness), хотел узнать, хватает ли обычной RGB камеры. С этой точки зрения ОП — очень крутой proof of concept.

[auto194419.livejournal.com]

так и просится в google glass! я сразу вспомнил Стива Манна, который всегда знает, кто сбежал с лекции, потому что тепловые следы от жопы остались на сидении :)

[kobak.livejournal.com]

Вау, класс. Спасибо за ссылку. Интересно, что усиливается не только контраст цветов, но и микро-движения (видимо, они делают spatial Fourier decomposition и усиливают отдельные компоненты).

[avva.livejournal.com]

Да, на примере с глазом это особенно поражает.

[p2004r.livejournal.com]

у них же еще ролик вроде был с вагоном метро? там "шатающийся" вагон еще впечатляюще выглядит.

PS но думаю что на обычной вебкамере такое может и не взлететь :)

[prometa.livejournal.com]

Так можно поверить в легенды о сверхпроницательных людях, которые видят эти незначительные цветовые изменения невооруженным глазом, и распознают состояние человека. Зафиксирован же случай, когда человек мог, глядя на виниловую пластинку, распознавать музыкальные произведения, которые были на ней записаны.

[asox.livejournal.com]

По идее для отработки канала цвета нужны специальные камеры с разрядностью выше 24 бит (8 + 8 + 8).
В принципе всякими компьютерными обработками фотографий занимались ещё в 70-е. А вот усиление движений на видео реализовать тогда было невозможно, походу.