Bölünmüş İzge İşleme ile Video Devinim Büyütme

Abstract

Video devinim büyütme, insan gözünün algılayamadığı küçük mertebedeki devinimlerin uygun bir yöntemle büyütülmesi ve bu devinimlerin videoda gözle görülebilir hale getirilmesi işlemidir. Bu algoritmalar, video çerçevelerini hem uzamsal hem de zamansal alanda işleme tabi tutarak minik devinim ve titreşimlerin büyütülüp videoya geri gömülmesi temeline dayanmaktadır. Örneğin, nabız atımının bilekte oluşturduğu devinim, köprü salınımları ve bina titreşimleri gibi algılanması zor olan devinimlerin yanında ses geriçatımı ve optik gibi çeşitli alanlarda da bu yöntemler kullanılmaya başlanmıştır. Bu çalışmada video devinim büyütmede kullanılan Euler yönteminin zamansal işleme katmanında, radar ve sesötesi (ultrasound) gibi sinyal işleme alanlarında uygulanan ve sinyal-gürültü oranını arttıran Bölünmüş İzge İşleme yöntemi kullanılmıştır. Önerilen yöntem ve Euler devinim büyütme yöntemi, yapısal benzerlik indeksi üzerinden karşılaştırılmış ve iyileştirmeler gösterilmiştir.

Video motion magnification is the process of enlarging small-scale movements that cannot be detected by the human eye. To achieve this, first, the video frames are processed in both spatially and temporally via magnifying the subtle movements and vibrations and then, these processed frames are embedded back into the video to create visibility. Various applications in different fields are studied, i.e., magnification of pulse motion on the wrist, oscillations of bridges, vibrations of buildings, and sound recovery of trembling surfaces from video. In this study, a well-known signal processing method, namely, split spectrum processing method which is used to increase the signal-to-noise ratio of returning signals in radar and ultrasound, is successfully employed on the temporal processing layer of popular Euler motion amplification technique for video magnification. Our proposed and classical Euler magnification methods are compared in terms of their structural similarity index and improvements are demonstrated.