Eulerovská video-magnifikace
Loading...
Date
Authors
ORCID
Advisor
Referee
Mark
A
Journal Title
Journal ISSN
Volume Title
Publisher
Vysoké učení technické v Brně. Fakulta elektrotechniky a komunikačních technologií
Abstract
V této práci si přiblížíme problematiku eulerovské video-magnifikace (EVM), její počátky a inovace, které vedly až k možnosti jejího využití pro detekci srdečního rytmu v reálném čase. Pomocí Gaussovy pyramidy jsou zvýrazněny rozdíly v prostorových změnách výřezů ze snímaného videa, získaných pomocí MediaPipe Face Mesh algoritmu, využívajícího strojové učení. Výsledkem je dostatečně výrazný časový signál, ze kterého se následně Fourierovou transformací získává tepová frekvence detekovaného subjektu. Je zde navržena metoda měření pro vyhodnocení použitelnosti EVM ve sledovacích systémech. Na konec jsou probrány nedostatky takového systému a možné způsoby jejich nápravy.
In this paper we go over the research behind eulerian video magnification, its beginnings and inovations which lead to its potential use in real time heart rate measurement. The spacial differences are exaggerated using the Gaussian pyramid in conjuncture with face detection using the MediaPipe Face Mesh solution, which leverages machine learning for ultra fast performance. The resulting signal is clear enough to allow pulse extraction using the Fourier transform. Evaluation is conducted upon the final prototype to see how suitable is EVM in combination MediaPipe for use in surrveilance systems. At the end we discuss the limitations and how to possibly overcome them.
In this paper we go over the research behind eulerian video magnification, its beginnings and inovations which lead to its potential use in real time heart rate measurement. The spacial differences are exaggerated using the Gaussian pyramid in conjuncture with face detection using the MediaPipe Face Mesh solution, which leverages machine learning for ultra fast performance. The resulting signal is clear enough to allow pulse extraction using the Fourier transform. Evaluation is conducted upon the final prototype to see how suitable is EVM in combination MediaPipe for use in surrveilance systems. At the end we discuss the limitations and how to possibly overcome them.
Description
Citation
ŘIČÁNEK, D. Eulerovská video-magnifikace [online]. Brno: Vysoké učení technické v Brně. Fakulta elektrotechniky a komunikačních technologií. 2022.
Document type
Document version
Date of access to the full text
Language of document
cs
Study field
bez specializace
Comittee
doc. Ing. Jan Mikulka, Ph.D. (předseda)
doc. Ing. Petr Blaha, Ph.D. (místopředseda)
Ing. Jakub Arm, Ph.D. (člen)
doc. Ing. Petr Fiedler, Ph.D. (člen)
Ing. Peter Honec, Ph.D. (člen)
Ing. Stanislav Klusáček, Ph.D. (člen)
Date of acceptance
2022-06-08
Defence
Student obhajoval práci na téma "Eulerovská video-magnifikace".
Po prezentaci a přečtení posudků odpověděl na otázky nepřítomné oponentky, a následně v odborné rozpravě odpověděl na doplňující otázky:
- Proč jste časovou/výpočetní náročnost neověřil měřením?
- Co to znamená že je výpočet v matlabu nebo pythonu přesný/nepřesný?
Student obhájil diplomovou práci. Komise neměla žádné námitky k řešené práci
Result of defence
práce byla úspěšně obhájena
Document licence
Standardní licenční smlouva - přístup k plnému textu bez omezení