RGB and infrared image analysis using source separation methods to monitor pilots and operators

Abstract

[EN] In the present research, we aim to obtain an individual's heart rate using a combination of a thermal camera and RGB cameras. We will use skin temperature as input, along with the three signals from the regular RGB camera. The data will be processed to ultimately identify heartbeats, respiratory rate, and cognitive load. The work carried out allows for the reduction of fluctuations caused by lighting conditions, resulting in a robust and accurate measurement of heartbeats.

[ES] En la presente investigación pretendemos obtener la frecuencia cardíaca de un individuo mediante el uso combinado de una cámara térmica y cámaras RGB. Usaremos la temperatura de la piel como entrada, junto con las tres señales de la cámara RGB normal. Los datos serán procesados para finalmente identificar el latido del corazón, la frecuencia respiratoria y la carga cognitiva. El trabajo realizado permite reducir las fluctuaciones provocadas por las condiciones de iluminación para tener una medición robusta y precisa de los latidos del corazón