Построение MHI. 
Программа классификации психофизиологической двигательной активности человека, основанная на нейронной сети глубокого обучения

Выявление человеческого силуэта в данной работе происходит при помощи встроенной возможности сенсора Kinect, которая предоставляет бинарное изображение силуэта. Сенсор предоставляет возможность получать обработанные данные напрямую вместе с другими видами данных (цветное изображение, изображение глубины). В данном случае используются изображения глубины и соответствующие изображения с силуэтом человека. Благодаря тому, что разрешения этих изображений одинаковые, возможно построить новое изображение, используя только те пиксели из изображения глубины, которые имеют ненулевое значение на изображении силуэта.

Определение движения работает следующим образом — соседние кадры вычитаются друг из друга, образуя новое изображение. К данному изображению применяется размытие широкого радиуса. После этого определяется максимальное значение пиксела полученного изображения. Если оно превышает определенный настраиваемый порог, то данное изображение считается как изображение с движением, и оно сохраняется с пометкой времени в список изображений. MHI строится из изображений из этого списка с учетом времени после того, как 10 изображений подряд окажутся без движения.

Значение пикселя MHI задаётся функцией, которая учитывает историю движений в заданной точке. Чем позже в данном пикселе происходило движение, тем ярче становится полученный пиксель в итоговом изображении (7). — временная метка кадра, — общая продолжительность MHI, — исходное изображение, — пиксел изображения с координатами и .