На репозиторий GitHub выложены образцы кода, которые позволят задействовать API Windows.Media.Capture.Frames, чтобы пронумеровать сенсоры Kinect (RGB/IR/depth) и затем использовать MediaFrameReader для потоковой передачи кадров.

Эти функции были впервые представлены в Windows 10 Anniversary Update, но весь набор API должен быть уже хорошо знаком всем, кто использует пакет SDK для Kinect уже много лет. Однако новые API созданы для работы не только с Kinect, но и с любыми другими датчиками, способными на передачу потоков сложных данных

Кроме того, теперь драйвер Kinect можно обновлять через центр обновления Windows. Новый драйвер не только задействует описанные выше API для универсальной платформы Windows, но и даст возможность использовать цветную камеру Kinect как обычную веб-камеру. Это значит, что приложения, работающие с веб-камерой (например, Skype), теперь могут задействовать датчик Kinect в качестве устройства ввода. Более того, можно, например, использовать датчик для работы со службой Windows Hello, которая позволяет войти в учетную запись без ввода пароля за счет использования технологии распознавания лиц.

Еще один образец с GitHub демонстрирует пример удаления фона с кадров RGB-камеры и камеры глубины с помощью специализированных корреляций API, таких как CameraIntrinsics и DepthCorrelatedCoordinateMapper. Они работают за счет пространственной корреляции цветовой камеры и датчика глубины Kinect на основе данных калибровки и глубины для каждого кадра. В этом образце кода показано также, как в UWP-приложениях с помощью новых API можно получать доступ к данным Kinect по отслеживанию движений фигуры через специализированный медиапоток.

Наконец, стоит заметить, что сводное обновление Xbox также поддерживает эти возможности датчика Kinect за счет Windows.Media.Capture.Frames для приложений универсальной платформы Windows. Таким образом, все приложения, которые используют инфракрасные и цветовые RGB-камеры или датчики глубины Kinect, будут выполняться на Xbox без изменения кода. Также с консолей Xbox RGB-камеру Kinect можно будет использовать как обычную веб-камеру для общения в Skype и других подобных программах.

Ready, set, buy! Посібник для початківців - як придбати Copilot для Microsoft 365