mosaic

MOSAIC 是一款专为研究环境设计的专业录制套件，主要基于 Basler GigE 摄像头构建。它提供视频和音频的同步采集，具有帧级精确的跨摄像头同步功能，并能与外部触发源（如串口和并口，例如用于 EEG 放大器同步）集成。 核心功能包括： - 硬件集成：支持 Basler Pylon SDK、多麦克风音频录制以及硬件触发输入。 - 实时分析：由 MediaPipe 驱动的实时姿态和视线预览。 - 事后分析：使用 YOLOv8-pose、质心跟踪和热力图进行批量姿态和运动分析。 - 校准与管理：棋盘格摄像头校准以及独立的用户/实验室小组登录配置文件。 - 回放：具有同步多摄像头回放功能的会话浏览器。 该系统采用 C++23 和 Qt 6.4+ 构建，利用 FFmpeg 进行编码，利用 OpenCV 进行校准。它采用了模块化架构，具有用于硬件支持的可选功能标志，并为实时分析和批量分析配置了独立的 Python 环境。