|
多模態數據融合采集分析平臺
（一）產品介紹 ▶ 多模態數據融合采集分析平臺 (PTLAB) 包含5個子系統：刺激呈現系統、數據同步系統、數據融合采集系統、數據綜合管理系統、數據分析系統。 ▶ PTLAB 刺激呈現模塊以誘發多種情緒與心理狀態為目標，并在誘發過程中實現腦電、心電、脈搏波、皮膚電、眼動軌跡、面部表情、語音等多種神經- 生理-行為數據的同步采集和事件標記。支持多種電生理信號、視音頻數據的預處理和特征提取，以構建具有先驗知識的多模態指標體系，為探索個體心理和行為的認知加工過程，以及群體人際互動過程中的影響因素、行為規律、生理機制提供一站式軟硬件平臺和實驗解決方案。
（二）核心價值 ▶ 多維度數據支撐、拓展研究思路、閉環研究方案 ▶ 中科院心理所科研轉化成果，完全自主知識產權，提供國產化、軟硬件一體化的平臺部署方案。 ▶ 由中科院心理所組織國內相關領域專家，開辦面向腦電、近紅外、外周生理信號、眼動軌跡等數據分析課程，提供不同研究方向的交流指導。
（三）刺激呈現系統 ▶ 刺激呈現系統包含不同類型的刺激素材，可播放視音頻內容以誘發特定情緒狀態。同時，系統還支持呈現典型認知任務，以研究認知加工過程。 ▶ 使用電刺激，研究刺激條件對生理數據的影響。系統還可以搭載沉浸式VR任務，用于深度誘發應激、恐懼等心理狀態。 1、視音頻情緒誘發模塊
2、認知任務模塊 3、VR任務模塊
4、電刺激模塊
（四）數據同步系統 ▶ 融合采集 支持單/多設備以有線或無線方式接入系統，實現數據同步采集。 ▶ 事件標記 支持實驗過程中手動與程序 (Python 、E-Prime、MATLAB) 自動事件標記。 ▶ 自研多模態數據采集處理單元，采用 Zynq+多通道數據采集方案，設計多模態數據同步接收模塊。FPGA 里包含完整的 ARM 處理子系統(PS), 四核 Cortex-A53 處理器或雙核 Cortex-A53 加雙核 Cortex-R5 處理器。以處理器為核心，集成內存控制器和大量外設，使處理器核在Zynq中完全獨立于可編程邏輯單元。 ▶ 重量<80g, 尺寸：9cmx7cmx2.5cm ▶ 支持電生理信號的預處理，具有視音頻流數據的解碼功能，時間同步延遲<10ms ▶ NPU算力>1T, 并可部署推理模型 ▶ 工作溫度 0℃~65℃ （五）數據融合采集系統
（六）數據綜合管理系統 ▶ 系統支持公網環境使用，也可在局域網單獨部署。支持用戶管理，不同實驗員擁有獨立賬戶，保證數據隔離。可查看所有設備信息，支持數據云存儲與下載。
（七）數據分析系統 ▶ 支持多種神經生理電信號、視音頻數據的預處理和特征提取，針對情緒和心理狀態構建具有先驗知識的多模態指標體系。
（八）應用方向
（九）服務客戶
相關產品
|
