01 / 模态图谱
七类模态,共享同一条时间轴
数据资产按模态组织,也在同一时基上交叉。选择模态可快速定位对应数据集,或进入目录查看全部条目。
语音9 个
语音与副语言
朗读、访谈与自然对话,附音素级对齐、韵律与副语言标注。
筛选此类视频6 个
视频与视觉行为
口型、表情与真实场景画面,与音频逐帧同步并可做行为编码。
筛选此类文本8 个
文本与标注语料
逐字转写、标注文本与实验刺激材料,带词边界与句法信息。
筛选此类眼动1 个
眼动与视觉注意
注视、眼跳与瞳孔数据,还原阅读与视觉注意的时间过程。
筛选此类生理信号2 个
生理与神经信号
脑电、皮电、心率与呼吸,与刺激事件保持毫秒级对齐。
筛选此类动作捕捉1 个
动作与姿态
教师、交互场景中的手势、体态与关节轨迹捕捉数据。
筛选此类多模态融合2 个
多模态融合
多通道融合交付与跨模态对齐,用于融合建模与系统评测。
筛选此类计数按当前收录的数据集统计;多模态数据集会同时计入多个模态。
02 / 数据目录
九个数据集,可按研究问题组合
每个数据集都可单独授权,也可按场景、说话人与标注层级组合成定制子集。使用筛选按模态缩小范围。
显示 9 个数据集
没有匹配该模态的数据集,可切换其他模态或查看全部条目。
03 / 验证流程
每一份数据都通过五道验证
验证不是交付前的一次抽检,而是贯穿采集、处理、标注与交付的连续流程。每个批次都保留可追溯的记录。
- 01SYNC
同步验证
用统一时基测量音频、视频、眼动、生理与动作信号之间的时间偏差,中位数 1.4 ms 以内才进入下一环节。
- 02CONTENT
内容核验
按批次抽检转写、标注与元数据,核对字段完整性、说话人匹配与语义一致性。
- 03KAPPA
一致性评估
关键标注层执行双盲复核并计算 κ;低于阈值时重新培训标注员并重标相关批次。
- 04AUDIT
可复现审计
记录设备、参数、脚本与版本,任何人可以依据审计清单复现报告中的指标。
- 05ETHICS
伦理与授权
知情同意、去标识化与授权链条逐项留档,按研究或商业场景分级开放。