CollegeHistory—基于多模态与 Agent 的交互式智能文化馆系统
0 粉丝
本系统深度集成可见光摄像头、麦克风阵列、人脸识别、RFID 等多模态感知终端,通过“云-边-端”微服务架构对视频、音频、文本、时空位置等多网异构数据进行统一汇聚与对齐;内嵌面向文化场景微调的多模态大模型(DeepSeek-VL-7B-Chat + Paraformer-large),在嘈杂展厅、夜间闭馆、远程访问等复杂条件下实现对参观者身份、意图及展品语义的细粒度理解,并提供个性化讲解、多语言问答、情感化回应与无障碍交互。核心功能包括:实时人脸识别迎宾与个性化导览;基于 Agent 的多轮语音/文本问答与深度追问;展品知识图谱动态更新与多版本讲解脚本自动生成;线上虚拟文化馆小程序远程导览与课堂研学支持;后台数据看板与运营分析报告一键生成。