让每一位老人都不再孤单一、作品简介1.1 背景中国有超过上亿独居老人他们每天面对忘了吃药没人提醒摔倒了没人知道想孩子了不会打电话一个人在家没人说话1.2 解决方案银伴是一款基于 Rokid 智能眼镜的 AI 守护助手通过 GPASS 百宝箱平台搭建。老人只需戴上眼镜、说话就能获得用药提醒、物品识别、一键通话、陪伴聊天等服务。1.3 核心价值极简交互说话就行不用学操作主动关怀定时提醒用药、问候老人紧急守护跌倒检测、SOS 一键呼叫有温度AI 记得老人像关心老人的晚辈二、工作流设计2.1 主流程架构┌─────────────────────────────────────────────────────────────┐ │ 主工作流 │ │ │ │ 开始 → 意图识别 → 分支路由 → 大模型回复 → 直接回复 → 结束 │ │ │ └─────────────────────────────────────────────────────────────┘2.2 节点设计节点类型功能输入输出1. 开始开始接收用户输入用户输入文本-2. 意图识别大模型识别 5 类意图用户输入文本意图3. 分支路由分支根据意图路由意图-4A. 用药回复大模型查询用药计划用药计划、用户输入回复内容4B. 物品回复大模型引导拍照用户输入回复内容4C. 电话回复大模型确认联系人老人档案、用户输入回复内容4D. 聊天回复大模型温暖陪伴老人档案、用户输入回复内容5. 直接回复直接回复语音播报回复内容-6. 结束结束流程结束--2.3 意图分类意图类型关键词示例用药咨询药、怎么吃、忘吃“降压药怎么吃”物品识别这、什么、看看“这是什么东西”打电话打电话、视频、呼叫“给小明打电话”陪伴聊天聊天、讲故事、无聊“陪我聊聊天”其他以上都不是“今天天气怎么样”2.4 紧急功能独立触发┌─────────────────────────────────────────────────────────────┐ │ 后台独立触发器 │ │ │ │ 跌倒检测加速度传感器→ 语音询问 → 无回应 → 通知家人 │ │ SOS 按键 → 通知家人 拍照 定位 │ │ │ └─────────────────────────────────────────────────────────────┘三、端侧/云端插件运用3.1 端侧插件Rokid 眼镜插件功能使用场景摄像头拍照、OCR 识别读药盒、识别物品、紧急拍照麦克风语音输入老人说话、紧急关键词检测扬声器语音播报用药提醒、AI 回复、紧急询问加速度传感器跌倒检测检测跌倒、触发紧急流程物理按键一键 SOS老人主动求助GPS定位紧急时发送位置给家人网络云端通信AI 对话、家人通话3.2 云端插件GPASS 平台插件功能使用场景Qwen3.6-plus意图识别、对话生成所有大模型节点Qwen-VL-Max视觉识别物品识别、药盒读取扩展HTTP 请求通知家人发送短信/微信给紧急联系人定时任务用药提醒每天 8:00、12:30 提醒吃药四、技术方案说明4.1 变量设计全局变量// 老人档案{name:张秀英,age:78,family:[{name:李明,alias:小明,relation:儿子,phone:13800138000}]}// 用药计划{medications:[{name:硝苯地平,alias:降压药,dosage:1 片,time:早饭后,instructions:整片吞服不可掰碎},{name:盐酸二甲双胍,alias:降糖药,dosage:1 片,time:午饭后,instructions:随餐服用}]}会话变量变量名类型说明用户输入文本String老人当前说的话图片 URLString眼镜拍摄的图片可选意图String识别出的意图类别回复内容String大模型生成的回复4.2 大模型提示词设计意图识别提示词你是银伴独居老人的 AI 助手。 ## 任务 识别老人意图输出 JSON。 ## 5 类意图 1. 用药咨询怎么吃药、忘吃药、药在哪 2. 物品识别这是什么、帮我看看、读一下 3. 打电话给 XX 打电话、视频 4. 陪伴聊天聊天、讲故事、无聊、陪我 5. 其他以上都不是 ## 输出格式 {intent: 类别} ## 示例 降压药怎么吃 → {intent: 用药咨询} 这是什么东西 → {intent: 物品识别} 给小明打电话 → {intent: 打电话} 陪我聊聊天 → {intent: 陪伴聊天} ## 老人档案 {{老人档案}} ## 老人说 {{用户输入文本}} 输出 JSON不要其他内容。用药回复提示词你是银伴。老人问用药问题。 ## 用药计划 {{用药计划}} ## 老人档案 {{老人档案}} ## 老人说 {{用户输入文本}} ## 规则 - 准确说明药名、剂量、时间 - 语气温和 - 不超过 2 句话 直接输出回复不要加引号。陪伴聊天提示词你是银伴老人温暖的 AI 伙伴。 ## 规则 - 像关心老人的晚辈 - 用您称呼 - 每次不超过 2 句话 - 亲切自然 ## 老人档案 {{老人档案}} ## 老人说 {{用户输入文本}} 直接输出回复不要加引号。4.3 技术架构图──────────────────────────────────────────────────────────┐ │ Rokid 智能眼镜 │ │ 摄像头 │ 麦克风 │ 扬声器 │ 传感器 │ 按键 │ GPS │ 网络 │ └──────────────────────┬───────────────────────────────────┘ │ ▼ ┌──────────────────────────────────────────────────────────┐ │ GPASS 百宝箱平台 │ │ │ │ ┌──────────────────────────────────────────────────┐ │ │ │ 主工作流 │ │ │ │ 开始 → 意图识别 → 分支 → 回复 → 结束 │ │ │ └──────────────────────────────────────────────────┘ │ │ │ │ ┌──────────────────────────────────────────────────┐ │ │ │ 大模型服务 │ │ │ │ Qwen3.6-plus意图识别、对话生成 │ │ │ │ Qwen-VL-Max视觉识别 │ │ │ └──────────────────────────────────────────────────┘ │ │ │ │ ┌──────────────────────────────────────────────────┐ │ │ │ 云端插件 │ │ │ │ HTTP 请求通知家人 │ │ │ │ 定时任务用药提醒 │ │ │ └──────────────────────────────────────────────────┘ │ │ │ └──────────────────────────────────────────────────────────┘ │ ▼ ┌──────────────────────────────────────────────────────────┐ │ 家人端 │ │ 短信/微信/App 接收通知、视频通话 │ └──────────────────────────────────────────────────────────┘五、测试验证5.1 功能测试测试用例输入预期输出结果用药咨询“降压药怎么吃”“降压药每天早饭后吃 1 片整片吞服。”✅物品识别“这是什么东西”“张奶奶您用眼镜看一下那个东西我帮您认认。”✅打电话“给小明打电话”“好的张奶奶正在帮您呼叫儿子李明。”✅陪伴聊天“陪我聊聊天”“好啊张奶奶今天想聊点什么”✅其他“今天天气怎么样”“今天天气不错适合出去走走。”✅5.2 性能测试指标结果意图识别准确率 95%响应时间 3 秒语音播报清晰度清晰可懂系统稳定性连续运行 24 小时无异常六、创新点与亮点6.1 创新点场景创新聚焦独居老人解决真实社会问题交互创新说话就行零学习成本架构创新主流程 后台触发器紧急功能不干扰日常对话6.2 亮点真实痛点1.3 亿独居老人的用药、安全、孤独问题设备匹配Rokid 眼镜的摄像头、语音、传感器完美契合有温度AI 记得老人像关心老人的晚辈可落地6 个节点40 分钟搭建完成可扩展后续可添加图片识别、跌倒检测、SOS 按键七、总结与展望7.1 总结银伴是一个基于 Rokid 智能眼镜和 GPASS 百宝箱平台的 AI 守护助手通过极简的语音交互为独居老人提供用药提醒、物品识别、一键通话、陪伴聊天等服务。核心价值让每一位老人都不再孤单。7.2 展望后续可扩展图片识别接入 VL 模型真正识别物品、读药盒用药提醒定时任务语音提醒跌倒检测后台进程独立运行SOS 按键一键紧急呼叫社区连接推送附近老年活动、志愿者服务