春节寒假作业辅导:基于 Rokid 灵珠平台打造 AI Glasses 作业助手

春节寒假作业辅导:基于 Rokid 灵珠平台打造 AI Glasses 作业助手

本文应用基于Rokid灵珠智能体/CXR SDK开发,开发指南https://forum.rokid.com/index

文章目录

一、引言:为什么我们需要一个 AI Glasses 作业助手?

春节假期本是阖家团圆的日子,但对于很多家长来说,“辅导寒假作业”往往是打破祥和气氛的导火索。面对孩子“这题怎么做”的灵魂拷问,家长们常常面临两个痛点:

  1. 知识遗忘:当年的学霸面对现在的奥数题也可能束手无策。
  2. 情绪失控:反复讲解听不懂,容易血压飙升。

传统的搜题 App 需要掏出手机、拍照、上传,不仅打断孩子思路,还容易让孩子分心玩手机。而 Rokid Glasses 的第一视角采集与实时语音交互特性,天然适合作为“随身家教”——看着题就能问,边看边讲解

本文将详细介绍如何利用 Rokid 灵珠 AI 平台 的零代码/低代码能力,快速搭建一个具备 “识题讲解、知识点回顾、错题整理”AI Glasses 应用(形态为:智能体 + 工作流,可在眼镜端使用)。

image.png

二、方案设计与架构

2.1 核心功能定义

我们希望打造一个名为 “作业救星 (Homework Savior)” 的智能体,它具备以下能力:

  • 👁️ 视觉识别:通过眼镜摄像头捕捉作业题目(支持手写体/印刷体)。
  • 🧠 深度推理:不直接给出答案,而是分析题目考察的知识点,提供分步解题思路。
  • 📚 知识挂载:针对特定学科(如初中几何、物理公式),挂载专属知识库以提高准确率。
  • 🗣️ 情感交互:以“温柔耐心的学霸哥哥/姐姐”口吻进行语音讲解,安抚孩子情绪。

2.2 端到端架构(AI Glasses)

请求

触发

卡片+语音

Rokid Glasses
语音+第一视角

灵珠智能体

工作流

多模态理解
OCR/题干提取

知识库检索
公式/定理/例题

推理生成
引导式讲解

2.3 业务流程架构

利用 Mermaid 绘制的业务流程图如下:

多模态大模型知识库 (Knowledge Base)工作流 (Workflow)灵珠 AI 平台 (Agent)用户 (Rokid Glasses)多模态大模型知识库 (Knowledge Base)工作流 (Workflow)灵珠 AI 平台 (Agent)用户 (Rokid Glasses)阶段一:视觉理解与意图识别阶段二:知识检索与推理语音指令:"这道几何题怎么做?" + 拍摄题目图片触发主工作流 (Input: Query + Image)调用视觉模型 (OCR + 题目提取)返回题目文本 & 关键几何条件检索相关公式/定理 (如"勾股定理")返回Top3相关知识片段Prompt: 结合题目+知识点,生成分步讲解思路返回结构化的讲解文本 (非直接答案)输出最终讲解内容语音播放讲解 + 屏幕显示关键公式


三、开发实战:手把手搭建“作业救星”

3.1 准备工作

  1. 准备 3 份测试题目(建议各 1 份:几何、方程、应用题),用于验证不同题型表现。
  2. 准备一份“初中数学公式/定理”材料(PDF/Markdown/网页内容均可),用于构建知识库。
  3. 确保眼镜与手机已完成基础配对/联网,并能在眼镜端打开灵珠平台相关入口。

登录 Rokid 灵珠 AI 平台:https://rizon.rokid.com/

image.png

3.2 步骤一:创建知识库(资源准备)

  1. 上传/粘贴内容并切分为适合检索的片段(建议按“定理名 + 公式 + 适用条件 + 例题提示”组织)
  2. 进行一次检索自测:输入“勾股定理”“相似三角形判定”等关键词,确认能命中对应片段。

进入左侧导航的 “资源” -> “知识库”,创建知识库:初中数学公式与定理

image.png

3.3 步骤二:创建智能体(Agent)

  1. 基本信息配置
    • 名称:作业救星
    • 简介:你的寒假作业辅导老师,只讲思路不给直接答案

人设与回复逻辑(Prompt):在对应区域输入提示词:

# Role 你是一位耐心、幽默且知识渊博的清华学霸家教。你的目标是辅导初中生完成寒假作业。 # Constraints 1. 🚫 **严禁直接给出最终答案**(如“选A”或“等于5”)。 2. ✅ 必须采用**引导式教学**:先分析题目考点,再提供第一步思路,引导学生思考下一步。 3. 🗣️ 语言风格:轻松活泼,多用鼓励性话语(如“这点很棒!”“别急,我们慢慢来”)。 4. 📐 如果涉及数学公式,请用 LaTeX 格式输出,方便眼镜端渲染(或转为自然语言描述)。 # Skills 1. 擅长识别手写体题目。 2. 能将复杂的物理/数学概念用生活中的例子类比。 

在灵珠平台首页点击 “创建智能体”

image.png

3.4 步骤三:搭建核心工作流(Workflow)

为了处理复杂的“识图+检索+推理”逻辑,我们需要使用工作流而非简单的单轮对话。

进入 “开发工作流” -> “创建工作流”

image.png

3.4.1 变量与节点命名

灵珠平台的工作流画布里,开始节点默认会提供两类输入:

  • USER_INPUT:文本输入(用户的提问/指令)
  • USER_INPUT_IMAGE:图片输入(用户当前视角拍摄的题目图)

结束节点通常输出:

  • 题干提取:负责 OCR/题面结构化
  • 知识库检索:负责从知识库召回相关定理/公式

output:工作流最终输出(返回给智能体/眼镜端展示与播报)


为了让提示词里引用变量更直观,建议把两个关键节点命名为:

  1. 节点编排(示例)
  • 开始节点(默认输入)
    • USER_INPUT(用户问题)
    • USER_INPUT_IMAGE(题目图片)
  • 题干提取(大模型/多模态)
    • 输入:USER_INPUT_IMAGE
    • Prompt:请提取图片中的题目文字;若含几何图,请用要点描述图形关系与已知条件。
  • 知识库检索
    • Query:使用 题干提取 的输出(题目文本)
    • 配置:选择我们提前创建的 初中数学公式与定理 知识库
    • Top K:设置为 3(可按效果调到 5)
  • 大模型推理节点 (LLM Generation)
    • 模型选择:选择推理能力强的模型
  • 结束节点
    • 输出变量:将大模型推理节点输出映射到 output

System Prompt:

你收到了一个学生的提问和一道题目。 题目内容:{{题干提取.output}} 参考知识点:{{知识库检索.output}} 用户问题:{{USER_INPUT}} 请结合参考知识点,为学生讲解这道题,采用引导式教学,不要给出最终答案或最终数值结果。 如果识别到的题干不完整/关键信息缺失: 先用一句话复述你识别到的题干,并告诉用户需要补充拍清楚哪些信息,然后停止输出讲解。 否则请严格按以下结构输出(每段控制简短,方便眼镜端显示与语音播报): 【考点】一句话概括 【第一步】先做什么(给出一个可执行的小步骤) 【下一步提示】给一个追问或提示,推动学生继续 【自检问题】给 1 个让学生自检的简单问题 
32732d6383efd49d3fb5fa2515c71601.jpg

3.4.2 输出格式(便于 AI Glasses 展示)

为了保证“眼镜端一眼能看懂、语音也不啰嗦”,建议把工作流最终输出固定为四段结构

【考点】相似三角形判定与比例关系 【第一步】先在图中找出两组对应角(或平行线形成的内错角),判断能否构成相似 【下一步提示】如果能判定相似,对应边成比例,这一步你准备写出哪两条边的比例? 【自检问题】你能说出“相似”的两个三角形分别是哪两个吗? 

3.4.3 验收用例

下面这张表是我自己用于“发布前验收”的最小集合。

用例题目类型画面条件用户问题示例期望输出(检查点)
TC-01几何(有图)光线正常这题第一步怎么看?能说出考点;不报答案;给出可执行第一步
TC-02方程(印刷体)光线正常帮我分析思路结构化四段;第一步是列式/移项等
TC-03应用题(文字多)题干完整先帮我提取已知条件能复述条件;提示设未知数;不直接算结果
TC-04手写体字迹清晰我卡在第二步了能追问缺失信息;或给下一步提示推动思考
TC-05模糊/反光题干缺失你看得清吗?先复述识别到的内容;要求重拍;停止讲解
TC-06“诱导要答案”题干完整直接告诉我答案仍不报答案;改为给思路与自检问题
  1. 调试工作流
    • 点击“试运行”
    • 上传一张勾股定理的题目图片
    • 输入问题:“这道题怎么求斜边?”
    • 观察输出是否包含“根据勾股定理 (a2+b2=c^2)”等引导性内容

3.5 步骤四:发布并在眼镜端体验(AI Glasses 闭环)

  1. 回到智能体配置页,在 “能力配置” -> “工作流” 中绑定刚才发布的“作业辅导工作流”。
  2. 点击 “发布”,将权限设置为自己可用
  3. 眼镜端体验流程
    • 佩戴 Rokid Glasses,打开灵珠相关入口并唤起“作业救星”
    • 注视作业题目,语音说:这道题我不会做,先告诉我第一步怎么想
    • 等待结果在眼镜端输出:优先展示“考点 + 第一步 + 关键公式”,并语音讲解

四、总结

通过 Rokid 灵珠平台,我们用“智能体 + 工作流 + 知识库”的方式,快速搭建出一个具备 多模态理解引导式讲解 能力的 AI Glasses 应用。它既能缓解春节期间的家庭作业辅导压力,也能展示“AI 在穿戴设备上落地”的价值:更自然的语音交互、更顺畅的所见即问、以及更专注的学习体验。

下一步计划
尝试接入 Agent 记忆能力,让它能记住孩子容易做错的题型,下次遇到类似题目时主动提醒:“这道题和你上次做错的那道很像哦,要注意陷阱!”

Read more

利用百川2-13B构建AIGC内容安全审核Agent实战

利用百川2-13B构建AIGC内容安全审核Agent实战 最近跟几个做内容社区和社交产品的朋友聊天,他们都在头疼同一个问题:用户生成的内容(UGC)越来越多,尤其是现在AIGC工具普及了,用户一天能生产出海量的帖子、评论、脚本,人工审核根本看不过来。更麻烦的是,里面可能夹杂着一些不合规的内容,轻则影响社区氛围,重则可能引发风险。 传统的审核规则库更新慢,面对层出不穷的新梗、黑话常常失灵。纯人工审核呢,成本高、效率低,还容易因为疲劳导致误判。有没有一种更“聪明”的办法?我们尝试用百川2-13B大模型,搭建了一个智能的内容安全审核Agent。它不只是一个简单的“是/否”过滤器,更像一个懂规则、能推理的“审核专员”,不仅能识别风险,还能给出修改建议。今天,我就把这个从架构设计到部署上线的实战过程,跟大家分享一下。 1. 为什么需要“智能”审核Agent? 先说说我们面临的几个核心痛点,可能也是很多平台正在经历的。 第一,审核维度复杂且动态变化。 内容安全不只是屏蔽几个敏感词那么简单。它涉及多个维度:政治敏感、

Leather Dress Collection从零开始:Stable Diffusion 1.5环境+LoRA镜像完整部署

Leather Dress Collection从零开始:Stable Diffusion 1.5环境+LoRA镜像完整部署 想用AI画出酷炫的皮衣皮裙,但被复杂的模型安装和配置劝退?今天,我就带你从零开始,手把手搞定一个专门生成皮革服装的AI工具——Leather Dress Collection。这是一个打包好的Stable Diffusion镜像,内置了12个不同风格的皮革服装LoRA模型,让你不用折腾环境,10分钟就能开始创作。 1. 项目介绍:这个镜像能帮你做什么? 简单来说,Leather Dress Collection就是一个“开箱即用”的AI绘画工具箱。它基于强大的Stable Diffusion 1.5模型,并集成了12个由Stable Yogi精心训练的LoRA模型。这些模型专门针对各种皮革服装风格进行了优化。 它能帮你解决什么问题? * 设计师找灵感:快速生成不同款式的皮革服装概念图。 * 电商卖家做素材:为皮衣、皮裙等商品生成吸引眼球的展示图。 * 内容创作者玩创意:为小说、游戏角色设计独特的皮革风格装扮。 * 新手学习AI绘画:免去复杂的

copilot学生认证2026-github copilot学生认证(手把手教会)

copilot学生认证2026-github copilot学生认证(手把手教会)

1.前言 博主在24年的时候发过一篇copilot认证成功的帖子,当时也是领到了一年的pro 文章链接:github copilot学生认证(手把手一小时成功)-ZEEKLOG博客 如今26年了,copilot的申请增加了一年的时间,博主也进入了研究生生涯,前段时间也是再次进行了申请,现在已经用上了,Pro 版直接解锁无限制基础功能 + 海量高级模型,我的感受是:真香!:   既然官方的申请有变化,咱们教程也得与时俱进,下面就开始手把手教大家如何进行申请copilot学生会员。 2.完善 GitHub 账号基础配置 在Emails里面加入你对应学校的教育邮箱(以edu.cn结尾),打开教育邮箱点击GitHub发送的验证邮件链接,即可完成邮箱认证 3.Github学生认证 完成上述步骤后,打开学生认证申请链接,依旧还是在设置里面,这里也可以用手机操作,因为上传证明材料用手机拍照更方便: 选择身份为学生,下滑填写学校信息,输入学校的英文,最后选择自己的学校教育邮箱,点击continue(还得分享位置) 接下来就是上传证明材料: * 可以使用手机摄像头拍摄,证件

别再搞混了!Copilot Chat 和 Microsoft 365 Copilot 详细对比

虽然名字听起来相似 —— Microsoft 365 Copilot 和 Microsoft 365 Copilot Chat —— 但它们在多个方面存在重要区别。更关键的是,它们是相辅相成、缺一不可的。 📌 什么是 Microsoft 365 Copilot Chat? Microsoft 365 Copilot Chat(简称 Copilot Chat),主要基于网页内容生成回答。 而 Microsoft 365 Copilot 则不仅基于网页内容,还结合了用户自身的数据(如邮件、会议、文件等)。 自 2025年1月15日 起,Copilot Chat 已对所有组织全面开放。 即使是订阅了 Microsoft 365 Business Basic 的客户,也能安全地使用 Copilot Chat。