【具身智能】具身机器人VLA算法入门及实战（一）：具身智能系统及VLA

优质文章学习记录

— 4 min read
【具身智能】具身机器人VLA算法入门及实战（一）：具身智能系统及VLA

具身机器人VLA算法入门及实战（一）：具身智能系统及VLA

一、常见具身智能系统

二、具身智能数据获取方式

在这里插入图片描述
在这里插入图片描述

数据获取平台： Isaac Sim, Isaac Gym, Mujoco, 桃园 2.0

数据增强平台： RoboVerse, Genie Studio, DexMimicGen

三、具身智能-感知系统

在这里插入图片描述

四、具身智能学习方式

在这里插入图片描述
在这里插入图片描述

五、工业机器人及应用需求

在这里插入图片描述
在这里插入图片描述


在这里插入图片描述

六、VLA架构及开源项目

6.1 VLA架构

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

6.2 开源项目

  • 智元机器人（远征A1）
    • EI-Brain框架
      • 云端超脑（任务级）+大脑（任务级+技能级）+小脑（指令级）+脑干（伺服级）
    • 由人形机器人（上海）有限公司、国家地方共建人形机器人创新中心与开放原子开源基金会（OpenAtom Foundation）共同运营的开源项目。本仓库提供了一套基于 MPC 与 WBC 的仿人机器人控制框架，可部署在 Mujoco 仿真平台上。基于国家地方共建人形机器人创新中心“青龙”机器人模型，提供行走、跳跃、盲踩障碍物三种运动示例，在实物样机上实现了机器人的行走、盲踩障碍两种运动。
    • 项目特点
      • 易部署 提供全面的代码运行环境部署解决方案，以便用户能够轻松配置其所需的工作环境，本代码仓库包含了主要依赖，无需进行众多第三方库的安装，简化整个部署过程。
      • 可扩展 控制框架结构采用分层模块化设计，旨在提高系统的可维护性和可扩展性，系统各功能模块在逻辑和功能上具有明确的界限，为二次开发提供了更加友好的环境，使开发人员能够更轻松地对系统进行功能定制和扩展。
      • 易理解 代码结构简洁，遵循针对功能进行模块封装的代码设计原则，应用总线进行模块间数据交互，减少封装冗余，有助于降低代码复杂度；算法实现采用“读取-计算-写入”的简单逻辑，提高代码的可理解性。
    • 开源地址：https://github.com/loongOpen
    • 项目详情：https://github.com/loongOpen/OpenLoong/
  • UMI（Stanford）
  • DexCap（Stanford）
    • 灵巧手+模仿学习+扩散策略

Openloong（青龙）

在这里插入图片描述

七、机器人操作案例

在这里插入图片描述
在这里插入图片描述

Read more

校园组团平台信息管理系统源码-SpringBoot后端+Vue前端+MySQL【可直接运行】

校园组团平台信息管理系统源码-SpringBoot后端+Vue前端+MySQL【可直接运行】

💡实话实说： 用最专业的技术、最实惠的价格、最真诚的态度服务大家。无论最终合作与否，咱们都是朋友，能帮的地方我绝不含糊。买卖不成仁义在，这就是我的做人原则。 摘要 随着高校学生社团活动的日益丰富，传统的线下管理模式已难以满足高效、便捷的信息传递需求。校园组团平台信息管理系统的开发旨在解决社团活动组织、成员管理、信息发布等方面的痛点，通过数字化手段提升管理效率。该系统整合了社团资源，为学生提供一站式的活动参与平台，同时为管理者提供数据支持。关键词包括校园社团、信息管理、数字化平台、SpringBoot、Vue、MySQL。 该系统采用SpringBoot作为后端框架，结合Vue前端技术，实现了前后端分离开发模式，提升了系统的可维护性和扩展性。数据库采用MySQL，确保数据存储的安全性和高效性。功能模块包括用户管理、活动发布、组团报名、消息通知等，支持多角色权限控制。系统设计注重用户体验，提供响应式界面，适配多种终端设备。关键词包括前后端分离、权限控制、响应式设计、用户管理、活动发布。 数据表 用户信息数据表 用户信息数据表中，注册时间是通过函数自动获取的，用户ID是该表的

Flutter 三方库 serial 的鸿蒙化适配指南 - 在鸿蒙系统上构建极致、稳定的 Web 串口通信与工业硬软连接实战

欢迎加入开源鸿蒙跨平台社区：https://openharmonycrossplatform.ZEEKLOG.net Flutter 三方库 serial 的鸿蒙化适配指南 - 在鸿蒙系统上构建极致、稳定的 Web 串口通信与工业硬软连接实战 在鸿蒙（OpenHarmony）系统的工业平板、手持 PDA 及桌面协同场景中，如何通过 Web 容器直接操控外部硬件设备（如扫码枪、打印机、传感器）？serial 做为一个优秀的 window.navigator.serial API 的 Flutter 封装库，为鸿蒙开发者提供了跨平台的硬件底座。本文将深入探讨其在鸿蒙生态中的适配要点。 前言 什么是 Web Serial？它允许鸿蒙应用内的 Web 组件直接请求访问用户的串行设备。在 Flutter for OpenHarmony 的实际开发中，serial
凌晨GLM-5炸场！世界开源模型第一名！模型训练大幅创新！实测：Agentic能力、前端细节逼近专业人士，可模拟手机OS，游戏秒运行！代际变化

凌晨GLM-5炸场！世界开源模型第一名！模型训练大幅创新！实测：Agentic能力、前端细节逼近专业人士，可模拟手机OS，游戏秒运行！代际变化

大模型叙事逻辑已经出现了极为明显的变化。过去三年，大家更会关注：谁更会回答问题，谁回答得更聪明、准确、快速？但随着一系列Agent产品的涌现，大模型也开始向真实世界的复杂任务发起冲锋。现在的问题变成：谁能真正承担任务？ GLM-5 终于来了！ 2月12日凌晨，智谱正式发布了GLM-5。 早上，小编就围绕它展开了测评。先说一句话感受，可以说非常跟上一代GLM-4.7，比起来，代际变化非常大。 一句话感受，是一场非常激进的扩张。 模型训练大幅创新 先来看模型和参数，参数规模从 355B（32B 激活）跃升到 744B（40B 激活），预训练数据从 23T tokens 增加到 28.5T tokens，同时引入 DeepSeek Sparse Attention，在维持长上下文能力的同时压缩部署成本。 这样，虽然整体模型大了一倍、但部署成本没有增加多少，同时，
【web补环境篇-0】document.all

【web补环境篇-0】document.all

开新坑，之前的魔改node大概是有思路了，但是还需要结合实际来不断进行优化。就先拿document.all 试一下水。之前的思路是魔改node。但是在重新整理的过程中，由于编译耗时较久，选择了这个node addon的方式先实现一套轻量版的，等完善后再去移植到node原生进行完整node。通过addon ，可以在任何环境中直接导入 const addon = require(‘./addon’) 即可使用。 这个./addon是编译好的 addon.node扩展。 为什么 document.all 这么难模拟？ document.all 是 IE4 时代的遗留产物。为了兼容旧网页，现代浏览器（Chrome/Firefox）保留了它，但为了不鼓励开发者使用，W3C 和浏览器厂商搞了一个非常反直觉的设计：“Undetectable”特性。 在 Chrome 控制台里试一下就知道有多诡异： // 既存在，又不存在typeof document.all ==='