首页/新闻资讯/正文详情

无需人工标注!智谱AndroidGen-GLM-4-9B重构安卓智能交互

发布时间:2026/11/3 1:36:15 来源:云帆数科 栏目:资讯中心
无需人工标注!智谱AndroidGen-GLM-4-9B重构安卓智能交互
无需人工标注智谱AndroidGen-GLM-4-9B重构安卓智能交互导语智谱AI最新开源的AndroidGen-GLM-4-9B模型首次实现大语言模型LLM在安卓系统全场景的自主任务执行无需人工标注交互数据即可操控消息、时钟、邮件等应用为移动智能体开发突破数据稀缺瓶颈提供新路径。行业现状移动AI的数据困境当前移动智能体Agent开发面临三大挑战场景多样性要求模型具备跨应用泛化能力复杂任务需多步骤精准规划数据过滤与标注成本占开发总成本的60%以上。传统方法依赖人工标注的交互轨迹数据在面对安卓系统中200常用应用、10万可能操作组合时数据采集效率与标注质量成为难以逾越的瓶颈。如上图所示该对比图展示了AndroidGen系列模型与M3A、SeeAct等现有方案在任务成功率上的对比其中AndroidGenGPT-4o组合平均得分达46.8显著领先于其他方案接近80%的人类水平基准。这一数据充分体现了AndroidGen框架在解决数据稀缺问题上的技术优势为移动智能体开发提供了新的可能性。核心突破四大模块解决数据稀缺难题AndroidGen框架通过创新的技术架构实现了无需人工标注的智能体训练。其核心在于四个协同模块ExpSearch经验搜索检索已完成的类似轨迹辅助上下文学习提升简单任务与复杂任务间的泛化能力。该模块通过Contriever模型对指令进行编码计算与数据库中嵌入向量的相似度分数选择最相似的轨迹作为学习示例。ReflectPlan反思规划使代理能够自我评估任务执行的进度并根据环境更新计划的状态从而增强代理的长期推理能力。分为计划初始化和计划反思两个阶段能在遇到失败状态或进入循环时修改和创建新计划。AutoCheck自动检查主动验证代理的每一个操作的有效性降低因操作错误而导致任务失败的风险。检查内容包括元素ID是否存在、类型是否符合要求以及滚动是否完成等。StepCritic步骤评估将任务分解为多个子目标并提供逐步的轨迹评估为模型优化提供细粒度的标签。基于GPT-4o构建能分解任务为各种子目标并逐个步骤地评估轨迹提高在有限上下文长度约束下轨迹的信息密度。技术原理从数据生成到模型微调的全流程革新AndroidGen建立了高效的数据收集与模型训练 pipeline任务制定基于GPT-4o从AndroidWorld生成约300条任务指令确保在训练期间不使用奖励信号或黄金标签以防止数据泄露。代理采样结合AndroidWorld环境和GPT-4o对每个任务轨迹进行采样。轨迹记录精确记录每一步的环境状态和操作信息构建可复现的导航轨迹。轨迹评估通过StepCritic模块评估轨迹质量确保子目标完成度。轨迹增强扩充高质量数据集最终形成包含1000轨迹的训练数据。模型训练阶段采用LoRA技术对GLM-4-9B等基础模型进行微调将规划与执行步骤结合训练使模型同时具备任务规划与操作执行能力。这种端到端的训练方式避免了传统方法中规划与执行脱节的问题。应用场景重新定义移动智能交互体验AndroidGen-GLM-4-9B展现出广泛的应用潜力主要包括三大场景自动化任务处理通过自然语言指令完成发送邮件、设置提醒、查询信息等日常操作。例如用户只需说明天早上8点提醒我开会模型就能自动打开时钟应用并设置闹钟。跨应用操作实现不同应用间的数据流转与协同如从日历导出明天的会议安排到Excel并发送给团队。这需要模型能够理解多个应用的界面结构和数据格式并完成复杂的跨应用数据处理。智能导航根据用户指令在安卓系统中完成复杂导航如打开微信找到老板的最新消息并设置为未读。模型需要理解应用内的层级结构和操作逻辑完成多步骤的精确导航。这些场景覆盖了个人助理、企业效率工具、无障碍辅助等多个领域为移动智能交互开辟了新可能。行业影响开启移动AI开发新范式AndroidGen的开源发布将对移动智能体开发产生深远影响降低开发门槛无需专业标注团队即可构建高质量安卓智能体使中小开发者也能参与创新。开发者可通过以下命令获取模型并开始实验git clone https://gitcode.com/hf_mirrors/THUDM/androidgen-glm-4-9b cd androidgen-glm-4-9b # 按照README文档配置环境和依赖提升任务成功率在AitWAndroid in the Wild真实设备评测中跨应用任务成功率提升40%显著优于现有方案。推动生态发展为智能家居控制、车载系统交互、工业平板操作等场景提供可迁移的技术方案。模型支持在消费级GPU如RTX 4090上进行推理通过量化技术可进一步降低硬件门槛适合研究与原型开发。未来展望AndroidGen框架的出现标志着移动智能体开发进入数据稀缺时代的新阶段。随着模型迭代与应用场景拓展我们或将见证智能助手从被动响应转向主动服务的进化、企业级移动自动化解决方案成本降低70%以上、特殊人群辅助技术的突破性进展如为视障用户提供全流程手机操作辅助。这一技术路径不仅解决了当前的开发痛点更为未来万物互联时代的智能交互奠定了基础。AndroidGen-GLM-4-9B的开源无疑将加速移动AI应用的创新与落地推动整个行业向更智能、更高效的方向发展。创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

相关推荐

Mac上跑exe不用虚拟机:Whisky从拖进去到窗口弹出的最短路径
Mac上跑exe不用虚拟机:Whisky从拖进去到窗口弹出的最短路径

Mac上跑exe不用虚拟机:Whisky从拖进去到窗口弹出的最短路径 【免费下载链接】Whisky A modern Wine wrapper for macOS built with SwiftUI 项目地址: https://gitcode.com/gh_mirrors/wh/Whisky 昨晚十一点,你盯着一个只认Windows的行业软件&… · 2026/11/3 1:36:15

StepFun/Step-3.7-Flash-NVFP4震撼发布:1980亿参数稀疏MoE模型如何重塑多模态AI格局?
StepFun/Step-3.7-Flash-NVFP4震撼发布:1980亿参数稀疏MoE模型如何重塑多模态AI格局?

StepFun/Step-3.7-Flash-NVFP4震撼发布:1980亿参数稀疏MoE模型如何重塑多模态AI格局? 🎉 在人工智能快速发展的今天,阶跃星辰(StepFun)正式发布了革命性的Step 3.7 Flash-NVFP4模型!这个拥有19… · 2026/11/3 1:35:15

vLLM vs SGLang:Step-3.7-Flash-NVFP4推理引擎性能对比与选型指南
vLLM vs SGLang:Step-3.7-Flash-NVFP4推理引擎性能对比与选型指南

vLLM vs SGLang:Step-3.7-Flash-NVFP4推理引擎性能对比与选型指南 Step-3.7-Flash-NVFP4作为阶跃星辰StepFun推出的高效AI模型,支持多种主流推理引擎,其中vLLM和SGLang凭借出色的性能表现成为开发者的热门选择。本文将深入对比这两款推理引擎… · 2026/11/3 1:35:15

NineData实现MySQL到openGauss PostgreSQL数据复制
NineData实现MySQL到openGauss PostgreSQL数据复制

1. 项目概述:NineData新增MySQL到openGauss PostgreSQL兼容版数据复制链路最近NineData平台上线了一个让数据库管理员们眼前一亮的新功能——支持MySQL到openGauss PostgreSQL兼容版的数据复制链路。这个功能解决了不少企业级用户在实际业务中遇到的数据库迁移难题。… · 2026/11/3 4:33:49

医院医疗设备管理系统微信小程序开发实践
医院医疗设备管理系统微信小程序开发实践

1. 项目概述这个医院医疗设备管理系统微信小程序毕设项目,是我去年指导计算机专业学生完成的典型毕业设计案例。整套系统包含完整的前后端代码、数据库设计文档和技术说明文档,实现了医疗设备的全生命周期管理。从实际运行效果来看,系统日均能… · 2026/11/3 4:33:49

代码注入与Hook技术:原理、实现与应用解析
代码注入与Hook技术:原理、实现与应用解析

1. 代码注入与Hook技术核心概念解析在软件开发和安全研究领域,代码注入和Hook技术就像外科医生的手术刀——用得好可以治病救人,用不好则会造成严重伤害。这两种技术本质上都是通过干预程序正常执行流程来实现特定功能,但它们的实现原理和应用… · 2026/11/3 4:33:49

蒙特卡洛模拟从原理到实战:工期、库存与风险估算
蒙特卡洛模拟从原理到实战:工期、库存与风险估算

上周某位做项目管理的朋友问了我一个问题:手上这个研发项目,合同里写死了六个月交付,可每个环节的工期都是估出来的,有的乐观有的悲观,最后按期完成的概率到底有多大?他手上有一张 Excel 表,每个… · 2026/11/3 4:33:49

8cm等于多少像素?厘清PPI、CSS像素与印刷分辨率的换算逻辑
8cm等于多少像素?厘清PPI、CSS像素与印刷分辨率的换算逻辑

做设计、写前端、跑印刷的人,几乎都被同一个问题绊过一下:8cm等于多少像素。这个问题看着像小学算术,实际上一句话根本答不完。我在带新人的时候,最常听到的两句抱怨,一句是"我按8cm做的图,打印出来矮… · 2026/11/3 4:33:49

V2X技术实现卡车自动编队行驶:原理与应用
V2X技术实现卡车自动编队行驶:原理与应用

1. 项目概述:当卡车在高速上自动排成"火车"去年夏天,我在G15沈海高速上看到一列特殊的"货运火车"——五辆重型卡车以不到10米的间距匀速行驶,头车司机偶尔调整方向盘,后车就像被无形绳索牵引般同步跟随。这正… · 2026/11/3 4:32:49

双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/2 13:10:28

STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/2 4:42:45

DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/2 5:17:18

STM32F411RE与MAX14431实现SPI隔离:工业现场抗共模干扰实战
STM32F411RE与MAX14431实现SPI隔离:工业现场抗共模干扰实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/3 1:01:59

ESP32+大模型AI硬件开发:从Demo到产品的8个工程问题
ESP32+大模型AI硬件开发:从Demo到产品的8个工程问题

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/3 1:01:59

基于MAX14431BAEE+与PIC18F85J10的SPI隔离方案设计与实践
基于MAX14431BAEE+与PIC18F85J10的SPI隔离方案设计与实践

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/3 1:01:59

双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/2 13:10:28

STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/2 4:42:45

DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/2 5:17:18

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码