最近，由Jiutian人工智能研究所移动Jiutian（以下称为“ Jiutian Research Institute”）在国际Google Google Android World的动态参考评估列表中占据了第一个位置。由Jiutian研究所开发的自主代理模型终止了JT-Guiagent-V2，在Google Android世界自治代理Dynammark基准测试的国际列表中占67.2％。列表！这表明，由于其复杂的Endanese代理系统，中国移动设备已在人类计算机交互技术中达到了国际领导水平。 Agent GUI（图形用户界面）是-ART人工智能代理系统的状态。集成了多种技术，包括计算机视觉，长度加工uaje和增强学习。您可以自动猜测并执行UI交互。喜欢人类用户，通过图形用户界面感知操作环境，它模拟了人类完成乘以乘以乘法任务，并理解和执行图形界面中的多个操作指令，包括单击，输入，拖动和读取接口上的信息，允许自动处理所需的复杂任务。这种技术进步有效地解决了传统手动操作的效率瓶颈。简而言之，GUI代理类似于最后一侧的“自动驾驶系统”，可以用各种软件应用程序替代用户，从而大大提高了用户的工作效率和操作经验。但是，GUI代理在现实世界应用中面临三个中心技术挑战。首先是如何识别和理解动态和可修改的多模型连续到这一目的的接口，JT-GENT-V2已实现了建筑设计和智能plannin不可或缺的更新g。与一个月前启动的V1版本相比，新版本取得了积分能力的飞跃，以了解自然语言的教学，对用户界面元素元素的多模式识别，目标任务的识别和推理以及自动执行的识别和推理，并且实现了“对独立宣传 - 启示式表达的自动观察”。它的中心技术优势反映在两个主要创新中：首先，我们将独立建立一个两阶段的二阶段。创新设计了一个两阶段的Marco，用于全球规划代理和知觉定位代理。计划者专注于先进的战略计划，从而大大提高其针对复杂任务的推理和环境适应性的能力。 Grander保证对接口和操作执行的要素进行准确的识别，并且两者共同努力以形成完整的闭路决策。第2号，创新地介绍了智能P基于经验的Lanning方法，整合用户 - 命令分析和实时应用程序操作经验，为三个方面提供了显着的改进和有效性，从而可以优化系统的动态决策。首先，计划精度：实时输入用户的意图和应用特征。其次，错误的最小化：有效地减少了模型的“认知折叠室”，并解决了技术问题，例如识别异常图标和隐藏手势的调用。第三，任务的概括：通过积累可扩展的应用程序经验提高新任务中模型的执行精度。 AndroidWorld是由Google Revighter共同发布的功能齐全的Android环境，该环境为自主代理提供了精致，专业和授权的参考平台。它的特征如下：首先，环境ENT是现实的，20个常规的Android应用程序创造了一个完全功能的环境，其中包括：第二，任务是多样的。涵盖日常活动，例如编程管理，信息交换和系统配置，精心设计了116个任务，以高度模拟用户场景。第三，评估是严格的。每个任务都配备了标准化的初始化，严格的成功机制和清洁逻辑，以确保评估结果的高可重复性和可比性。第四，该功能是不可或缺的，并着重于理解代理自然语言指令的深度，与动态用户界面的精确互动，有效地完成复杂任务以及可解决任务参数变化的稳健性。由于上述技术优势，GUI的强大功能提供了广泛的观点DAND DAND应用程序纽约地区。例如，在生活服务方案中，用户可以提出与语音文本互动的指示，而GUI代理可以在用户许可证应用程序（例如CTRIP，Dianping，12306等）中实现横向应用程序操作，从而为多个应用程序中的复杂操作提供新的解决方案。在办公场景中，用户必须通过语音或文本向代理GUI发布说明，例如“打开文档，在表中组织关键数据并将其发送给团队成员”。在财务应用中，GUI代理可以自动阅读和组织几个财务数据，生成财务报表并降低手动操作引起的错误和时间成本的风险。软件开发过程使用GUI代理进行自动软件测试，以模拟多个操作用户操作，并快速检测软件的稳定性和兼容性。在工业生产中，GUI代理可以在自动控制系统中用于操作设备统一地，根据生产指示监视生产过程，实现生产过程的智能和自动化，并提高生产效率和产品质量。 GUI代理集成了整合的智能特征，例如理解意图，环境意识，独立决策和互动执行，作为实施大型模型的关键实现技术。将来，智能终端，在“三个新”信息消费区域（例如智能连接的车辆，将智能可用的机器人）中有广泛的应用观点。现在导演Android世界榜单的Jiutian Gui特工完全反映了独立代理商Jiutian研究所的技术力量，代表了中国移动设备在智能时代的用户服务需求和商业经验中的深刻思想和积极创新。将来，中国的手机人工智能实验室将继续研究最先进的GUI代理商的架构和算法，重建人类计算机协作模型，为大多数用户提供智能，方便和个性化信息服务的新体验。