上一篇
ORMBG是什么？一文让你看懂ORMBG的技术原理、主要功能、应用场景
Cradle是什么？一文让你看懂Cradle的技术原理、主要功能、应用场景
来源：卓商AI
发布时间：2025-04-05
关键字：
Cradle概述简介
Cradle是面向通用计算机控制（General Computer Control, GCC）的多模态AI Agent框架，由昆仑万维携手北京智源人工智能研究院、新加坡南洋理工大学、北京大学等顶尖名校机构推出的通用计算机控制框架，使AI Agent无需训练便能像人一样直接控制键盘鼠标，不依赖任何内部API，实现任意开闭源软件交互。 Cradle是迄今为止第一个既能玩多种商业游戏又能操作各种软件应用的AI框架，其论文、项目、代码均已开源。Cradle的功能特色
信息收集：从屏幕图像和可能的声音中提取多模态信息，用于决策制定。
自我反思：评估先前行动的成功与否，并分析失败原因，以指导后续行动。
任务推断：根据当前环境和历史信息，推断并选择最佳的下一个任务。
技能策划：生成和更新与给定任务相关的技能，以适应不同的计算机操作需求。
动作规划：为键盘和鼠标控制生成具体操作，将策略转化为可执行的命令。
Cradle的技术原理
多模态输入处理：Cradle能接收并处理屏幕图像和音频的多模态输入，模拟人类感知方式理解计算机界面和环境。
信息提取与理解：用大型多模态模型（如GPT-4V）来识别图像中的视觉元素、文本信息和音频中的指令或反馈。
自我反思机制：通过反思模块，Cradle评估之前执行动作是否成功，并分析失败原因，为调整策略提供依据。
任务推断与规划：Cradle通过任务推断模块确定当前的优先任务，并在动作规划模块中制定出新动作完成任务。
技能生成与更新：技能策划模块负责根据当前任务生成新的技能或更新现有技能，技能以代码函数的形式存在，可以被实例化并执行。
记忆与知识管理：Cradle拥有长期和短期记忆系统，存储过去的经验和技能，在需要时进行检索和应用。
Cradle项目介绍
GitHub仓库：https://github.com/BAAI-Agents/Cradle
arXiv技术论文：https://arxiv.org/pdf/2403.03186
Cradle能做什么？
桌面软件自动化：自动化执行桌面软件中的重复性任务，如文档编辑、表格处理、图像编辑等。
网页内容交互：模拟用户与网页的交互，包括填写表单、点击按钮、导航链接等。
游戏环境：在游戏环境中，如Red Dead Redemption II，Cradle可控制游戏角色执行任务、探索环境、战斗等。
专业软件操作：在需要专业技能的软件中，如图形设计或视频编辑软件，Cradle可学习并执行特定的创作任务。
日常计算机任务：执行日常计算机使用中的任务，比如文件管理、电子邮件处理、日程安排等。
© 版权声明:本站所有原创文章版权均归卓商AI工具集及原创作者所有，未经允许任何个人、媒体、网站不得转载或以其他方式抄袭本站任何文章。
相关文章
-
CHANGER是什么？一文让你看懂CHANGER的技术原理、主要功能、应用场景2025-04-05 -
Kiroku是什么？一文让你看懂Kiroku的技术原理、主要功能、应用场景2025-04-05
-
Vision Search Assistant是什么？一文让你看懂Vision Search Assistant的技术原理、主要功能、应用场景2025-04-05
-
MVDrag3D是什么？一文让你看懂MVDrag3D的技术原理、主要功能、应用场景2025-04-05
-
Chonkie是什么？一文让你看懂Chonkie的技术原理、主要功能、应用场景2025-04-05
-
MSQA是什么？一文让你看懂MSQA的技术原理、主要功能、应用场景2025-04-05
卓商AI
AI爱好者的一站式人工智能AI工具箱，累计收录全球10,000⁺好用的AI工具软件和网站，方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用，力争做全球排名前三的AI网址导航网站，欢迎您成为我们的一员。
最新发布
1
2
3
4
5
6
7
8
9
10
猜你喜欢
Teable
Teable是一个结合了SQL能力与电子表格协作的顶级解决方案，直接连接到Postgres，提供协作体验，超越Airtable，满足运营数据需求，显著...
boltai
使用Boltai -ChatGpt应用程序升级您的生产率。将AI与美丽而强大的Chatgpt应用程序无缝集成到您的工作流程中。通过这种尖端技术，保持领...
Qwen2.5-Coder-14B
Qwen2.5-Coder-14B是Qwen系列中专注于代码的大型语言模型，覆盖了0.5到32亿参数的不同模型尺寸，以满足不同开发者的需求。该模型在代...
destinymatrix cc
使用destinymatrix.cc揭示您的命运矩阵。通过这种个性化的分析，发现对您的人生道路，人际关系，职业和潜力的见解。开始您的自我发现的旅程，并...
coronarography.ai
冠状动脉AI是一款利用人工智能技术来确定冠状动脉病变的应用程序。上传心电图图像，选择风险因素，AI将预测心肌缺血的存在，该病变基于心脏的主要动脉。该应...
fairytailai
Fairytailai是希望使就寝时间更神奇的父母的专家解决方案。使用AI技术，Fairytailai个性化的睡前故事是根据您孩子的偏好量身定制的，甚...
finalscout
FinalsCout可帮助您快速，大规模地找到并与潜在客户和客户互动。该程序的预测电子邮件查找工具提取了来自LinkedIn的有效电子邮件地址，并根据...
Xcode 16
Xcode 16 提供了功能和性能提升，助力开发者以比以往更快的速度构建出色的 app，提升开发者的生产力标准。Xcode 16 带来了全新的预测性代...
AI爱好者的一站式人工智能AI工具箱，累计收录全球10,000⁺好用的AI工具软件和网站，方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用，力争做全球排名前三的AI网址导航网站，欢迎您成为我们的一员。
