Muse是什么?一文让你看懂Muse的技术原理、主要功能、应用场景

来源:卓商AI
发布时间:2025-04-05

Muse概述简介

Muse是微软推出的首个用在游戏创意生成的生成式AI大模型,基于“World and Human Action Model”(WHAM)。Muse能生成游戏视觉效果和控制器操作,基于学习人类玩家的游戏数据(如图像和操作指令)模拟真实的游戏玩法序列。核心能力包括生成连贯一致的游戏画面、展现多样化的游戏路径以及将用户修改融入生成内容中。Muse基于WHAM Demonstrator提供交互界面,支持创意探索和迭代。微软已开源Muse的权重和样本数据,推动游戏创意生成的研究和创新,为未来的AI驱动游戏开发提供支持。

Muse的功能特色

生成连贯的游戏视觉和玩法:根据初始的游戏画面和控制器操作,生成长达数分钟的连贯游戏玩法序列,模拟真实的游戏动态。

支持多样化的游戏路径:在相同的初始提示下,生成多种不同的游戏玩法和视觉效果,展现丰富的行为和视觉多样性。

持久化用户修改:将用户对游戏画面的修改(如添加角色)融入生成的内容中,生成合理的后续玩法。

创意迭代支持:基于WHAM Demonstrator界面,用户能加载初始画面、调整生成内容,并基于控制器操作引导角色,实现创意的快速迭代。

Muse的技术原理

VQ-GAN:用在将游戏视觉(如游戏画面)编码为离散的表示形式。VQ-GAN基于量化的方式将图像转换为离散的标记(tokens),便于模型处理。

Transformer架构:作为模型的主干网络,用于预测下一步的标记。Transformer能处理离散的视觉和操作序列,捕捉它们之间的复杂关系。

自回归生成:模型基于给定的初始提示(如初始游戏画面或控制器操作),逐步生成后续的视觉和操作序列。每一步的输出都依赖于前面的上下文,确保生成的序列具有连贯性和一致性。

训练数据:Muse基于《Bleeding Edge》游戏的玩家操作和视觉数据进行训练。数据包括玩家的控制器操作和对应的游戏画面,模型基于学习这些数据生成新的游戏序列。

Muse项目介绍

项目官网:https://www.microsoft.com/en-us/research/blog/introducing-muse

HuggingFace模型库:https://huggingface.co/microsoft/wham

技术论文:https://www.nature.com/articles/s41586-025-08600-3

Muse能做什么?

游戏创意探索:快速生成游戏玩法和关卡设计,帮助开发者验证新创意。

自动化游戏测试:生成多样化的测试序列,检测游戏漏洞和优化体验。

内容生成:自动生成新的关卡、地图或角色动作,丰富游戏内容。

玩家行为预测:模拟玩家操作,分析行为模式,优化游戏设计。

AI驱动体验:开发动态剧情和AI对手,提升游戏的个性化和沉浸感。

© 版权声明:本站所有原创文章版权均归卓商AI工具集及原创作者所有,未经允许任何个人、媒体、网站不得转载或以其他方式抄袭本站任何文章。
卓商AI
卓商AI

AI爱好者的一站式人工智能AI工具箱,累计收录全球10,000⁺好用的AI工具软件和网站,方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用,力争做全球排名前三的AI网址导航网站,欢迎您成为我们的一员。

猜你喜欢
  • ToolJet
    ToolJet ToolJet 是一款面向企业的 AI 原生开发平台,旨在通过低代码和自然语言处理技术,帮助企业快速构建和部署内部应用程序。其核心优势在于能够显著降低...
  • CodeCV简历
    CodeCV简历 CodeCV简历是一个专业的在线简历制作工具,支持Markdown格式,为用户提供多种简历模板和AI辅助写简历功能,帮助用户快速生成个性化、专业的简历...
  • Galactic Pulse LLC
    Galactic Pulse LLC Galactic Pulse LLC - Podcast Generation Tool 是一个创新的播客生成工具,利用先进的人工智能技术,帮助用户创...
  • JoggAI
    JoggAI JoggAI是一个利用人工智能技术,帮助用户将产品链接或视觉素材快速转换成吸引人的视频广告的平台。它提供了丰富的模板、多样的AI虚拟形象,以及快速响应...
  • constant contact
    constant contact 通过持续联系来提升您的数字和电子邮件营销 - AI驱动的平台,可驱动结果。自动生成有效的内容选项,并优化主题行以最大开放速度。使用高级自动化工具来增...
  • MILS
    MILS MILS是一个由Facebook Research发布的开源项目,旨在展示大型语言模型(LLMs)在未经过任何训练的情况下,能够处理视觉和听觉任务的能...
  • Impactor App
    Impactor App Impactor App是一个团队决策协作应用,帮助团队进行头脑风暴、优先级排序,并承诺决策,确保实现影响。通过AI增强的数字协作,改善项目结果,促进...
  • Mito Health
    Mito Health Mito Health是一个提供全面健康检测和个性化健康计划的在线服务平台。它通过深入的生物标志物检测来预测用户慢性疾病的风险,提供针对性的健康优化计...