Muse是什么?一文让你看懂Muse的技术原理、主要功能、应用场景

来源:卓商AI
发布时间:2025-04-05

Muse概述简介

Muse是微软推出的首个用在游戏创意生成的生成式AI大模型,基于“World and Human Action Model”(WHAM)。Muse能生成游戏视觉效果和控制器操作,基于学习人类玩家的游戏数据(如图像和操作指令)模拟真实的游戏玩法序列。核心能力包括生成连贯一致的游戏画面、展现多样化的游戏路径以及将用户修改融入生成内容中。Muse基于WHAM Demonstrator提供交互界面,支持创意探索和迭代。微软已开源Muse的权重和样本数据,推动游戏创意生成的研究和创新,为未来的AI驱动游戏开发提供支持。

Muse的功能特色

生成连贯的游戏视觉和玩法:根据初始的游戏画面和控制器操作,生成长达数分钟的连贯游戏玩法序列,模拟真实的游戏动态。

支持多样化的游戏路径:在相同的初始提示下,生成多种不同的游戏玩法和视觉效果,展现丰富的行为和视觉多样性。

持久化用户修改:将用户对游戏画面的修改(如添加角色)融入生成的内容中,生成合理的后续玩法。

创意迭代支持:基于WHAM Demonstrator界面,用户能加载初始画面、调整生成内容,并基于控制器操作引导角色,实现创意的快速迭代。

Muse的技术原理

VQ-GAN:用在将游戏视觉(如游戏画面)编码为离散的表示形式。VQ-GAN基于量化的方式将图像转换为离散的标记(tokens),便于模型处理。

Transformer架构:作为模型的主干网络,用于预测下一步的标记。Transformer能处理离散的视觉和操作序列,捕捉它们之间的复杂关系。

自回归生成:模型基于给定的初始提示(如初始游戏画面或控制器操作),逐步生成后续的视觉和操作序列。每一步的输出都依赖于前面的上下文,确保生成的序列具有连贯性和一致性。

训练数据:Muse基于《Bleeding Edge》游戏的玩家操作和视觉数据进行训练。数据包括玩家的控制器操作和对应的游戏画面,模型基于学习这些数据生成新的游戏序列。

Muse项目介绍

项目官网:https://www.microsoft.com/en-us/research/blog/introducing-muse

HuggingFace模型库:https://huggingface.co/microsoft/wham

技术论文:https://www.nature.com/articles/s41586-025-08600-3

Muse能做什么?

游戏创意探索:快速生成游戏玩法和关卡设计,帮助开发者验证新创意。

自动化游戏测试:生成多样化的测试序列,检测游戏漏洞和优化体验。

内容生成:自动生成新的关卡、地图或角色动作,丰富游戏内容。

玩家行为预测:模拟玩家操作,分析行为模式,优化游戏设计。

AI驱动体验:开发动态剧情和AI对手,提升游戏的个性化和沉浸感。

© 版权声明:本站所有原创文章版权均归卓商AI工具集及原创作者所有,未经允许任何个人、媒体、网站不得转载或以其他方式抄袭本站任何文章。
卓商AI
卓商AI

AI爱好者的一站式人工智能AI工具箱,累计收录全球10,000⁺好用的AI工具软件和网站,方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用,力争做全球排名前三的AI网址导航网站,欢迎您成为我们的一员。

猜你喜欢
  • Pitch Avatar
    Pitch Avatar Pitch Avatar是一款能够像人类一样制作演示文稿的AI产品。它可以生成脚本、语音和演讲者形象,帮助用户节省时间并提供个性化的内容。该产品还提供...
  • ossa ai
    ossa ai 使用ossa.ai快速轻松地创建专业的短形式视频。此创新的脚本对视频功能使您可以轻松地将脚本风格的文本输入转换为即将上市的视频。节省时间并使用ossa...
  • Langflow
    Langflow Langflow 是一款面向开发者的低代码工具,专注于简化 AI 代理和工作流的构建过程。它允许开发者通过可视化界面快速搭建复杂的 AI 应用,支持多...
  • Vibe Draw
    Vibe Draw Vibe Draw 是一款强大的 AI 驱动平台,能够快速将粗略草图转化为专业质量的 3D 模型。它的直观工具使得无论是设计师还是开发者都能轻松使用,...
  • Jetvise
    Jetvise AI助手是一款基于人工智能技术的智能助手,可以帮助用户快速生成个性化的求职信。它提供了数千种模板供用户选择,并能根据用户提供的职位信息自动生成求职信内...
  • Flowith 2.0
    Flowith 2.0 Flowith 2.0 是一个功能强大的AI创作平台,它为用户提供了一个集成了知识库的创作空间,能够帮助用户快速高效地完成各种创作任务。该产品采用了先...
  • FactBox.ai | Factsheet Builder
    FactBox.ai | Factsheet Builder FactBox AI是一个可轻松创建、共享和管理综合事实表的平台。它提供丰富的模板库和直观的拖放界面,让您可以自定义布局并展示有效的信息。您可以轻松上...
  • viddyoze
    viddyoze 介绍您的AI驱动视频营销助理Viddybot。使用ViddyBot,只需说明您想要的视频类型,并让其生成想法并在几秒钟内创建整个视频。节省时间和精力而...