Recent advances in large language models (LLMs) enable compelling story generation, but connecting narrative text to playable visual environments remains an open challenge in procedural content generation (PCG). We present a lightweight pipeline that transforms short narrative prompts into a sequence of 2D tile-based game scenes, reflecting the temporal structure of stories. Given an LLM-generated narrative, our system identifies three key time frames, extracts spatial predicates in the form of "Object-Relation-Object" triples, and retrieves visual assets using affordance-aware semantic embeddings from the GameTileNet dataset. A layered terrain is generated using Cellular Automata, and objects are placed using spatial rules grounded in the predicate structure. We evaluated our system in ten diverse stories, analyzing tile-object matching, affordance-layer alignment, and spatial constraint satisfaction across frames. This prototype offers a scalable approach to narrative-driven scene generation and lays the foundation for future work on multi-frame continuity, symbolic tracking, and multi-agent coordination in story-centered PCG.


翻译:大型语言模型(LLM)的最新进展使得引人入胜的故事生成成为可能,但将叙事文本连接到可游玩的视觉环境仍然是程序化内容生成(PCG)中的一个开放挑战。我们提出了一种轻量级流程,将简短叙事提示转化为一系列基于二维瓦片的游戏场景,以反映故事的时间结构。给定一个LLM生成的叙事,我们的系统识别三个关键时间帧,以“对象-关系-对象”三元组的形式提取空间谓词,并利用来自GameTileNet数据集的可供性感知语义嵌入来检索视觉资源。通过使用元胞自动机生成分层地形,并基于谓词结构中的空间规则放置对象。我们在十个不同故事中评估了我们的系统,分析了跨时间帧的瓦片-对象匹配、可供性层对齐以及空间约束满足情况。该原型为叙事驱动的场景生成提供了一种可扩展的方法,并为未来在故事中心PCG中研究多帧连续性、符号追踪和多智能体协调奠定了基础。

0
下载
关闭预览

相关内容

LLMOps:大语言模型的生产环境管理
专知会员服务
38+阅读 · 2025年7月24日
揭示生成式人工智能 / 大型语言模型(LLMs)的军事潜力
专知会员服务
31+阅读 · 2024年9月26日
《LLMs遇见多模态生成与编辑》综述
专知会员服务
41+阅读 · 2024年6月3日
如何检测LLM内容?UCSB等最新首篇《LLM生成内容检测》综述
强化学习与文本生成
微信AI
41+阅读 · 2019年4月4日
动态可视化指南:一步步拆解LSTM和GRU
论智
17+阅读 · 2018年10月25日
NLG ≠ 机器写作 | 专家专栏
量子位
13+阅读 · 2018年9月10日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
51+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
51+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员