觉
AI觉醒星球
Awakening is here
Knowledge File / AI技能杠杆
2026-09-01 2 浏览 免费阅读

Runway 的 Solaris:实时生成软件界面的 AI 系统

Runway 发布 Solaris“界面世界模型”,不运行代码而是实时逐帧生成 720p 界面,响应点击、拖拽或语音。它基于 Gen-4.5 视频模型,目标让应用变成动态环境,可用于购物试穿、产品可视化和视觉教程,但目前文本渲染易错、不支持屏幕阅读器,仍是研究项目。

SOURCE / AI技能杠杆 MIN / 9 ACCESS / 免费阅读 POST / 2026-09-01 20:53:46

原贴

查看原文
作者:Maximilian Schreiner 来源站点:the-decoder.com 原贴时间:

原文

Runway has unveiled Solaris, an "Interface World Model" that doesn't run user interfaces as code but renders them live and responds directly to clicks or voice. The system aims to replace fixed apps with dynamic environments that adapt to the user, and could prove useful for interactive shopping or visual tutorials. With text rendering still error-prone and no support for screen readers, the system, which builds on the Gen-4.5 video model, remains a research effort for now. AI company Runway has unveiled Solaris, the first model in a new category it calls "Interface World Models." Instead of running code, the system generates the user interface frame by frame as you interact with it. Rather than translating a design into code first, the model renders the interface itself in 720p and responds to clicks, drags, or voice commands. That's a sharp break from how software normally works, where the operating system decides what happens on screen and an app stays the same until someone ships an update. Runway lists several use cases: In online shopping, the store itself would become the interface, with users dragging a shirt onto a picture of themselves to try it on. A shop would no longer be a fixed layout but would adapt to each user. Ad For product visualization, you can say "move the table" or "change the color of the couch," and the scene reacts instantly, which Runway sees fitting furniture and interior planning. Ad The company also sees a use for tutorials and learning. Instead of a text answer like a chatbot gives, Solaris shows the next step visually in its own context, for example as a combustion demo with different materials. Solaris builds on Runway's video model Gen-4.5 and follows the path the company started with GWM-1 . A language model decides how the interface changes, while the world model renders each frame. Runway also sees it as a training ground for AI agents, which still fail at tasks like hotel bookings because they're trained on fixed layouts and can't handle websites that deviate from them. Ad Runway's bigger claim is that the "app" as a fixed unit will disappear. Today, getting something done means opening the right prebuilt app, one for shopping, one for messages, one for reservations. If an operating system can generate the right interfaces on its own, there's less reason to sort software into a fixed catalog of apps. An online store would then no longer be a fixed layout that everyone sees the same way, but a generated environment that adapts to each user. Whether people actually want interfaces that keep changing is a question Runway leaves open. Ad For now, this is still a long way off, as Runway says stable, readable text remains a hard problem to solve even though interfaces depend heavily on it. Long sessions and reliability are open questions too, and a wrong but convincing-looking result can be worse than none at all. A generated interface also has to work with assistive tech like screen readers. Ad

中文翻译

Runway 发布了 Solaris,一个“界面世界模型”,它不把用户界面作为代码运行,而是实时渲染它们,并直接响应点击或语音。

该系统旨在用适应用户的动态环境取代固定应用,并可能对交互式购物或视觉教程有用。

由于文本渲染仍然容易出错且不支持屏幕阅读器,该系统(基于 Gen-4.5 视频模型)目前仍是一项研究努力。

AI 公司 Runway 发布了 Solaris,这是它称为“界面世界模型”的新类别中的第一个模型。

该系统不运行代码,而是在你与之交互时逐帧生成用户界面。

该模型不先把设计翻译成代码,而是以 720p 渲染界面本身,并响应点击、拖拽或语音命令。

这与软件通常的工作方式截然不同,通常由操作系统决定屏幕上发生什么,而应用在有人发布更新之前保持不变。

Runway 列出了几个用例:在在线购物中,商店本身会成为界面,用户把一件衬衫拖到自己的照片上试穿。

商店将不再是固定布局,而是会适应每个用户。

对于产品可视化,你可以说“移动桌子”或“改变沙发的颜色”,场景会立即反应,Runway 认为这适合家具和室内规划。

该公司还看到了教程和学习的用途。

Solaris 不像聊天机器人那样给出文本答案,而是在自己的上下文中可视化地展示下一步,例如用不同材料做燃烧演示。

Solaris 基于 Runway 的视频模型 Gen-4.5,并遵循该公司从 GWM-1 开始的路径。

语言模型决定界面如何变化,而世界模型渲染每一帧。

Runway 还将其视为 AI 智能体的训练场,这些智能体在酒店预订等任务上仍然失败,因为它们是在固定布局上训练的,无法处理偏离这些布局的网站。

Runway 更大的主张是,作为固定单元的“应用”将消失。

今天,完成某件事意味着打开正确的预构建应用,一个用于购物,一个用于消息,一个用于预订。

如果操作系统能自己生成正确的界面,那么把软件归入固定的应用目录的理由就更少了。

在线商店将不再是每个人都以相同方式看到的固定布局,而是一个适应每个用户的生成环境。

人们是否真的想要不断变化的界面,是 Runway 留下的一个开放问题。

目前,这仍然很遥远,因为 Runway 说稳定、可读的文本仍然是一个难以解决的问题,尽管界面严重依赖它。

长时间会话和可靠性也是开放问题,而一个错误但看起来可信的结果可能比没有结果更糟。

生成的界面还必须与屏幕阅读器等辅助技术配合。

核心信息

Runway 发布 Solaris“界面世界模型”,不运行代码而是实时逐帧生成 720p 界面,响应点击、拖拽或语音。它基于 Gen-4.5 视频模型,目标让应用变成动态环境,可用于购物试穿、产品可视化和视觉教程,但目前文本渲染易错、不支持屏幕阅读器,仍是研究项目。

  • Runway 发布 Solaris“界面世界模型”,不运行代码而是实时逐帧生成 720p 界面,响应点击、拖拽或语音。它基于 Gen-4.5 视频模型,目标让应用变成动态环境,可用于购物试穿、产品可视化和视觉教程,但目前文本渲染易错、不支持屏幕阅读器,仍是研究项目。
  • 原贴提到:Runway has unveiled Solaris, an "Interface World Model" that doesn't run
  • 来源:the-decoder.com

详细解读

这是什么信号:Runway 发布 Solaris,把视频生成能力延伸到界面生成。它不是把设计稿转成代码,而是让语言模型决定界面变化,世界模型逐帧渲染 720p 画面,并直接响应点击、拖拽或语音。这意味着 AI 开始从“生成内容”走向“生成交互环境”。

为什么重要:传统软件依赖操作系统和预构建应用,界面固定直到更新。Solaris 试图让界面实时生成并适应每个用户,这可能改变应用的形态。对 AI agents 也有意义:它们常因固定布局失败,而生成式界面可以成为训练和运行环境。

对谁有价值:产品经理和创业者可关注交互式购物、家具/室内设计可视化、视觉教程等场景;AI 智能体开发者可探索用生成界面做训练场;操作系统和平台厂商则需思考应用分发方式是否会被重构。

可以怎么行动:跟踪 Gen-4.5 和 GWM-1 的技术路径,评估自身产品中哪些固定界面可被动态生成替代;在电商、教育、售后支持等场景做小范围原型;同时把文本可读性、屏幕阅读器兼容和长会话稳定性列入评估清单。

风险或限制:目前文本渲染易错,不支持屏幕阅读器,长会话和可靠性未解决,错误但看似可信的结果可能更危险。Runway 也承认人们是否想要不断变化的界面仍开放。因此短期应视为研究信号,而非可立即落地的产品方案。

信息差价值

这条内容的真正价值,不只是“有人发布了一个新功能”,而是它揭示了 the-decoder.com 背后的产品方向、工作流变化或竞争信号。对 OPC 来说,这种信息可以转化成持续追踪的栏目选题。

如果把《Runway 的 Solaris:实时生成软件界面的 AI 系统》放到你的内容系统里,它最大的价值在于帮助读者更快看懂“为什么值得关注”,而不是只看到一条碎片化动态。

参考来源

AI SUMMARY

这篇文章回答了什么

Runway 的 Solaris:实时生成软件界面的 AI 系统主要讲什么?

Runway 发布 Solaris“界面世界模型”,不运行代码而是实时逐帧生成 720p 界面,响应点击、拖拽或语音。它基于 Gen-4.5 视频模型,目标让应用变成动态环境,可用于购物试穿、产品可视化和视觉教程,但目前文本渲染易错、不支持屏幕阅读器,仍是研究项目。

这篇文章最值得关注的要点是什么?

Runway 发布 Solaris“界面世界模型”,不运行代码而是实时逐帧生成 720p 界面,响应点击、拖拽或语音。它基于 Gen-4.5 视频模型,目标让应用变成动态环境,可用于购物试穿、产品可视化和视觉教程,但目前文本渲染易错、不支…;原贴提到:Runway has unveiled Solaris, an "Interface World Model" that doesn't run;来源:the-decoder.com

这篇文章和哪些AI专题相关?

它适合放在Agent工作流、AI工具、AI超级个体专题里阅读。 关联原因:这篇内容命中「Agent、工作流」等主题信号。;这篇内容命中「模型」等主题信号。;这篇内容命中「技能」等主题信号。

阅读这篇文章建议先理解哪些关键词?

建议先理解AI工具、工具、自动化、模型、Cursor这些关键词,再结合正文判断工具、机会或风险是否值得进入自己的工作流。

上一篇 Claude Fable 5.1 现已在 GitHub Copilot 中正式可用 下一篇 GitHub CLI:在 Issue、PR 和评论中支持媒体附件