METAL for iPhone

AI 新闻, 现在用 App 阅读。

下载 METAL, 每天发现最新 AI 报道。

在 App Store 下载

iPhone 应用 · 免费下载

也可在 iPhone 的 App Store 中搜索 METAL AI Magazine。

METAL

每次点击都由AI绘制新页面的开源绘本

没有链接也没有标记,只要点击画面中的任意位置,AI就会当场绘制出一幅新图

每次点击都由AI绘制新页面的开源绘本

摘要

  • GitHub用户0toshigami开源发布了一款基于AI实时图像生成的互动绘本项目"orbis-pictus"
  • 用户输入文字或点击画面中任意一点,AI都会即时绘制出反映该内容的新页面
  • 项目仓库中明确说明,这是对flipbook.page服务的非官方致敬,与该团队没有关联
原文视频

出现了什么

GitHub用户0toshigami公开了一个名为"orbis-pictus"的开源项目。根据仓库说明,这款应用自称是一个"无限的浏览器"。屏幕上显示的每一个页面都不是HTML,而是一张由AI绘制的图像。用户输入任意一句话,就会生成包含该内容的图片页面;点击图片中的任意一点,就会针对该位置重新绘制出一张新页面。没有链接,也没有标记语言。据说每一个像素都是在请求到来的那一刻重新绘制出来的。该仓库已获得26个star和13次fork,采用MIT许可证发布。仓库文档中明确写明,这个项目是对"flipbook.page"服务的独立、非官方致敬,并非由该团队制作或背书。

这意味着什么

迄今为止,"浏览"网页意味着沿着别人预先制作好的页面和链接前进。orbis-pictus颠覆了这一前提。没有预先绘制好的页面,只有在点击的那一刻,才会生成与该位置相符的图像。从技术上看,这似乎是将图像生成模型不仅与文本提示结合,还与"点击位置"这一视觉坐标信息结合,从而在每次交互时都能即时生成合理的后续画面。这种方式之所以困难,原因在于速度和一致性这两点。用户能等待的时间很短,但同时又需要画面与前一页自然衔接,才能让人感觉像是在读一本故事书。之所以使用绘本这一比喻,或许正是因为这一点——每次翻页(或者说每次戳向图中某处)时,故事都会分支延展。也可以说,近来图像生成模型响应速度的提升,为个人开发者也能尝试这种"边画边探索"的界面提供了条件。

由此带来的变化

orbis-pictus本身只是个人项目规模的致敬之作,但其构想值得作为一种内容消费方式的实验来解读。不再是翻阅既定的页面,而是点击感兴趣的地方,故事便当场生成——这种体验从儿童绘本到互动小说都有应用的余地。由于该项目以开源形式发布,任何人都可以获取代码,打造属于自己的"无限绘本",这种基于点击的生成式界面是否会蔓延到其他创作工具中,值得关注。

评论