新闻
谷歌Gemini通过画布工具将草图转变为功能应用
谷歌的Gemini现在使用户能够使用其画布工具将草图转变为交互式应用,提供即时的代码生成和预览。
谷歌在其Gemini平台中推出了一项新功能,允许用户将手绘草图转变为功能性应用。该功能于2026-11-05公布,利用了在2025-03推出的画布工具,从应用原型、习惯跟踪器或游戏板等视觉输入直接生成和完善代码。
草图到应用的工作流程
用户可以将草图的照片上传到画布工具,并向Gemini提出问题,“你能为我编写这个应用吗?”Gemini然后解析视觉输入并编写相应的代码。该平台还提供了一个预览窗口,用户可以在其中测试生成的应用程序,并对颜色、字体和功能等元素进行实时调整。
这一工作流程建立在Gemini现有的能力之上,包括生成HTML/React网页应用原型和Python脚本。画布工具使用增强的Gemini 2.5模型于2025-05,之前已经展示了从自然语言描述创建工作应用的能力。基于草图的功能通过将视觉输入作为应用开发的基础扩展了这一功能。
技术特性与考虑事项
对于需要持久存储的应用,Gemini会自动创建一个Firestore数据库实例,尽管用户可以选择其他存储解决方案。然而,谷歌的文档强调,画布应用是通过公共链接分享的,这意味着任何拥有链接的人都可以查看和编辑共享数据。这使得在共享包含敏感信息的原型之前进行隐私审查成为一个关键步骤。
谷歌还在其“绘制网站”开发者代码实验室中记录了一种相关的草图到代码的方法。该过程涉及上传手绘线框图和可选文本说明,Gemini使用这些信息通过部署在Cloud Run上的Python Flask应用生成网站代码。
应用开发的影响
这一功能的引入显著缩短了从概念草图到互动可编辑网页原型的路径。尽管公告并未提供具体的准确性或开发时间节省的基准,但将基于草图的工作流程集成到Gemini的画布工具中凸显了该平台在应用开发中的日益多样化。