Google Geminiがスケッチを機能的なアプリに変換するCanvasツールを提供

Googleは、手描きのスケッチを機能的なアプリケーションに変換する新しい機能をGeminiプラットフォーム内に導入しました。2026-11-05に発表されたこの機能は、2025-03に発売されたワークスペースであるCanvasツールを活用して、アプリのモックアップ、習慣トラッカー、ゲームボードなどの視覚的な入力から直接コードを生成・洗練します。

スケッチからアプリへのワークフローの操作方法

ユーザーは、自分のスケッチの写真をCanvasツールにアップロードし、「このアプリをコーディングできますか？」という質問でGeminiに促します。Geminiは視覚的な入力を解釈し、それに対応するコードを記述します。このプラットフォームはまた、ユーザーが生成されたアプリケーションをテストし、色、フォント、機能などの要素をリアルタイムで調整できるプレビューウィンドウを提供します。

このワークフローは、HTML/ReactウェブアプリのプロトタイプやPythonスクリプトの生成を含むGeminiの既存の機能に基づいています。2025-05年の2.5モデルで強化されたCanvasツールは、従来、自然言語の説明から動作するアプリケーションを作成する能力を示してきました。このスケッチベースの機能は、アプリ開発の基礎として視覚的な入力を使用することによって、この機能を拡張します。

技術的特徴と考慮事項

持続的なストレージを必要とするアプリケーションの場合、Geminiは自動的にFirestoreデータベースインスタンスを作成しますが、ユーザーは代替のストレージソリューションを選択することもできます。ただし、Googleのドキュメントは、Canvasアプリは公開リンクを介して共有されるため、リンクにアクセスできる誰でも共有されたデータを表示および編集できることを強調しています。これにより、機密情報を含むプロトタイプを共有する前に、プライバシーのレビューが重要なステップとなります。

Googleはまた、「ウェブサイトを描く」というデベロッパー向けのコードラボに関連するスケッチからコードへのアプローチを文書化しています。このプロセスでは、手描きのワイヤーフレームとオプションのテキスト指示をアップロードすることが含まれ、GeminiはCloud Run上にデプロイされたPython Flaskアプリケーションを通じてウェブサイトのコードを生成します。

アプリ開発への影響

この機能の導入により、概念的なスケッチからインタラクティブで編集可能なウェブプロトタイプへの道が大幅に短縮されます。発表は正確さや開発時間の短縮に関する具体的なベンチマークを提供していませんが、スケッチベースのワークフローをGeminiのCanvasツールに統合することは、アプリ開発におけるプラットフォームの成長する多様性を強調しています。