多模态 AI Coding

在知识图谱中的位置：模块七 · 07_前沿趋势 · 第 2 节 难度：⭐⭐

---

1. 多模态 AI Coding 概述

多模态 AI Coding 是指 AI 编程助手不仅能处理代码和文本，还能理解图像、音频、视频等多模态输入。

应用场景

模态	场景
图像	从 UI 设计图生成代码
音频	语音指令生成代码
视频	从屏幕录制提取交互逻辑
3D	从 3D 模型生成交互代码

---

2. 多模态 AI Coding 的代表

工具	多模态能力
Claude 3.5	图像 + 代码
GPT-4o	图像 + 音频 + 代码
Gemini 2.0	原生多模态

---

3. 参考资料

• Best AI Coding Assistants 2026 (scrimba.com)