Does AI Save Time on Product Design? A Randomized Controlled Experiment of AI Prompt-to-Design Workflows
作者: Remy Stewart, Olabode Anise, Andrew Hogan, Augustus Griffin
分类: cs.HC, cs.AI
发布日期: 2026-09-22
💡 一句话要点
通过随机对照实验评估AI在产品设计中的时间节省效果
🎯 匹配领域: 支柱九：具身大模型 (Embodied Foundation Models)
关键词: 产品设计 AI工具 随机对照试验 设计效率 跨职能协作 Figma Make 大型语言模型
📋 核心要点
- 现有的产品设计方法在时间效率上存在不足，尤其是在设计师与非设计师之间的协作中。
- 论文提出通过使用Figma Make这一AI工具，优化设计工作流程，从而提高设计效率。
- 实验结果显示，使用Figma Make的参与者完成任务时间缩短约20%，产品经理的时间节省更为显著。
📝 摘要（中文）
随着AI工具在数字产品设计中提供提示到设计的能力，设计师和非设计师同事能够通过与大型语言模型的对话工作流程创建原型。尽管这些工具承诺节省时间，但在产品设计领域的实验证据仍然有限。我们进行了随机对照试验，评估使用Figma Make在设计工作中可能带来的时间节省。参与者在有或没有Figma Make的情况下尝试了三项标准化设计任务。结果显示，使用Figma Make的参与者完成任务的时间缩短了约20%，尤其是产品经理的时间节省更为显著。这表明提示到设计工具可能使产品经理在设计工作中更具贡献，而专业设计师的收益可能依赖于具体任务。
🔬 方法详解
问题定义：本论文旨在解决在产品设计过程中，设计师与非设计师之间协作效率低下的问题。现有方法缺乏有效的工具来支持这种协作，导致时间浪费和设计质量不均。
核心思路：论文的核心思路是利用Figma Make这一AI工具，通过提示到设计的工作流程，帮助设计师和产品经理更高效地完成设计任务。这样的设计旨在降低设计门槛，使非专业人士也能参与设计过程。
技术框架：整体架构包括三个主要阶段：首先，参与者在没有Figma Make的情况下完成设计任务；其次，参与者在使用Figma Make的条件下进行相同任务；最后，比较两组的完成时间和设计质量。
关键创新：最重要的技术创新点在于将大型语言模型与设计工具结合，形成一种新的工作流程，显著提高了非设计师在设计过程中的参与度和效率。与传统设计方法相比，这种方法更具灵活性和可操作性。
关键设计：在实验中，设置了标准化的设计任务，确保参与者在相似条件下进行比较。使用的损失函数和评估标准包括任务完成时间和设计质量，以量化Figma Make的实际效果。实验设计确保了结果的可靠性和可重复性。
🖼️ 关键图片
📊 实验亮点
实验结果显示，使用Figma Make的参与者完成设计任务的时间缩短了约20%。特别是在产品经理中，时间节省效果更为显著。这一发现表明，AI工具在提升设计效率方面具有重要潜力，尤其是在非专业设计师的参与中。
🎯 应用场景
该研究的潜在应用领域包括产品设计、用户体验设计和跨职能团队协作等。通过引入AI工具，企业可以提高设计效率，缩短产品上市时间，进而提升市场竞争力。未来，随着AI技术的不断发展，这种工具可能会在更多设计领域得到应用，推动设计流程的进一步优化。
📄 摘要（原文）
AI tools for digital product design now offer prompt-to-design capabilities, allowing designers and their non-designer colleagues to create prototypes through conversational workflows with large language models (LLMs). While these tools promise time savings, experimental evidence in product design remains limited compared with evidence from software engineering. We conducted a randomized controlled trial with 50 product designers and 50 product managers to evaluate prospective time savings from leveraging Figma Make in design work. Participants attempted three standardized design tasks with or without access to Figma Make. Among participants who completed the study tasks, access to Figma Make was associated with approximately 20% shorter completion times, with larger gains among product managers. Our findings suggest that prompt-to-design tools may enable product managers to further contribute to design work, while the benefits for professional designers may be task dependent.