公开(公告)号：CN119473280A

公开(公告)日：2025-02-18

申请号：CN202411439412.5

申请日：2024-10-15

Applicant: 华中科技大学

Inventor： 赵彦杰 ,  周婷 ,  王浩宇 ,  陈凯 ,  董枫 ,  王美珍

IPC: G06F8/38 ,  G06F8/41 ,  G06F8/33 ,  G06F8/30 ,  G06V10/26 ,  G06N5/022

Abstract: 本发明涉及人机交互和软件工程领域，提供一种基于多模态大模型的用户界面代码生成方法、系统及设备，该方法包括如下步骤：根据UI设计图构建页面转换图；提取UI设计图中的UI组件并分析其功能，得到UI组件分析结果；将页面转换图、UI组件分析结果以及UI设计图进行整合生成提示词；将提示词输入多模态大模型，多模态大模型根据提示词生成用户界面代码。本发明解决了当前UI开发中存在的效率低下、复杂设计难以处理、交互逻辑理解有限等问题。本发明为声明式UI框架的广泛应用和进一步发展提供了强有力的技术支持，推动了整个UI开发生态系统的进步。