京东方打造多模态大模型，推动3D内容生成领域提质增效降本

用户需求

根据Grand View Research 机构的统计和预测，2022年 全球3D显示器市场规模为1078亿美元，3D市场在2022-2030 将以CAGR 为12.5%的速度增长。但传统3D 内容生成方法， 制作周期长，人力消耗大，导致3D 内容制作成本居高不下， 无法适配快速增长的3D 显示设备对内容的需求。

解决方案

京东方科技集团股份有限公司自主研发的3D 终端内容 生成大模型及多模态大模型，通过文字、语音等多模态交互 方式，基于大模型的理解能力、对话能力、生成能力进行3D 内容创作，让用户直接参与到3D 内容制作过程中，从而大 幅降低3D 内容生产成本，提高3D 内容的可用性、娱乐性和 交互性。京东方3D 终端内容生成平台，由大语言模型、文 生图模型、3D 转制模型组成，是行业内首个全链路实现从多 模态交互、内容生成、编辑、转制、适配再到3D 终端显示， 核心功能全部云端部署，可复用可迁移。京东方的技术创新 点主要包括两个方面， 一是多模态交互，允许用户以文字、 语音等多模态方式进行端到端的交互，通过大模型分析用户 表达的语义，通过文本图像生成、2D 到 3D 图像转制得到符 合终端设备的3D 多视点图像内容。二是视角空间一致性， 在 3D 多视点生成中，京东方自研的大模型能确保不同视角 的生成结果在观看时保持一致，即从不同的角度观察场景也 应该具有一致性，实现这一目的需要解决视角间的几何和颜 色一致性，以及处理光照、阴影和纹理等因素。

项目成果

项目取得一项成果。京东方3D终端内容生成大模型已落地到京东方7.9英寸3D 相框中，用户可通过小程序定制 化进行3D 内容实时生成， 一站式获得更逼真的3D图像/视频(图像视频最高支持8K 分辨率),产品即将于年底量产， 预计销售24000台，预计销售额2400万。