NeurIPS 2026｜DGP 打通全部 ViT 与 LLM 层，让大模型每层按需「看图」

据机器之心报道，一篇入选 NeurIPS 2026 的论文提出 VLM 架构新方案 DGP，将全部 ViT 层与 LLM 层打通，让大模型每一层都能按需「看图」。论文给出的菜单题示例中，LLaVA-1.5 读错披萨价格并凭空加入未点的 calzone，算出 26.40 欧元；DGP 则读出两个正确价格并完成计算。