• 最近访问:
发表于 2026-09-18 13:37:10 股吧网页版
豆包2.1Pro模型更新 设计图秒变“会下雨的庭院”
来源:新京报

  一张庭院的静态设计图,没有其他角度参考,没有建模参数,没有一句多余提示。AI看完之后,还给你一座会下雨的庭院——水体、植被、可移动的镜头,连风雨霜雪的四季都能切换。完成这一切的,是搭载在豆包工作里的豆包2.1Pro(0915新版),而这轮升级最核心的看点,正是“看图写代码”的多模态编程能力。

  9月16日,火山引擎宣布豆包2.1Pro更新至0915版本,模型API全量上线火山方舟,并接入豆包工作与TRAE。此次迭代围绕企业生产级需求展开,多模态编程能力显著强化,在“看图写代码”场景已达到国内领先水平。记者关注到,多模态编程正在把“看得懂”变成“做得出”——AI编程要走向生产级落地,这门课躲不开。

  亮点1:

  一张图片凭什么变成可交互的3D建模

  豆包2.1Pro(0915新版)能力具体升级在哪里?一个测试即可见分晓。

  在豆包工作中,上传4张同一个角度、同一个位置的院落设计图,其区别只是场景分别处在四个季节,将图片上传到豆包工作,给豆包2.1Pro模型下达“根据这4张场景图生成一个包含四季变化的写实3D场景。”大模型即可据此制作出可交互的3D模型。

  这一要求看似简单,实则近乎苛刻:没有多角度照片,没有结构示意,没有建模参数,传统工作流里这远远不够造出一个3D场景。而豆包2.1Pro要做的,恰恰是仅凭这张图,“脑补”出整个庭院的三维世界。

  最后,在豆包2.1Pro生成的“3D庭院”中,记者看到了一个完整的全视角庭院场景,虽然只给出了一个角度的照片,但该场景的视角却是动态的,可以旋转、拖动。尤其是其还包含了四季的细节,包括雨点打湿地面、秋叶飘落等等,光标碰触到水面,还会产生涟漪。

  在传统工作流里,“从设计图到3D模型”意味着多视角图纸、材质参数、逐层建模,往往需要一个团队打磨数周。而现在,一张设计图就完成了从“看”到“写”的跨越——多模态编程把图像理解与代码生成接在同一条链路上,让视觉信息直接变成可运行的软件成果。借助VLM能力,模型如今可直接读懂设计稿、图纸甚至操作录屏,将其转化为前端代码和游戏逻辑,直指前端网页设计、游戏开发、3D建模等交付需求。

  类似的“多模态实战”不止这一场:开源游戏Luanti(约38.7万行代码、1000个真实历史问题)中,多个子Agent(智能体)连续运行近36小时,将83%的问题修复至可合并标准;没有文档的28万行Java老ERP系统,靠一段录屏加几张草图,就开发出了跑通完整链路的移动端页面。

  几场测试指向同一结论:模型读得懂设计图、录屏、残缺问题这些“非文本”的工程信息,并把它们变成代码。

  亮点2:

  多模态 AI编程落地生产线的“必修课”

  为什么多模态对AI编程如此关键?一个常被忽略的事实是:真实工程里的知识,大量不在文档里——它们藏身于设计图、界面、录屏,甚至老员工的操作习惯中。纯文本代码模型天然“缺一条腿”,而多模态补上的正是这条腿。

  除了上面记者所做的测试,在本次豆包2.1Pro的更新中,该模型借助VLM能力可直接读懂设计稿、图纸和操作录屏,将视觉信息转化为前端代码和游戏逻辑,Web 3D与游戏场景效果明显提升。

  这背后是一次交互范式的迁移:从“人学习机器的语言”——代码、PRD、接口文档,转向“机器看懂人的表达”——随手画的草图、录下的操作、屏幕上的演示,多模态正在成为新的编程界面。

  事实上,早在今年6月豆包2.1Pro发布时,该模型就已在编程、智能体、视觉语言模型三大方向上跨越“生产级质变点”,火山引擎总裁谭待彼时表示,只有跨越“质变点”,模型才能真正满足企业与个人在生产场景中的使用需求。此次0915版本历经约3个月快速迭代,更懂复杂代码仓库,面对跨文件、长程问题能定位根因并修复,端到端开发能力更强,并支持1M超长上下文。

  让多模态编程真正走向可用的,还有成本与效率的优化。据了解,此次更新中,图像推理和视频推理场景的Token消耗比上一代减少30%以上,综合使用成本进一步下降——对企业而言,这意味着AI从“能演示”走向“用得起”。

  与此同时,字节跳动在多模态上的底座优势也在显现:豆包2.1系列模型在视觉理解、Computer Use、Mobile Use等公开测试集上处于全球第一梯队,Seedance、Seedream、Seed Audio分别在视频、图像、音频创作领域领先,为“看图写代码”这类跨模态任务提供有力支撑。

  当代码、图片、视频在同一套模型里顺畅流转,AI编程才真正跨过“能写”与“能交付”之间的门槛。对开发者而言,多模态不是锦上添花,而是AI开发从实验室走向生产线的必修课。豆包2.1Pro的这次更新,只是这门课交出的又一份作业。

郑重声明:用户在财富号/股吧/博客等社区发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,与本网站立场无关,不对您构成任何投资建议,据此操作风险自担。请勿相信代客理财、免费荐股和炒股培训等宣传内容,远离非法证券活动。请勿添加发言用户的手机号码、公众号、微博、微信及QQ等信息,谨防上当受骗!
作者:您目前是匿名发表   登录 | 5秒注册 作者:,欢迎留言 退出发表新主题
温馨提示: 1.根据《证券法》规定,禁止编造、传播虚假信息或者误导性信息,扰乱证券市场;2.用户在本社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。《东方财富社区管理规定》

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-34289898 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:021-54509966/952500