据介绍，双方通过独家数据合作和定向搜索优化，进一步提升了豆包识别和讲解的准确性。本次展览期间，观众可随时通过豆包App的“视频通话”功能或拍照提问方式，获取针对具体展品的专业讲解，即使轻声提问，豆包也能准确识别。同时，豆包还提供通用和亲子两种解说风格。

　　记者注意到，这也是国内AI产品成为美术馆官方讲解工具的首个案例，标志着“AI+文博”落地迎来新的模式。

　　“我们希望AI解说能够成为连接观众与国际艺术瑰宝之间的智慧纽带，希望豆包让看展更美好。”陆家嘴集团副总经理、浦东美术馆董事长李旻坤表示，此次浦东美术馆与豆包的跨界合作，让艺术“千人千面”的风采得以呈现，美育资源也将突破时空限制。

　　在李旻坤看来，引入AI是文博产业发展的必然趋势：“经常看展的朋友一定能发现过去几年我们展览行业的许多变化，这些都是科技改变生活的绝佳案例。”在她看来，展览的物理空间一直以来制约着内容的呈现，“从早期小展签到后来大展签，再到扫二维码了解作品信息，我们一直希望能增加更多的内容。”而随着AI的引入，不仅作品本身，展品与展品之间的衔接也能扩充更丰富的内容。

　　“如果豆包的信息足够准确，它就可以极大地，裂变式地丰富大家对于艺术作品的感知和体验，是非常有意义的事情”李旻坤说道。

　　一直以来，美学与艺术被视为AI时代独属于人类的最后高峰，此次AI助手应用于艺术领域也被视为行业又一次全新探索。

　　“AI和用户的交互，本质上是一种对话体验。”字节跳动副总裁朱骏表示，此次从产品设计角度来看，团队希望豆包能在观展过程中，通过共情式的提问和启发式的对话，把用户已有的感受和经验调动出来，形成更有参与感的理解过程。

　　谈及项目的难点，豆包逛展项目负责人表示：“在博物馆场景中运用AI讲解，最大的挑战是保证内容的准确性。模型不仅要能区分外观高度相似的文物、理解小众且缺乏公开资料的展品，还要能在观众移动观展、从不同角度和距离观察同一件展品时，始终保持稳定识别。”

　　该负责人以现场两件相似的瓷器举例说明：“比如这次展览中有一件伊朗15世纪的《牡丹纹盘》，其风格与明代永乐年间的青花牡丹纹盘非常接近，这就要求模型必须从细节入手进行精准区分。”

　　据介绍，为实现展览场景下的高可靠讲解，豆包与浦东美术馆通过独家数据合作与定向搜索优化，进一步提升了其在文物识别与内容讲解方面的准确性，并在交互中支持连续、深入追问。

　　负责人告诉记者，此次豆包运用的视频讲解功能基于Seed1.8模型的视频理解能力。目前，Seed1.8在视频感知、流式、视频理解方面都达到了SOTA水平。它不再局限于“拍图、发送、提问，再拍图、再提问”模式，而是能持续理解观众眼前不断变化的视角和场景，从而实现连续、自然、像人一样的对话交互。

　　此前，豆包就曾与中国国家博物馆、中国钱币博物馆、河南博物院、山东博物馆、安徽博物院、成都博物馆以及洛阳博物馆七家国家一级博物馆达成合作，共同打造数字化看展体验区。