12月3日“国际残疾人日”,百度文心联合海豚出版社共同推出“与众不同的AI绘本”智能体。该AI绘本智能体基于文心大模型5.0的原生全模态能力,能够将绘本中的文字、插画共同转化为语音,同时支持实时对话互动,以贴合儿童理解的方式进行讲述,为特殊儿童提供更易理解的听读体验。目前,“与众不同的AI绘本”智能体已上线百度搜索、文心一言、文心智能体平台、“海豚出版社”微信公众号等。
绘本是儿童成长的重要陪伴,但视障儿童往往无法感知画面细节,传统绘本中的场景、人物、色彩等信息对他们存在理解门槛,而当前的听读辅助工具多存在局限,如只能朗读文字、无法描述图片、内容较为固定、不支持孩子互动等。
“与众不同的AI绘本”智能体基于文心大模型5.0原生全模态能力,可以深度理解绘本画面中丰富的视觉元素,如场景的色彩布局、人物的表情动作、物体的形态特征等,进而为视障儿童精准构建出清晰、立体的画面情境。在具体讲述时,AI绘本智能体采用更贴合视障儿童的语言习惯进行表达,例如将“温暖的黄色太阳”形容成“像刚烤好的面包”,把“恐龙的牙齿”类比成“像妈妈梳子的尖尖”。
不只适用于视障儿童,AI绘本智能体还可以帮助其他孩子。比如,它能把复杂句式拆解成简单易懂的短句,帮助阅读障碍的孩子们建立逻辑关联;通过渐进式互动脚本和情感交互,引导心智障碍儿童从被动倾听转向主动表达。此外,很多父母没有时间陪伴孩子阅读,或不擅长把绘本内容讲得生动有趣,它可以提供个性化的阅读陪伴。如遇孩子不理解的情节,该AI绘本智能体还可以通过实时互动,随时回答小朋友们的问题,并通过引导式对话,鼓励孩子主动提问、多思考。
海豚出版社社长王磊表示,“通过与百度合作,结合文心大模型5.0的能力让我们帮助到更多渴望故事的孩子,这就是技术发展的意义。我们希望智能体能够走进更多特殊孩子的家庭,成为他们成长路上的好伙伴。”