? ? ? ?多模态大模型正在给智能硬件带来革新契机。 ? ? 机器人、XR等硬件产品本质上都具备智能系统属性,这些智能系统的感知、控制、决策等底层能力都来自AI。而在多模态大模型出现后,AI在理解人、和人交互方面的能力上将再进一步,不再只依赖语言和文本,而是可以更好地识别肢体语言、面部表情、语气等。 ? ? 有研究显示,面对同样的任务,数据维度单一的小模型的运行成功率只有20%-50%;而如果用大模型去运行,成功率可以高达75%以上。这证明在多模态数据结合大模型加持下,机器人的感知、决策、人机交互、家庭复杂场景内自主移动、复杂任务成功率等各方面能力有望全面提升。 ? ? 虽然多模态大模型对机器人性能将有所提升已成共识,但具体而言,新一代AI会为智能系统解决哪些悬而未决的问题?在多模态大模型的加持下,智能系统将生长出哪些能力?笼统的判断意义不大,过去几个月我们尝试推演了其中的技术突围和产业落地可能。本期「通向AGI之路」中,蓝驰创投合伙人曹巍将与我们共同想象新一代AI在智能系统的感知、控制、决策、交互等环节上的进化可能。 01?感知系统 ? ? ? ?未来,多模态数...