赛事夺冠背后:国产类脑芯片,正在打通从实验室到产业的闭环

2026年,第34届ACM国际多媒体会议(ACM MM 2026)Egolink挑战赛上,中科(深圳)无线半导体有限公司联合广西大学团队,凭借类脑跨模态融合认知技术夺得冠军。这不仅是一次学术竞赛胜利,更揭示机器人从“感知”迈向“认知”的关键路径——分布式类脑架构。当行业争论大模型上云还是端侧部署时,该团队通过“IDPU小脑分布式+低算力GPU协同方案”给出答案:原本需要旗舰级GPU的多模态大模型,可由中低算力GPU协同机器人端侧多颗IDPU专用小脑芯片分布式部署计算。

ACM MM由美国计算机学会主办,是计算机视觉与多媒体处理领域顶级学术会议。本届Egolink挑战赛由蚂蚁集团和浙江大学联合发起,直指具身智能痛点:机器人不能只“看见画面、听见声音”,还需理解场景背后的社交关系、情绪因果与事件逻辑。

夺冠方案核心是“芯片+平台+传感+工具链”端侧一体化技术栈。依托CT-Unite RMCS V1.0机器人多模态认知开发插件架构,结合CT-2001A IDPU分布式低时延类脑神经网络加速架构,对CT-HS01 4D光谱传感器采集的事件、视觉、深度、音频多源信息完成跨模态精准对齐,打通视觉感知、环境理解、语言解析与动作交互全链路。IDPU承担多模态认知决策、神经网络加速、低时延感知、运动控制与驱控一体化任务;分布式架构支持各关节控制芯片组成局域计算网络,类似章鱼神经系统分层协同。

依托IDPU端侧分布式计算架构,团队将原100TFLOPS支撑的云端模型降至38.8TFLOPS端侧部署:认知推理由GPU承担,多模态算法融合、时序对齐与实时加速由分布在各关节的IDPU单元就近完成。这带来端侧自治,延迟更低、隐私性更好,离线环境也能稳定工作,使具身智能从“必须联网”走向“端侧自主”。

产业意义方面,本次夺冠印证我国类脑芯片与多模态融合认知技术在具身智能物理感知领域已跻身国际第一梯队,并验证RMCS V1.0端侧一体化技术路线。中科(深圳)无线半导体有限公司后续将迭代IDPU芯片硬件、升级RMCS开发平台,联动科研院所与产业链伙伴,推动国内机器人类脑芯片产业走向全球市场。