芯原杨平中:芯原ISP将助力中国机器人企业与国际巨头同台竞技

7月3日,在上海浦东嘉里酒店举行的芯原股份“具身机器人专题技术研讨会”上,芯原股份ISP产品副总裁杨平中发表了题为“机器人之眼:智能感知与视觉系统”的主题演讲,系统介绍了芯原股份在机器人视觉感知领域的技术积累与最新解决方案。

从智能驾驶到具身智能:技术迁移与能力复用

杨平中首先介绍了芯原ISP产品线的发展历程。该产品线自2018年迎来首个客户,截至2026年第二季度,累计已服务超过80家客户,其中20多家分布在智能驾驶领域,已有众多客户的产品于去年开始落地,相关新车已上市销售。

目前,芯原ISP产品的市场应用覆盖多个领域:机器人、无人机是重要增量市场;汽车市场累计20多家客户;AI PC、平板和AI眼镜近年增长迅速;此外还包括传统AIoT领域。

面对人工智能和机器人方向的拓展,如何将底层技术、应用和方案从智能驾驶迁移到具身智能领域?杨平中表示,芯原在车规领域已积累五六年经验,在功能安全、IP核心技术更新换代方面,无论在竞品比较还是客户市场落地中均处于领先位置。这也为芯原开拓具身智能机器人市场打下了坚实的基础。

面向无人机、人形机器人、扫地机器人等应用,其中一大技术挑战在于:摄像头一定是移动的。比如,机器人会飞行、行走、奔跑。为此,芯原通过ISP8200-FS及ISP9X00等系列产品,引入了带有运动补偿的降噪技术(MCTF)、电子防抖(EIS)以及针对SLAM技术的底层优化,以应对更为复杂的空间运动场景。

机器人视觉系统的五大技术挑战

杨平中系统梳理了当前各类机器人的视觉系统配置。比如,特斯拉Optimus Gen3采用前向三摄、侧向双目、后侧单摄、顶部全局单摄的配置方案;优必选人形机器人Walker-S2和Cruzr-Sz也采用了多摄像头视觉架构;轮式机器人顶部配置了带深度感知的摄像头,用于避障和行走判断。

对于中大型机器人,典型视觉配置为:RGBD相机4到6颗,分辨率为1MP、2MP或3MP;双目RGB相机1到2颗,分辨率为720P、1080P或5MP;广角或鱼眼相机2到4颗,分辨率为2MP或8MP。这带来了极高的吞吐率处理需求与低延迟挑战。

他进一步指出,机器人形态多样,包括机器狗、无人机、送餐机器人、陪伴机器人、摄影机器人、扫地机器人、割草机器人等,每种形态对视觉系统的需求各有侧重,但整体的趋势是分辨率持续提升、数据量持续增长。

针对当前机器人视觉系统面临的共性挑战,杨平中总结了五大技术挑战:

第一是多摄像头管理,需支持5到12组摄像头,包括RGBD深度相机、双目相机、全景环视及高画质摄像头;

第二是高吞吐率像素处理,需支持1.5GPixel/s以上处理能力;

第三是高动态范围与低照度,需要140dB动态范围和低于0.1Lux低照度下的成像能力。第四是鱼眼和广角镜头的畸变校正;

第四是低延迟处理,从ISP数据采集到NPU分析决策的延迟是避障和高速运行的生命线。

第五是兼顾视觉系统的未来趋势。比如,视觉和深度摄像头分辨率和画质要求持续提升,移动影像处理能力,功能安全等。

芯原机器人视觉子系统方案:单芯支持16路摄像头

为了解决上述机器人所面临的技术挑战,芯原推出了面向机器人视觉的子系统方案,该方案基于芯原多年ISP技术积累和智能驾驶领域的技术沉淀。

具体来说,该解决方案可以实现单颗ISP支持多达16颗摄象头,多摄象头调度也是支持到硬件加速调度、可以让硬件IP效率可以达到比较高的利用率,从MIPI接收端到ISP输出也实现了超低延迟。借助硬件调度机制实现极高的ISP pipeline效率。芯原最新推出的CPP2000 IP在AI降噪方面表现卓越,能够在保持细节清晰度的同时有效去除运动物体的噪点;而第六代AI-WDR技术则进一步突破了传统高动态范围的限制,支持140dB HDR,解决了进出隧道等强对光场景下的成像难题。

除了视觉方案之外,针对机器人的应用,芯原还创新性地加入了运动传感设计处理,通过将IMU信息与图像信息进行高精度对齐,系统能够显著提升高速运动下的算法表现。芯原还有EIS电子防抖针对运动补偿技术还有软件算法或者硬件加速来适配运动场景。

杨平中还强调,芯原的ISP技术还通过ISO 26262功能安全认证,每一代ISP IP均经过严格验证,为机器人进入家庭等场景提供了安全保障。

“面向机器人领域,尤其是进入家庭与人密切交互的场景,芯原的ISP底层影像感知技术将助力中国机器人企业与国际巨头同台竞技,取得更大成绩。”杨平中在演讲结尾如是说。

编辑:芯智讯-浪客剑

芯原股份今年新签订单已达146.,相关资讯同步更新,热门话题深入了解,行业变化清晰解读
效仿三星美光台湾工会计划罢工,热点消息及时呈现,实用观点完整分享,更多内容持续跟进
开盘暴涨471.59%长鑫科技市,相关进展值得关注,行业变化清晰解读
为支持台积电扩产林德携子公司投资,更多内容持续跟进,相关进展值得关注
SpaceX将独家采用英伟达芯片,主要亮点集中展示,最新动态持续更新
大砍70%DRAM模组厂面临“断,事件脉络清楚整理,相关资讯同步更新,重点信息全面梳理
赋能万物AI安谋科技亮出“星辰C,相关进展值得关注,重点信息全面梳理,热门话题深入了解
2026年全球九大CSP资本支出,重点信息全面梳理,关注焦点及时追踪,重要细节逐步揭晓,相关资讯同步更新
灵睿智芯完成新一轮数亿元融资加速,精彩内容不容错过,相关资讯同步更新,热门话题深入了解
单季净利暴涨45倍铠侠NAND均,重点信息全面梳理,重要细节逐步揭晓,核心看点完整汇总
英特尔Intel18A良率进展超,事件脉络清楚整理,重点信息全面梳理
斥资107亿美元南亚科技建DRA,相关进展值得关注,精彩内容不容错过,相关资讯同步更新
天数智芯天垓300发布性能超越H,核心看点完整汇总,事件脉络清楚整理,主要亮点集中展示
英飞凌携手联发科赋能未来汽车智能,重要细节逐步揭晓,事件脉络清楚整理,实用内容深入说明
SpaceX将独家采用英伟达芯片,重要细节逐步揭晓,热门话题深入了解,核心看点完整汇总,最新消息全面呈现
WAIC意犹未尽8月南京ICDI,相关资讯同步更新,实用观点完整分享
昆仑芯M100曝光全国产对标H2,更多内容持续跟进,精彩内容不容错过,热点消息及时呈现
今年台湾半导体产业用电将达520,最新消息全面呈现,更多内容持续跟进
三大存储巨头放弃自研CXL控制器,真实情况详细说明,相关进展值得关注,发展趋势持续观察,行业变化清晰解读
WAIC镇馆之宝曙光8000全国,实用观点完整分享,主要亮点集中展示
Day-0支持摩尔线程完成美团L,精彩内容不容错过,关键信息快速掌握
中国光谷开建泛半导体洗净再生基地,事件脉络清楚整理,相关进展值得关注,核心看点完整汇总,重要细节逐步揭晓
AMDZen6MedusaPoi,相关进展值得关注,热门话题深入了解,热点消息及时呈现
开盘暴涨471.59%长鑫科技市,发展趋势持续观察,行业变化清晰解读
黄仁勋深度访谈关于AI监管中美竞,关注焦点及时追踪,重点信息全面梳理,重要细节逐步揭晓,热门话题深入了解
高通宣布完成对Modular收购,实用观点完整分享,事件脉络清楚整理,重要细节逐步揭晓
黄仁勋应该允许美国公司使用中国A,热门话题深入了解,关注焦点及时追踪,更多内容持续跟进
摩根士丹利博通将长期占据谷歌TP,重点信息全面梳理,更多内容持续跟进
爱立信携AT&T展示无人机侦测技,更多内容持续跟进,关键信息快速掌握,热门话题深入了解,发展趋势持续观察
中际旭创深夜紧急辟谣,热门话题深入了解,关键信息快速掌握,相关资讯同步更新

留下评论