肇观电子:为机器人装上“火眼金睛”新质生产力看张江
发展“新质生产力”正成为我国推动高质量发展的内在要求和重要着力点。2024年2月29日,中共中央政治局会议指出,今年经济工作要坚持稳中求进、以进促稳、先立后破。要大力推进现代化产业体系建设,加快发展新质生产力。
上海张江,作为中国科技创新的重要引擎,以其独特的创新生态和前沿技术,不断孕育出具有划时代意义的新质生产力。为调研新质生产力的发展成果,张江科学城、财联社、《科创板日报》联合推出“新质生产力看张江”。
我们将深入一线采访:张江的企业如何创业创新,活力四射;张江的产业如何向“新”而行,提“质”而上。
本期专访企业:上海肇观电子科技有限公司(下称“肇观电子”)
肇观电子联合创始人、董事长冯歆鹏
《科创板日报》7月25日讯(记者 敖瑾) 冯歆鹏将自己称为“资深张江男”。
他仍清晰记得,2004年1月3日,他第一次踏入张江路18号,从中芯国际开启他在集成电路领域的职业生涯。
此后两年间的每一个夜晚,他都会穿过马路走到公司对面的公交车站,等待下班回家的巴士,“眼前是中芯国际灯火通明的办公大楼,身后则是一片黑暗的荒地,这就是当时的张江。”
2024年,冯歆鹏仍在张江继续着自己在集成电路行业的事业。他在这里拥有了一家创业公司——肇观电子,这已经是他创业的第八个年头,这家聚焦计算机视觉和AI端侧芯片及模组研发的公司目前已经小有规模,并在一级市场完成了9轮融资。张江也发生了翻天覆地的变化。参与并见证了张江过去20年发展的冯歆鹏说,“现在的张江,连一个停车位都很难找到了,发展很快,整个片区变化很大。”
对于冯歆鹏而言,把创业公司落在张江是自然而然的选择,他几乎没有想过张江以外的任何地方。“在张江,公司可以实现高效率发展,因为很多合作伙伴都在这一片区,比如客户离我们不到2公里,给他们提供支持就很方便。”
张江无疑是上海乃至全国的集成电路产业最集中的片区。截至目前,张江集合了集成电路产业链500余家企业,年营收接近2000亿元,占上海全市比重超过六成;其中107家成功实现上市,最近一家是在今年4月登陆科创板的灿芯股份,目前公司市值近70亿元。
冯歆鹏和肇观电子仍在与张江及整个国内集成电路产业共生共荣。
近年以来,以机器人为代表的智能制造领域的发展,给像肇观电子这样的AI视觉芯片企业带来了全新发展机遇。
冯歆鹏认为,当前,各国都在积极寻求通过提升效率的方式进一步推动生产力跃升,而采用包括人形机器人在内的智能设备,则是提高生产效率的关键手段之一。而提高设备智能的关键又在于视觉领域的突破,因而AI视觉芯片企业就有了广阔的施展空间。
冯歆鹏告诉《科创板日报》记者,计算机视觉与大语言模型的结合,将助力于机器智能实现对物理世界的理解。大语言模型的急速发展,成就了英伟达这一史上市值最大的公司,而随着像素信息在智能发展过程中的进一步爆发,他预期,在VPU(Vision Processing Unit)领域,未来必然也将诞生巨无霸企业。
具身智能实现的关键
创业前,冯歆鹏先后任职于中芯国际和AMD。在AMD负责CPU设计期间,他感知到了深度学习和智能设备的迅速兴起,包括英特尔、英伟达等当时也都开始重点投入人工智能领域。
看准了机遇点的冯歆鹏决定投身入局。于是,在2016年,他和搭档周骥共同创立肇观电子,由此开启AI视觉芯片的创业之旅。
在多个公开演讲和采访中,冯歆鹏都将肇观电子所做的事概括为一句话:让所有智能设备拥有视觉能力,“人看世界是通过眼睛的视网膜加大脑的神经皮层这样一套有机质的物质基础,智能设备看世界也需要一套硬件技术和物质基础,即光电转换的元器件,加上带有图像处理引擎的SoC芯片,这样一套硬件基础就是肇观电子一直致力于打造的、基于视觉处理器的芯片、系统或者相机。”
冯歆鹏认为,当前包括人形机器人等一系列智能设备的兴起及火热,本质上源自于世界各国对提高生产效率的迫切需求,但当前阶段,这些设备还尚未达到人类社会所期待的智能水平。“衡量机器臂或者机器人的智能水平或智能能力,很重要的一点是,它们是否能自主感知周围环境并做出正确判断,这个过程一旦有人类干预,效率就立马降低了。”
而与碳基生物物种大爆发相类似,冯歆鹏认为,硅基智能的大爆发,也将取决于视觉能力的大幅度提升。“眼睛这一器官的诞生,让生物体一下子拥有了趋利避害的能力,进而催生了物种大爆发,而视觉能力对于智能设备而言也有这同样重要的意义。目前,包括李飞飞在内的全球顶尖人工智能科学家都认为,解决计算机视觉方面的问题,有助于解决一半以上的人工智能问题。”
为达到赋予智能设备视觉能力的终极目标,在产品方面,目前,肇观电子推出了D、V、N系列AI视觉芯片,分别覆盖机器人、车载和消费三大领域;InferStudio开发平台及开发板套件,满足下游客户部署算法及后期调试等需求;以及Feynman智能深度相机,其采用主动光双目视觉成像技术,并自带神经网络和视觉加速引擎,主要应用于各类需要自主移动的机器人领域。
Feynman智能深度相机
冯歆鹏表示,VPU和GPU都是提升人工智能不可或缺的部分。“总体而言,GPU赋能的是少量信息生成大量信息,是想象和演绎;而VPU则是在大量信息中抽取少量信息,是感知和归纳。两者结合起来,就可以让具身智能更好地理解物理世界。”
技术与市场有着同等优先级
创业8年,冯歆鹏已经深刻意识到了市场和技术同等程度的重要性。对于包括机器人等在内的下游应用行业近年来的火爆,他归结为技术发展以及需求成熟的双重作用;而对于肇观电子自身的发展,他亦表示,团队的思维已经从最早认为的技术第一,转变为了现在所秉持的全部技术都是为市场服务的观念。
“我们属于技术人员创业,一开始会觉得拥有厉害的技术就应该能应用在所有地方,属于拿着一个自以为很厉害的锤子到处敲,但在这个过程中才慢慢领悟到,我们有什么和市场要什么应该如何更好地结合,包括客户的筛选以及如何配置合作,这些我们都做了很多探索。”冯歆鹏表示,目前,肇观电子已经探索出了最适合自身的打法,即以过硬的技术重点服务龙头客户,并沉淀行业的标准化方案。“总体而言,龙头客户的增速高于行业平均水平,且龙头企业的需求也相对稳定,可预期性较高。与此同时,龙头客户需求也具有可拓展性,这不仅有助于公司深入挖掘现有客户的潜力,也为横向拓展至其他潜在客户群提供了强有力的支持。”
据悉,肇观电子的产品,目前已经应用在国内多个头部人形机器人厂商,在更广泛的机器人领域,其也是多个市占率达到全国前列水平的机器人企业的独家供应商。
冯歆鹏表示,当前AI视觉芯片领域仍是一个处于高增长阶段的新兴市场,尚未形成稳定的市场竞争格局,因此各家企业仍然在抢占市场份额。对于肇观电子在这个市场中的定位,其表示,公司不会给自己贴上明确的标签,比如说只做芯片或只做模组;“核心是解决好下游客户的问题,因为不同的客户有不同层级的问题,但共性问题现在已经水落石出。可以肯定的是,视觉问题非常重要也非常复杂,在端侧视觉领域,也将诞生像英伟达一样的巨头公司。”
冯歆鹏无疑对肇观电子成为未来的VPU界巨头充满希冀。其表示,肇观电子在发展过程中,已经积累了解决成像、3D、AI、VSLAM、SoC这五大问题的能力,这构成了公司在行业内的核心竞争力,也支撑了肇观电子在机器人未来发展的漫长时间里实现长足发展。
3D深度图、AI及特征点图像输出
肇观电子在资本市场上亦受到关注。公开信息显示,截至目前,公司已完成9轮融资,投资方包括华山资本、工银投资、华兴新经济基金、中电海康、以及峰瑞资本等众多知名机构。
对于下一阶段的发展规划,冯歆鹏表示,重点仍然是服务好包括工业机器人、服务机器人、人形机器人以及车载等一系列下游客户,“这些客户起量非常快,对于他们而言,也需要稳定可靠的上游合作伙伴,得到技术、价格、供货稳定性和品质等各方面的保障,因此,服务好这些龙头客户,形成良好的共生关系,对于我们自身、客户以及整个行业领域的发展而言都是至关重要的。”
包括肇观电子在内的一系列计算机视觉解决方案公司,无疑将受益于这波下游需求的迅猛发展。《科创板日报》记者了解到,目前,浦东正在加快建设面积达4.2平方公里的张江机器人谷,重点推动开源研发、中试制造等产业链的关键环节功能集聚。也就是说,未来,肇观电子不仅将获益于张江在集成电路领域的集聚效应,还将深度融入围绕张江机器人谷形成的具身智能产业链条。VPU巨头的宏图伟愿,正从张江铺开。
独家!AI芯片创企肇观电子完成3亿元B轮融资,将发5款视觉芯片
芯东西(ID:aichip001)文 | 心缘
芯东西3月30日独家消息,上海AI芯片公司肇观电子NextVPU正式推出可广泛应用于安防、门禁、家用摄像等领域的N系列AI视觉芯片产品。
本次发布芯片以不同规格区分,分别为N163/N161/N160,与随后即将发布的D163(3D视觉)和V163(车载)芯片形成可覆盖计算机视觉应用领域版图的三足鼎立局面。
当前肇观电子暂未披露芯片落地具体进程,不过我们近期就能看到其合作伙伴相关产品的发布。
智东西获悉,肇观电子于2016年5月在上海张江集电港成立,创办不到四年已完成5轮融资 ,2018年底获得2亿人民币 A轮融资后。
仅时隔一年,肇观电子刚刚公布了最新一轮融资的细节,已完成3亿人民币 B轮融资。
记者了解到,此次融资的目的主要是为了研发队伍的扩充和产品线的拓展。
目前官方尚未披露具体投资方,不过从公开工商信息查询可知,自2019年11月至今其股东信息相继发生几次变更,应是新融资落地进行的调整。
一、3种算力规格,业界领先能效比
“肇观”取自“开启视觉”之义,NextVPU蕴意是Next Vision Processing Unit,即未来的视觉处理器。
肇观电子的核心业务也同它的名字一样,专注于AI视觉芯片和计算机视觉系统研发,将视觉赋予机器人、无人机、AGV、车载、智能家居等智领域。
肇观电子最新发布的N系列芯片基于新一代多核架构,分别提供8M/4M/2M 像素级别的图像采集处理能力,以覆盖各个细分市场的需求。
据悉,作为智能图像处理芯片的基础,在图像采集端,N系列芯片集成了业界领先的ISP内核 。
特别是对于业内一直关注的暗场景图像画质,肇观电子经过长期的研究积累,研发集成了新一代3D降噪、HDR专利技术,可保证智能产品适应各种恶劣环境的光照场景。
同时,在神经网络计算加速方面,经过过去几年与不同应用场景的终端客户深入沟通,多次迭代升级,肇观电子开发出了业内能效比领先的AI计算内核 。
本次发布的N系列芯片,分别提供2.4TOPS、1.2TOPS、1TOPS 的不同算力规格,以满足不同应用场景的需求。
从高性能、高帧率的工业检测市场,到专业安防,以及轻量AIoT市场的需求,均为客户匹配合理的解决方案。
考虑到不同精度需求,在数据格式方面,该系列芯片支持FP16/INT8/INT4等数据格式。
值得一提的是,在发布芯片的同时,肇观电子推出“InferStudio”开发平台,以帮助客户最快的完成项目评估及开发。
在AI终端产品开发中,算法产品落地难是算法工程师、终端设备开发者遇到的最大痛点之一。
InferStudio将为客户提供“一键式”开发体验,满足客户在算法评估、算法porting、优化升级等方面高速迭代的需求。
目前,InferStudio已支持业内主流算法框架,在合作伙伴项目中测试使用,并得到普遍认可和好评。
据悉,肇观电子将在今年Q2发布以Depth深度几何计算为特点,针对3D视觉产品、机器人SLAM市场、AR/VR市场的D系列芯片,以及针对需要高帧率、高性能综合计算平台的车载市场Vehicle的V系列芯片。
二、十年AMD老友联手创业
肇观电子由冯歆鹏和周骥联手创办。
冯歆鹏本科毕业于中国科技大学,研究生阶段在英国南安普敦大学主攻微电子。
周骥博士在2003年博士毕业于浙江大学CAD国家重点实验室,主攻基于图像的三维重建。
在成立肇观电子前,冯歆鹏曾在中芯国际工作,后来进入AMD芯片公司,和周骥成为同事兼好友。
▲冯歆鹏(左)与周骥(右)
冯歆鹏在AMD工作了10年半,曾任AMD芯片研发总监,带领着全球4个国家的百人团队,设计了55款CPU和GPU芯片,包括微软Xbox One的CPU、索尼PlayStation 4的CPU、波音飞机仪表盘GPU等。
周骥在AMD工作了13年,曾任AMD计算机视觉、图像信号处理、视频领域首席科学家兼架构师,负责算法和体系架构设计,曾为AMD多个GPU和APU芯片设计研发了几代硬件IP,并在中国和美国获得了多项相关专利。
2015年,AI技术开始从学术研究渗透到产业应用,但与此同时,算力的瓶颈也日益凸显,业界对高效能终端AI芯片的呼声越来越高。
在AMD期间,冯歆鹏作为芯片研发总监的任务之一,就是研究芯片计算的新兴方向。
当他看着人工智能从2012年的“星星之火”逐渐有“燎原之势”后,冯歆鹏决定,不能再等了。
2016年5月,冯歆鹏拉着同在AMD的“十年老友”周骥,一起在上海注册成立了肇观电子,冯歆鹏任CEO、周骥任CTO。
据了解,迄今肇观电子已获得5轮融资,累计融资金额超过5亿 人民币。
肇观电子团队现有200余人,研发人数约占总体人数的80%,团队成员来自中国科技大学、浙江大学、复旦大学、上海交通大学、英国南安普顿大学等知名高校,以及在AMD、Intel、高通、Nvidia、Marvell、华为海思、中芯国际、猎豹移动等国际知名企业。其核心成员在芯片设计、智能产品等领域创造了千万量级的产品及服务,具有资深的行业经验。
目前肇观电子在北京、上海等地设有分部,在全球范围内设有多家研发中心和运营中心。
结语:AI芯片将进入市场考验的关键期
过去几年,AI芯片从概念普及逐渐走向加速应用落地,技术创新和专利数量,不再是衡量AI芯片价值的唯一标准。
大浪淘沙已经开始,市场机会将逐渐聚拢于找准市场刚需和真正解决客户痛点的企业。
感谢阅读。点击关注上船,带你浪在科技前沿~
相关问答
视觉芯片公司主要有哪些?43人人智能集成人工智能操作系统FaceOS的“智能芯”44出门问问AI语音芯片模组“问芯”45芯驰科技V9芯片-ADAS及自动驾驶46肇观电子低功耗高性能SoC...
张江半导体有哪些公司?在上海张江半导体的企业,分别是:瀚博半导体、瀚博半导体、埃瓦科技、登临科技、齐感电子、曦智科技、亿铸智能、肇观电子、时擎智能。在上海张江半导体的企业...