对话安谋科技周华:编解码硬件的机遇与挑战

LiveVideoStack_ LiveVideoStack_     2022-12-14     142

关键词:

文 / 周华

策划、编辑 / Teresa

近年来随着AI技术的兴起,我们看到越来越多的标准组织正在或考虑在传统视频编码框架中增加AI的部分。一方面,这对于视频编解码的性能提升是利好的,但这也给硬件IP厂商带来了一定的挑战。对此,我们很荣幸地邀请到了来自安谋科技,视频编解码处理器研发负责人周华老师,来和我们聊一聊编解码硬件的机遇与挑战,以及介绍今年新推出的“玲珑”VPU处理器有哪些亮点。

周华,安谋科技视频编解码处理器研发负责人

周华先生现为安谋科技视频编解码处理器研发负责人。他拥有超过24年从业经验,曾在芯原微电子、泰鼎多媒体等多家半导公司从事多媒体SoC、视频编解码IP、GPU研发工作,历任设计总监、资深总监等职位。周华先生于2018年9月加入安谋科技,从零开始创建和领导安谋科技VPU团队。在周华先生的带领下,团队成功研发出具有业界领先水平的“玲珑”V6/V8VPU处理器并成功落地移动设备、安防、AR/VR可穿戴设备、智能家居、汽车及数据中心等领域。周华先生拥有哈尔滨工程大学学士及硕士学位。

LiveVideoStack: 周老师好,非常高兴您能受邀参与LiveVideoStack的采访。请您先和大家介绍下您自己吧。

周华:本人现为安谋科技视频编解码处理器研发负责人。曾在芯原微电子、泰鼎多媒体等多家半导公司从事多媒体SoC、视频编解码IP、GPU研发工作,历任设计总监、资深总监等职位。我在2018年9月加入安谋科技,从零开始创建和领导安谋科技VPU团队,带领团队成功研发出具有业界领先水平的“玲珑”V6/V8 VPU处理器,成功落地移动设备、安防、AR/VR可穿戴设备、智能家居、汽车及数据中心等领域。

LiveVideoStack:说一说您目前的一些工作和关注重点吧?可以为大家简单介绍下安谋科技。

周华:安谋科技作为芯片供应链上游的核心企业,在中国半导体产业里扮演着“基石”的角色。自成立以来,安谋科技依托领先的Arm全球生态深入做强本土研发,打造了包括“周易”NPU、“星辰”CPU、“山海”SPU及“玲珑”ISP&VPU等在内的自研IP产品矩阵,与本土芯片设计企业携手成长;同时,通过持续引入Arm最新架构技术,积极拓展Arm产业生态,来支持智能汽车、边缘计算、数据中心、智能物联网、移动设备等各个领域的发展需求,助力本土产业持续创新。

LiveVideoStack:随着AI技术的兴起及在各场景下的应用,海量、更高质量视频处理的需求也越来越高,对于硬件系统架构和算力性能的要求和挑战也越来越大,针对上述需求,安谋科技有哪些相应的工作和探索?

周华:针对于各个应用场景需求多样化的特点,安谋科技立足于本土需求,强化自研,坚持创新,已经推出了CPU、NPU、SPU、ISP和VPU等自研IP产品矩阵,我们在产品规划和研发中都会充分考虑场景、功能、算力、性能、功耗和面积等各方面的差异化需求。除此之外,未来还会考虑在特定场景下进行系统级的产品整合,进行开发及性能优化,满足客户对系统整体方方面面的需求。

LiveVideoStack:我们继续来聊聊AI与编解码,乃至扩展到整个多媒体技术。我们看到越来越多的标准组织正在或考虑在传统视频编码框架中增加AI的部分,这对于提供硬件编码IP的你们而言是不是新的挑战?我们也看到多媒体技术栈正在和AI结合,这对于你们是新的机会吗?

周华:视频编解码标准不断地致力于提升编码质量并降低码率,所以在视频编码框架中加入AI部分进行增强也是顺理成章的。对于硬件IP会有些历史包袱,比如标准的向前兼容问题、成本PPA问题等。随着标准的不断增加,这类问题会不断考验IP整体的架构,灵活的扩展能力等方方面面,而多媒体技术栈的不断增强以及与AI的结合等,对编解码IP提出了诸如前后处理等更多的功能需求。

此外,在扩展能力、快速适应市场能力、PPA平衡等方面的要求也越来越高。安谋科技VPU是多核处理架构,可轻松扩展,满足多样化的性能功耗配置需求,面临着很多新的市场机会和挑战。

LiveVideoStack:前不久,安谋科技发布了两款新一代处理器IP产品,能否为大家介绍下“玲珑”VPU主要面向的场景或需求有哪些?其所具有的最大优势或特性体现在哪里?

周华:今年7月,安谋科技推出了自研IP业务的最新成果——面向多场景应用的全新“玲珑” V6/V8视频处理器,这是为满足主流市场不断增长的4K/8K实时编解码需求而设计的,具有配置灵活可定制、编解码性能优异、面积小等优点。“玲珑”VPU主要面向视频监控、汽车、智能家居、移动设备及数据中心等应用场景提供高清视频编解码能力。

相应的技术亮点如下:

  • 多核处理架构,可轻松扩展,满足多样化的性能功耗配置需求。

  • 多重视频编解码器融合架构,支持各种主流超高清视频标准。

  • 集成 MMU,提高系统效率并降低系统复杂度。

  • 编码质量进一步提高, 满足不同应用场景对编码质量的需求。

  • 精准匹配本地市场需求,提供特定视频处理技术功能。

  • 全面的系统解决方案,提供配套的固件工具及软件。

LiveVideoStack:可以和我们聊一聊在探索新一代高效视频处理器设计的过程中遇到最难的问题是什么?您是如何克服的?

周华:首先各个场景的需求是非常多样的,除此之外,我们看到大家都希望IP厂商能提供高性能、高质量、低带宽、低功耗、低延时的产品,那么对于IP产品设计如何平衡各方面因素,满足不同场景的差异化需求,并达到卓越的产品稳定性和兼容性都是非常具有挑战性的工作。当然所有的这些工作都要在有限的研发资源和极有限的时间内完成就更加有挑战了。

我们依托安谋科技精良的人才储备,基于灵活扩展的产品架构,对于产品研发进行精细化管理,对于产品的商业模式也进行一定程度的创新,为客户实现针对不同应用场景的定制化需求,达到各方面的平衡。

LiveVideoStack:看到您将会在LiveVideoStackCon 2022 北京站大会「硬件技术开发与技术探索」专题参与演讲分享,能否给我们稍稍剧透下您要讲些什么内容?

周华:随着近年来 AI 技术的兴起,视频监控、汽车、智能家居、移动设备及数据中心等对高清视频处理有了越来越高的要求。因应此类新兴技术的挑战,安谋科技推出了全新视频处理器──“玲珑”V6/V8,为满足主流市场不断增长的 4K/8K 实时编解码需求而设计,并通过一系列智能权衡实现了极大优化,为所有合作伙伴提供灵活的组合和选择。

本次演讲将立足于产业及技术趋势,为大家详细地介绍“玲珑”VPU的架构和技术特点。

LiveVideoStack:好的,感谢您接受采访,期待您在北京站大会上的精彩分享。


直播|安谋科技“玲珑”v6/v8视频处理器概览

...有了越来越高的要求。为应对此类新兴技术的挑战,安谋科技推出了“玲珑”V6/V8视频处理器,以满足主流市场不断增长的4K/8K实时编解码需求。这款视频处理器针对主流市场的视频流媒体技术进行了大量投入,通过... 查看详情

报告:nvme存储系统机遇与挑战

很荣幸能够参加存储联盟主办,同有科技承办的“闪存预见新高峰”技术沙龙活动。在这个会议上和大家一起分享了NVMe存储系统遇到的机遇与挑战,从介质本身的特点、IO处理堆栈遇到的问题出发,给出了一些NVMe存储的设计思... 查看详情

视频编解码的新挑战与新机会

在过去的一年中,我们可以看到多媒体特别是音视频技术的能力在严峻的挑战下,为各行各业带来了巨大的变化。疫情过后,又会有哪些多媒体新技术、新实践呈现在大众的视野当中?为行业的发展与应用带来哪... 查看详情

npu芯片技术与市场发展杂谈

NPU芯片技术与市场发展杂谈推出新一代NPU!安谋科技应战AI新时代,要催化本土芯片创新2023年,万象更新,AI芯片产业亦恢复生机。在生成式人工智能(AIGC)热潮的催化下,澎湃旺盛的研发和应用需求,令算力产业空前兴奋,连... 查看详情

硬件编解码与软件编解码的区别

...有的超赞体验,这离不开硬件的支持。其中,编解码方式对串流效果有着直接且巨大的影响。什么是编解码编解码指的是用特定算法将数据进行转换和还原的过程,或将电脉冲信号转换成它所代表的信息、数据等的过... 查看详情

onevpl与ffmpeg/gstreamer硬件编解码器

...尔的媒体工程师——许广新,来为我们分享Intel在硬件编解码器中的最新研发进展。 文/许广新整理/LiveVideoStack 谢谢大家,下午来参加讨论。我是Intel开发者软件工程部门的工程师许广新,我们team主要负责多媒体框架,我... 查看详情

阿里巴巴黄贵谈存储新硬件带来数据库的机遇

...10月27日下午,2018中国计算机大会上举办了主题“存储软硬件之国产化挑战与机遇”的技术论坛,共同探讨存储软硬件栈上的关键系统与技术的国产化发展道路。论坛上,阿里数据库资深技术专家黄贵针对存储软硬件国产化进行... 查看详情

“人工智能技术驱动下的机遇与挑战”技术分享会圆满成功!

...博士等中科院计算所在大数据、人工智能方向走在尖端的科技工作者,讲述当前流行的创新发展、人工智能、深度学习、物端计算系统、精准医学落地应用等话题。会议首先由中科院计算所党委委员、教育处处长李琳老师,培训... 查看详情

arm中国原ceo被“罢免”,新指定“官方”:已获员工大力支持

...|郑丽媛出品|CSDN(ID:CSDNnews)5月5日,“安谋科技官方微博”发布了一则重要声明,其重点可概括为:2022年4月24日起,由刘仁辰与陈恂担任安谋中国联席首席执行官,公司法人于4月28日变更为刘仁... 查看详情

ai时代人文写作的机遇与挑战:“诗人”微软小冰启示录

...目的柯洁与AlphaGo的世纪对战之前,全球流量规模最大的对话式人工智能(ConversationAI)“微软小冰”,出版了世界上(也可能是人类历史上)首部100%由人工智能创作的诗集——《阳光失了玻璃窗》,一时之间赚足了人们的眼球... 查看详情

对话robinmarx:http/3和quic将带来重大机遇和挑战

策划、翻译:Alex技术审校:刘连响人物对话#004#6月7日,IETF贡献者、HTTP/3和QUIC工作组成员RobinMarx在推特上宣布:“历时五年,HTTP/3终于被标准化为RFC9114!”图片来源:推特这是互联网的重要时刻。作... 查看详情

对话robinmarx:http/3和quic将带来重大机遇和挑战

...们策划、翻译:Alex技术审校:刘连响RobinMarx人物对话#004#6月7日,IETF贡献者、HTTP/3和QUIC工作组成员RobinMarx在推特上宣布:“历时五年,HTTP/3终于被标准化为RFC9114!”图片来源:推特这是互联网的重要... 查看详情

安谋科技发布新业务品牌“核芯动力”,先手布局智能计算产业

安谋科技(中国)有限公司(“安谋科技”)举行“创芯生,赋未来”新业务品牌战略发布会,重磅发布“双轮驱动”战略以及新业务品牌“核芯动力”。新业务品牌的发布代表安谋科技引领智能计算产业... 查看详情

新发现,新挑战,技术出海的机遇与挑战丨pingcapdevcon2022出海专场

现在报名活动,有机会获得限定好礼哦!👆中国企业出海的格局和挑战正在发生重大改变。回到技术管理者熟悉的技术世界,过去两年的技术环境也发生了巨大的变化,开源软件与云服务的结合成为业界共识... 查看详情

ffmpeg硬件编解码nvidiagpu(代码片段)

另一篇:ffmpeg硬编解码InterQSV常见的硬件编码包括NvidiaGPU与IntelQSV两种,还有一些嵌入式平台如树莓派,瑞芯微等。首先理解一下概念,Nvidia中文名英伟达是一个厂商名字,GPU则是这个厂商生产的显卡里的一个... 查看详情

免费报名挑战与机遇同在,大步迈进全真互联网时代

...f0c;“元宇宙”、“沉浸式”等概念横空出世,挑战与机遇同在,我们不得不思考,哪些行业、产品和商业模式将最早受到全真互联网的影响?活动介绍腾讯云音视频基于在音视频领域21年的积累,构建 查看详情

这些数字化转型行业先锋,在机遇与挑战中倍道而进

...一步数字化转型的深入推进。数字化转型行业先锋们,在机遇与挑战中倍道而进。01银河证券|证券行业数字化转型先锋容器云平台实现快速响应业务需求支撑运营创新02中国银联|支付行业数字化转型先锋云运 查看详情

Opencv 编解码器选择对话框未显示

】Opencv编解码器选择对话框未显示【英文标题】:OpencvCodecSelectionDialognotshowing【发布时间】:2014-07-2507:12:44【问题描述】:我有以下代码CvVideoWriter*VideoWriter=cvCreateVideoWriter("D:\\Save\\filenme.mpeg",-1,10,cvSize(nWidth,nHeight),1);我已在Windows... 查看详情