藏在VPU里的玲珑棋局

a2a4f4aadb086f72e25cc02120a94f1f.jpeg

最近ChatGPT引发了全球范围内的AI热,随之而来的是与AI算法紧密相关的AI计算与AI芯片又一次火爆了起来。但事实上,大语言模型能够驱动的算力增长是有限的。根据相关数据,未来有70%-80%的AI计算任务将发生在机器视觉与多模态领域。因此,真正的AI时代,其实是视频计算的时代。

3b62b970cf70637ad7e313a6659dda31.png

直播、短视频的持续热络,各种设备形态与行业场景对摄像、视频能力的需求,使专用的视频计算能力与处理单元将成为时代的刚需。

我们此刻正在,并且未来长期将生活在一个无处不是屏幕,无处不是视频的世界里。人们对高清、高帧率的视频需求,从来都是有增无减的,而经典计算结构中的CPU+GPU体系,已经无法满足海量视频业务的处理需求需求,于是视频处理芯片VPU(Video Processing Unit)应运而生。

VPU究竟能做什么?它的应用方向和市场格局处在怎样的阶段?让我们打开这枚小小的芯片,一起进入VPU的玲珑棋局。

观局:为什么需要VPU?

6a001850c88c016d5b5b565e651e3a49.png

这盘棋的开端,我们需要来了解VPU的出现的必然性是什么。

在目前阶段,无论是C端还是B端用户,对高清视频(4K/8K)都有着愈发清晰强烈的需求。作为普通用户,我们期待着直播、短视频、VR的高清体验持续升级,而企业则需要提升在线会议、工业视觉、自动驾驶等领域的高清视频能力。整体而言,我们处在冲向4K泛在化、8K落地应用的关键节点上。

但向高清视频的冲刺,却会带来视频编解码方面更高的算力消耗与网络成本。尤其对于算力而言,当海量视频编解码需求出现时,传统的CPU计算方式缺乏针对性,处理效率低,并且会带来能耗与部署空间的浪费,综合成本过高。GPU处理视频编解码的能力更好,但其资源利用率和浮在灵活性依旧不足。尤其使用GPU来处理编解码任务,往往会陷入驱动程序与处理器不兼容的问题,从而导致大量任务无法正常运行。

6104e34717bbc40942b44ecdfd59c4f1.png

专业的芯片做专业的事,是这个时代半导体产业发展的核心命题。视频任务既然让CPU或GPU都有点难以处理,那么VPU这种编解码更加灵活,处理能力更加具有专业性的芯片也就应运而生。

VPU瞄准的,实际上是一个非常大的机会。

ad7823e65d46d1b6a0f89649dc1ba4fd.png

落子:VPU的应用与考验

就目前情况来看,VPU的应用领域与关联场景非常丰富。这是因为视频正成为无处不在,充斥在生活各个角落与产业各个领域的基础信息样态。在云端,短视频和直播平台每天要处理海量的视频编解码任务,而在端侧,摄像头、无人机、手机、PC等各种设备都具备拍摄视频和播放视频的功能。

这也让VPU的落子主要呈现在两个领域。一方面是在云端成为数据中心的一部分,以应对海量视频数据的加速需求;另一方面是在终端侧,与手机、汽车、安防、无人机、AR\VR设备结合,提高设备的视频编解码性能,降低视频处理所需的功耗与时延。在视频处理需求爆发式增长的今天,产业各界对VPU也提出了一系列新的需求,我们可以将其总结为三个能力:

1.高清编解码能力:VPU需要应对4K甚至8K的编解码,满足泛在化高清的落地需求。如今,在线会议、工业质检、安防等应用也在升级4K,无处不在的泛化4K,已经成为各界对视频处理能力普遍而广泛的需求。

2.软件环境兼容能力:VPU要能够灵活适配不同的操作系统与软件环境,从而保障视频应用的软硬兼容性,避免因软件问题导致资源措置与兼容难题。

3.硬件场景适配能力:VPU需要灵活适配不同的硬件特性,从而降低端到端时延,提高编解码处理效率,以此来应对不同硬件体系对VPU的需求。

在两大领域、三大能力的框定下,VPU的棋局已经愈发清晰。这盘棋,也确实吸引到了各界棋手的加入。

争势:一场千亿规模的棋局

572ec7caea11d997c0158e70577943f8.png

目前阶段,VPU的产业实践与市场发展处在高速爆发期,各个领域的互联网公司、科技企业都加入了这项关键技术的布局。其中比较有代表性的,是2021年4月,谷歌发布了自研的Argos VCU。在那之后,在流媒体、短视频、直播领域具有优势的企业,纷纷开始布局VPU。

比如说,腾讯自研的视频转码芯片“沧海”,已于2022年3月成功流片。Meta、字节跳动、快手等互联网大厂纷纷启动了VPU布局。尤其值得注意的是,过往半导体投入并不多,但高度依赖视频业务的字节跳动与快手都布局了VPU,足可见业界对VPU技术的重视。有数据认为,VPU将在未来成长为千亿人民币规模的市场,目前来看极有可能。

但互联网、流媒体厂商布局VPU,还属于跨界提前布局,其效果还需要几年时间显现出来。而业界在目前阶段,则更需要成熟、稳定的VPU产品进行支撑。

70bd8fd9ce539e0432f2f443ea76dacb.png

比如说,此前安谋科技发布了第二代VPU产品“玲珑”系列V6/V8。这两款产品对应市场主流的4k\8k实时解码需求而生。具有配置灵活可定制、编解码性能优异、面积小等特点。在硬件场景的适配上,玲珑V6/V8既可以面向数据中心场景,也能够与摄像头、汽车、智能家居、移动设备结合;在软件兼容问题中,其已经完整实现了Android和Linux驱动,以及上层一些应用框架支持,可以满足各种消费类产品、云端以及嵌入式场景的需求。

总体来看,VPU市场应用处在巨头进驻、高速爆发、产业应用性广泛的阶段,这些特征基本预示了VPU赛道未来的潜力价值。

未来,高清视频与机器视觉将无处不在,VPU的身影或许也将如此。

26967075ff51f91cb237a1e52f206a30.gif

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/15928.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

对话小红书剑寒:如何跨方向技术融合,全局优化打造更智能的音视频系统?...

编者按:在 AI 时代,随着 ChatGPT 掀起技术狂潮,构建更智能的音视频系统已经成为音视频领域从业者的共同目标。 然而,音视频系统的智能化,每个从业者对其都有自己独特的视角和理解,正如“一千个人眼中有一千…

那些年转行做程序员的朋友,如今怎样了

这篇文章记录了砍老师亲历的15年前后转码同学的后续,有一定时代背景下的参考意义,分享下。 砍老师:本文流水账记录一下从2015年毕业以后我身边的同学,朋友的转行互联网的故事,以及作为一个旁观者的感想和反思。 链接:https://zhua…

英伟达GTC发布会—AI的决定时刻

一.加速库 NVIDIA率先推出加速计算,着力解决普通计算机无法解决的问题。加速计算并非易事,它需要从芯片,系统,网络,加速库,到重构应用的全栈发明。 加速后,应用可以获得难以置信的速度&#xff…

音视频技术开发周刊 | 288

每周一期,纵览音视频技术领域的干货。 新闻投稿:contributelivevideostack.com。 YC爆发AIGC潮,100项目完整盘点 硅谷顶级孵化器Y Combinator冲向AI创业者,2023冬季孵化营一口气选了百家AI相关的创业项目,占到今年总孵…

谷歌云开启GPU算力狂飙,驱动AIGC时代加速到来

‍数据智能产业创新服务媒体 ——聚焦数智 改变商业 随着人工智能的飞速发展,尤其是大型AI模型、AIGC的崛起,对AI算力产生了巨大的需求。以GPU为核心的算力供给,已经成为大模型、AIGC乃至整个智能产业发展的关键基础设施。因此,对…

互联网成围城,“转码”神话破灭?身在其中的程序员何去何从

前言 在数字化的时代,程序员的角色正在变得越来越重要,尤其在互联网行业,程序员的薪资和发展前景都是非常吸引人的。然而,随着市场的发展和变化,互联网行业也在悄然发生改变。近年来,"转码"成为…

恐怖的GPT4,轻松解决支付宝乱码问题!

最近有反馈说支付宝的理财页面出现了中文乱码,估计不少小伙伴和我一样,都惊呆了😮!阿里这种大厂还能出现这种低级错误? 难道人力都投入到“通义千问”的突然发布上了? 那借这个机会,我就来和大…

一个时代彻底结束了

你好,我是厂长。 之前有很多读者咨询我说:当下的互联网前景怎么样?还有必要转码吗? 不管是非科班的朋友,还是正在学习计算机专业的同学,相信大家都有这个疑惑,因为职业的选择,不仅关…

只知道ChatGPT?偷偷告诉你金融民工都在学的13个王炸金融AI工具,搞钱效率提升10倍!

要论金融民工的日常工作,读报告绝对排在第一位。 大量的财报、研报、背调资料、会议记录等等,动辄一份就几十页、上百页,导致很多朋友一看到报告就头疼。 下面这些AI工具,可以帮我们快速总结报告的主要内容,在短时间内…

开源赋能 普惠未来——回顾全球数字经济大会及开放原子全球开源峰会(Intel专题)

一、峰会背景 2023年6月11日至13日,中国北京迎来了一场全球数字经济大会和开放原子全球开源峰会的盛会。这次大会在北京北人亦创国际会展中心隆重举行,为来自世界各地的数字经济和开源社区的代表们提供了一个共同交流、合作的平台。 本次大会以"开…

AIGC来了,你的版权还安全吗?

引言 |人工智能生成内容(AIGC)是热度居高不下,据Gartner预计,到2025年,AIGC将占全球所有生成数据的10%,以ChatGPT、Stable Diffusion为代表的现象级应用受到强势追捧,AIGC毫无疑问是强有力的生产…

比ChatGPT更好用的Claude来了

比ChatGPT更好用的Claude来了,不需要魔法上网!!! claude官网 点击 add to slack slack跟discord有点类似,先要去slack注册账号 登录之后就添加创建一个工作区 添加 不过现在已经停止添加了,会出现App u…

ChatGPT的竞争对手:Claude 简介

Introducing Claude 克劳德简介 After working for the past few months with key partners like Notion, Quora, and DuckDuckGo in a closed alpha, we’ve been able to carefully test out our systems in the wild, and are ready to offer Claude more broadly so it can…

ChatGPT被超越了?OpenAI核心成员出走,打造Claude模型

文|衡宇 萧箫 源|量子位 因不满老东家成为微软附庸,11名OpenAI前员工怒而出走。 如今带着“ChatGPT最强竞品”杀回战场,新公司估值50亿美元,一出手就获得3亿美元融资。 这家公司名叫Anthropic,新推出的聊天…

GPT前2代版本简介

承接上文ChatGPT进化的过程简介 2018年,Google的Bert和OpenAI的GPT绝代双骄,两者非常像,都是语言模型,都基本上是无监督的方式去训练的,你给我一个文本,我给你一个语言模型出来。 GPT前两代没有什么特别的…

强人工智能时代,区块链还有戏吗?

最近很多人都在问我,ChatGPT 把 AI 又带火了,区块链和 Web3 被抢了风头,以后还有戏吗?还有比较了解我的朋友问,当年你放弃 AI 而选择区块链,有没有后悔? 这里有一个小背景。2017 年初我离开 IBM…

chatgpt赋能python:Python抽奖程序:让彩票游戏更加有趣

Python抽奖程序:让彩票游戏更加有趣 随着科技的进步,彩票抽奖游戏已经成为许多人喜爱的活动之一。为了增加游戏的趣味性和公正性,许多抽奖游戏采用了Python编程语言来实现程序。本文将介绍Python抽奖程序的基本原理和使用方法,让…

独立开发者案例:每周4h月入数万刀;国家数据局与时代红利;创业前先买个域名;工程师成长最重要的是什么 | ShowMeAI周刊

这是ShowMeAI周刊的第6期。聚焦AI领域本周热点,及其在各圈层泛起的涟漪;关注AI技术进步,并提供我们的商业洞察。欢迎关注与订阅!👀日报合辑 ⌛ 独立开发者案例:每周只工作4小时,独立开发者打造月…

王炸-GPT4.0的新能力与商业价值

转自微信公众号:嵌入式单片机之家 有多王炸 ? GPT-4 可以接受文本和图像输入,允许用户指定任何视觉或语言任务。具体来说,它在给定文本和图像输入的情况下能够生成文本输出(自然语言、代码等)。在一系列其它…

OpenAI宣布漏洞赏金计划,最高奖金2万美元

安全问题,已经成为 ChatGPT 和 GPT-4 等 AI 大模型是否能够大规模应用在各行各业的重要问题之一。OpenAI 也因为这一问题受到了业内人士、监管部门的诸多批评。 今天,OpenAI 官方发布了一篇名为 “Announcing OpenAI’s Bug Bounty Program” 的博客文章…