5

如今电视上的标配,旗舰手机和电脑却用不上?

 1 year ago
source link: https://www.36kr.com/p/2033928627432707
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

如今电视上的标配,旗舰手机和电脑却用不上?

三易生活·2022-12-07 12:50
这个功能无法在手机与PC上普及的原因,或许有这些。

如果此前就有关注我们三易生活的相关内容,想必有些朋友可能还记得,过去我们曾不止一次地为大家解析智能手机与PC上的“AI功能”。

v2_e97de77cd2e54800997f8b553a8f7819_img_000

比如,我们曾多次提及智能手机NPU(神经网络处理单元)的发展历程,曾质疑过智能手机上“真正能适配、调用硬件AI能力”的APP适配进度,还曾批评过如今基于AI加速的程序在PC上寥寥无几这个现状。

但令人欣慰的是,在我们提出过这些质疑后不久,许多现象都得到了改善。比如在2022年底亮相的这一轮新款旗舰机型上,各家都明显强化了对不联网、仅依靠本机算力驱动的“离线AI”功能。

v2_26fb625132424398a5d4a8f902c84a9a_img_000

而在PC端,自Intel的11代酷睿后,家用级CPU也开始普遍引入AI加速能力(本质上也就是16位整数指令集)。在它们的助推下,诸如AI底层性能调度、基于面部识别的自动锁屏,以及AI语音助手之类的功能,也开始普遍出现在了许多笔记本电脑上。

但有一个问题却始终困扰着我们,那就是对于消费者而言理应很实用、而且技术门槛照说也不是特别高的“在线视频AI增强”功能,如今无论是智能手机、还是在PC上似乎都依然相当少见。而这,又是为什么呢?

AI视频增强真的很有必要

在进入正式分析前,我们首先要先给大家来讲一讲,为什么我们觉得“在线视频AI增强”这个功能很重要,以及它在技术端到底有哪些“秘密”。

众所周知,对于如今的绝大多数视频网站而言,虽然它们陆续推出了诸如4K、120帧、HDR这些高品质的服务。但一方面,这些高品质的在线视频服务基本上都是要付费的,不交钱往往就只能看看720P、甚至可能低到只有360P的画面。

v2_acc3a93f5fbf470eb1c60afd6c2d6e4f_img_000

另一方面,高品质的视频也不可能覆盖到所有的内容,毕竟4K、HDR的内容是需要在拍摄、制作时,就用专门的设备来支撑。因此对于很多经典的电视剧和老电影来说,它们注定只可能有相对“低清”的片源。

v2_6b8296663cf74c5392e8c89f7f328db0_img_000

在这种情况下,基于AI技术、在本机运行的“视频增强”功能,就确实很有必要了。通常来说,这类“AI视频增强(业内一般称之为AIPQ)”算法包括但不限于以下这些。

AI超分(将低分辨率的视频实时转换为高分辨率,增强细节纹理)

AI色彩增强(通过识别画面里的场景,智能地强化色彩表现、让色彩更鲜艳)

AI运动增强(通过插帧算法,让运动画面看起来更流畅)

AI景深强化(通过图像语义算法识别画面里的“主体”和“背景”,智能增强主体的清晰度、让背景虚化更加明显)

AI HDR转换(通过算法将SDR视频的0亮度、对比度增强到HDR级别,强化视觉震撼感)

说到这里,如果你十分关注高端电视产品,可能会觉得有些眼熟了。没错,以上所有这些能对在线视频品质、观感进行实时增强的AI算法,在如今的一众高端电视上基本都有搭载。而众所周知,即便是如今的顶级电视SoC(比如联发科Pentonic 2000),它们的制程也好、架构也罢,甚至包括AI算力,其实都要远差于智能手机的旗舰SoC,以及PC上带有AI加速能力的CPU和显卡,并且差得非常非常远。

v2_ebe5695d6e314cc89b1d4c2996d251ab_img_000

于是这也就意味着,如今高端电视里的这一大批“AI视频增强”功能从算力的角度来说,是完全没道理不能在主流智能手机,以及那些相对比较新、比较高端的PC里运行。然而现实情况却是,类似功能在手机里要么非常少见、要么就是被极度“简化”,至于PC里的AI视频增强功能更是几乎见不到。

视频增强的缺位,可能因为它是付费功能

是的,针对在线片源进行实时的、基于AI技术的观感强化,对于如今的电视行业来说已经是非常成熟的技术了,并不存在着功能开发方面的难度。

v2_a8c3a19ac6ea490190853052871dab90_img_000

即便是基于11代酷睿+RTX40系显卡的AI算力,早已经是旗舰电视的数百倍

与此同时,无论是对于主流的中高端手机,还是对于现在PC上一些相对较新(11代或之后的酷睿处理器、7000系AMD锐龙,以及RTX20系之后的显卡)的平台来说,它们所具备的AI加速算力,要远超过哪怕最先进、最强的智能电视SoC数倍、数十倍,甚至可能数百倍之多。所以说它们“带不动”实时AI视频增强功能,显然是站不住脚的。

那么是怎样的原因,导致类似功能在手机、PC上目前依然非常少见,甚至可以说是“缺位”呢?综合现有的相关信息,我们基本可以有下面这些推测。

v2_4b58b00ae05d47c899f1b0de0b24d75e_img_000

到目前为止,只有极少数手机厂商会在产品里搭载较为完整的AI视频增强算法

首先,我们三易生活针对“AI视频增强”的这个功能,先后与几家头部SoC厂商进行过沟通。得到的回复,基本上都是他们其实有在芯片的功能集里,提供相对丰富的、基于AI的视频增强算法供手机厂商选择。

但是这些AI视频增强功能并不是默认开启的,它们需要手机厂商支付授权费才能够启用。换句话来说,这些“AI视频增强”功能并不是免费的,它们会增加产品的成本。

v2_98063fdd731a4e13bd2e469bddd472c8_img_000

这样一来,对于手机厂商而言,他们当然就要考虑一下了。比如说,如果是电视,那么“AI视频增强”功能的授权费就是必须要出的成本,因为这是电视的核心功能、不能没有。但是对于手机、PC来说,则显然不是“必备”的,所以被“节约”掉也就不奇怪了。

更长的换机周期,让AI算力难以落实到全部设备

虽然相比于智能电视的SoC,智能手机与PC的AI算力要强得多,但这其实也有限定条件,仅限于最近这一两年里推出,定位中端以上的手机SoC与电脑CPU、显卡。

v2_6026f4a1e9444570a861ba74463ca75c_img_000

RTX显卡有独立AI加速单元、但GTX显卡并没有,所以厂商不得不照顾中低端机型

这意味着什么呢?简单来说,对于手机、电脑厂商而言,他们不得不考虑在如今这个换机周期日趋拉长,还有大量“老设备”活跃的市场中,看似对“AI算力”要求不是特别高的视频增强功能,却可能会对大量的老设备、或是中低端机型造成意料之外的性能压力。

打个简单的比方,10代桌面版酷睿(不支持DLBoost AI加速指令集)搭配GTX 1660显卡(不带硬件AI单元)的PC,放到现在来说可能也并不算特别落伍。但如果要用它来运行AI实时视频增强代码,结果可能就相当“爆炸”。而这种“老设备依然会长期存在,甚至可能会占据市场主流”的现象,也就制约了手机、PC厂商引入更多AI功能的积极性。

最重要的是,过于强大的AI功能或许会让版权方不爽

最后还要承认的是,对于许多手机、PC的用户,甚至可以是说对于大多数用户来说,“AI视频增强”功能如果能够完整地落到设备上,可能都会是非常受欢迎的。但也正因如此,这种强大的、能够将低清晰度、低帧率、低色彩视频内容进行“自动强化”的技术,却有可能会影响到视频网站的利益。

v2_5259d7cb93da43b69784c21bb60b4398_img_000
v2_1f0e24168904451d8a8fa21283fdbd8b_img_000

最新的旗舰SoC普遍具备图像语义分析能力,理论上可以实现更为出色的AI视频增强

试想一下,如果用户根本无需开通各大视频网站的付费会员,仅通过设备的AI算力就能享受到与会员近似的高品质内容,那么视频网站会乐意吗?更不要说对于高端手机、电脑而言,由于它们的AI算力实在是比最顶级的电视还要强上了不知道多少倍,如果让这些设备“全速”运行视频实时增强,用户或许真的就对视频平台的付费服务变得毫无需求了。

这样一来,设备制造商当然可以名利双收,但想必视频网站是绝不会善罢甘休了。于是在平衡各方利益、同时也避免“触怒”合作伙伴的考量下,即便是当前最新、最强的手机和电脑,在视频增强功能上也要远逊于同期电视的这个现实,自然也就出现了。

本文来自微信公众号“三易生活”(ID:IT-3eLife),作者:三易菌,36氪经授权发布。

该文观点仅代表作者本人,36氪平台仅提供信息存储空间服务。


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK