现在电视行业硬件已经很卷了,几千块钱就可以买到65英寸大电视,并且miniled,HDR,120 Hz高刷也都早已成为标配。但不同的电视品牌上游的面板厂资源都差不多,单纯从面板的规格方面很难形成区隔。但即使是使用差不多技术的面板,各家实现的效果也大相径庭,而各家的电视搭载的系统功能体验也天差地别。因此在现在阶段各家都开始重视智能功能的交互体验和智能电视影像后期算法来。

从这次华为Vision智慧屏 3发布会我便更为确信的验证这一行业趋势:发布会用来解读这些软实力的篇幅远远大于电视本身硬件,搭载AI超感摄像头交互系统和鸿鹄画质加持下的音画体验才是这代产品的最大亮点。

AI超感摄像头再次变革电视的交互方式

传统的电视交互基本都是依赖遥控器,虽然也有不少厂商试图给遥控器增加如空鼠之类新的功能,但绝大部分用户还是只会使用遥控器的本质功能,而这样的功能至1980年代到现在40年,其产品逻辑基本没有变化。而华为则将摄像头变成了核心的输入设备,但摄像头可以怎么用,好不好用,那又是个问题。

基于摄像头的体感操作并不是华为第一个做,微软在Xbox 360时代就推过Kinect,但在当年并没有足够的算法和算力支持,需要使用高成本的深度传感器,最终可以实现的功能有限。而现在华为Vision智慧屏 3搭载的AI 超感摄像头拍摄画面通过神经网络可以实现很多不同功能。

比如你在华为Vision智慧屏 3前同亲友视频通话,但一体式厨房的烧水开了,你必须去处理。你走到远处的时候,AI 超感摄像头可以通过算法自动进行人物追踪和脸部识别,进行持续追焦,保持成像清晰。

AI超感摄像头所带来的AI算力也可以用于体感游戏,AI 超感摄像头将人物3D/骨架识别并并同步游戏角色动作,这样技术实现在前几年需要高成本的深度传感器才能实现,而现在用普通摄像头配合AI算力就可以实现。现在能够对多人/30个骨骼关节进行识别,识别关节越多游戏中的虚拟形象动作就越精确。

体感游戏只是开始,新时代的技术趋势是AR,AR技术可以将虚拟场景和真实角色通过精准的3D坐标进行融合,能够让玩家身如其境的在虚拟世界中遨游。AR实时性使得其对于帧数和延迟有更高的要求,需要更高复杂度的算法和更高的算力才能实现,而华为Vision智慧屏 3强大的NPU和GPU性能使得AR的实现成为可能,现在AR并不在是个技术名词和金融概念,而是切切实实的在你身边。

除开娱乐,AI 超感摄像头也可以实现很多管理功能,特别是对于有小孩的家庭,使用者也可以通过华为Vision智慧屏 3的摄像头进行行为管理,对使用者进行识别。家长可以分时段设置允许使用的功能和观看的频道,这样就不用担心小孩在你不在家的时候偷偷玩游戏或者看综艺或者动画。并且还有坐姿/距离提醒和时长管控功能,在保护视力的同时也能够帮小孩养成良好的习惯。

华为发布搭载 AI 超感摄像头的 Vision智慧屏 3,好的摄像头对智能电视的价值是什么?当然 这些AI 超感摄像头应用功能其实只是开始,在有传感器硬件和足够高的NPU算力之后,AI 超感摄像头还可以实现更多你我现在想象不到的功能,我对这样的将来充满了期待。

鸿鹄画质是怎么样改变影画体验的?

鸿鹄画质就是一套用来提升影像的算法,其提升有很多方面,这里我就选择几个我比较关注的点来进行简单的解读,看这些AI算力是怎么样改变影画体验的。

鸿鹄AI清晰超分让画面更清晰

首先是鸿鹄AI清晰超分,现在无论是有线电视信号,还是在线视频App大多资源,再或者是PS5/NS这样的家用游戏主机,输出的信源都没有达到原生4K分辨率。华为Vision智慧屏 3可以通过AI计算的鸿鹄AI清晰超分,物理提升画面分辨率。

基于AI的鸿鹄AI清晰超分技术不同于以往家电行业使用的插值放大仅仅是填充相近的像素来提升分辨率,而是通过深度学习算法生成画面本来不存在的细节。

这样的技术应该跟NVIDIA的RTX视频超分辨率(RTX Video Super Resolution)实现异曲同工,通过推理进行图像放大和减少压缩伪影再通过神经网络分析低分辨率的视频帧并预测目标分辨率下的残差图像。然后,残差图像被叠加到传统的图像增强上,纠正伪影错误并锐化边缘以匹配输出分辨率。

华为Vision智慧屏 3通过鸿鹄AI清晰超分我们不仅可以获得更高分辨率的画面,并且可以获得更多的画面细节,我们就可以更好的享受鸿鹄AI清晰超分带来的画质提升,即使信号源是更低分辨率。

鸿鹄AI HDR让画面更刺激

虽然B站这样的在线视频app已经支持HDR,但HDR的资源很少,所以有些厂商提供了自动HDR功能,可以将普通的SDR画面转换为HDR。但这样的自动HDR基本就是将SDR的像素亮度信息通过放大映射到HDR的PQ曲线,这样方式在效果上还是存在不少的问题。

而华为Vision智慧屏 3的鸿鹄AI HDR则是利用NPU对画面进行分析,智能识别体育赛事、自然风景、人像特写等11种不同的场景,选择对应的优化HDR算法,再利用2304的分区智能背光控制,展现更高的画面对比度。就如第一张的日出,AI会自动识别日出场景的高亮区域,强化太阳部分的亮度级别,让观看者也可以感觉到日出由暗到亮变化,甚至在感官上可以感觉到炙热。而暗部的城市区域也通过对PQ曲线的裁切尽量保持更多细节。

而第二张灯塔由于是逆光,SDR同背后的高亮的天空观感亮度差不多,缺乏层次感。而AI HDR通过深度学习网络识别天空区域并提升亮度,再略微降低逆光的树木亮度,拉升灯塔的对比度,通过分区背光的控制整个画面变得错落有致,就如苏州园林一样有层次感了。鸿鹄AI HDR实现的这些效果对于传统的映射方式实现自动HDR是办不到的。

在视频源色彩位数不够高的情况下,渐变色容易有色阶,而通过AI色彩平滑功能可以让画面过度更为自然。

鸿鹄迅晰流畅技术让画面更流畅

现在已经有了不少电视支持120Hz高刷新率,但除了用HDMI 2.1连接PC,应该是很少有机会跑高刷,绝大部分视频资源还是24FPS的规格。

因此华为Vision智慧屏 3增加了鸿鹄流畅度的MEMC(Motion Estimate and Motion Compensation) 运动画质补偿技术,让24FPS的视频内容可以通过插帧达成60甚至120FPS的流畅度。其实之前60Hz时代MEMC并不完美,60并不是24FPS的整数倍数,不能保证插帧和原始关键帧是固定倍率,而现在120 Hz刷新率刚好是24FPS的5倍,一帧关键原始帧可以对应4个MEMC插帧。

但MEMC的插帧并不是复制相同帧或者插黑,而是依据Optical Flow光流法+运动向量计算像素的运动趋势,预估后面的画面进行插值生成。传统的MEMC对于一般平移这样的规律运动处理还好,但对于快速的不规则运动处理效果就会比较差,甚至会放弃处理。这个时候就需要通过神经网络来提升,但神经网络处理就需要NPU的算力来支撑,算力越高,插帧的效果就越好,MEMC的观感也就越流畅。

鸿鹄画质的加持下,视频内容画质更清晰,HDR效果更华丽,动态场面更流畅,通过算法的全面升级,在很大程度上改变了观影的视觉体验。

新时代的核心竞争力

现在电视已经不是单纯比拼面板色域/HDR峰值亮度/miniled分区背光数量的时候了,虽然华为在这些方面做的也不错,但真正能够实现产品区隔的反而是鸿鹄画质加持下的顶级音画表现,和以超感摄像头AI功能为核心的鸿蒙系统智慧体验,现在音画+智慧的双重领先优势形成了华为智慧屏独有的核心竞争力。