找回密码
 社区注册

快捷登录

QQ登录

只需一步,快速开始

快捷登录

QQ登录

只需一步,快速开始

热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?
2022-7-4 19:00| 发布者: A峻涌武道| 查看: 2516| 评论: 0
微富网 新闻资讯 查看内容
摘要 : 此前,一款独特的“手绘滤镜”在市面上的各式滤镜中突出重围,一度成为热门。这款滤镜出自快手,能够在极短的时间内将自拍照转换为资深艺术家创作的素描作品,就连视频中的每一帧画面也能够持续转换成素描作品。图 | ...

此前,一款独特的“手绘滤镜”在市面上的各式滤镜中突出重围,一度成为热门。这款滤镜出自快手,能够在极短的时间内将自拍照转换为资深艺术家创作的素描作品,就连视频中的每一帧画面也能够持续转换成素描作品。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | 快手热门“手绘滤镜”(来源:快手 APP 截图)

而滤镜下的这些画作,正是出自不同寻常的 “AI 艺术家” 之手。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | 快手热门滤镜使用效果(来源:快手 APP 截图)

当用户拍摄自拍视频后,ISP(Image Signal Processor,图像信号处理器)会处理视频并发送给快手 App。之后,快手将对该帧进行一些预处理,并进行人脸侦测及剪切,然后发送至高度定制化、类似于 UNET 的神经处理网络(即机器学习算法),该步骤将生成与输入帧相融合的手绘特效,随后经过化妆和美颜步骤提升整体图像质量,最终显示的预览效果就是一副素描作品。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | 快手热门滤镜背后的算法(来源:高通)

骁龙移动平台,带来更佳滤镜体验

为进一步提升这款“手绘滤镜”的质量,快手借助更多数据不断进行算法改进,逐步增加神经元的数量,帮助神经处理网络建立更智能的连接。

在该算法的改进过程中,其技术复杂度也随之增加。很快,快手发现,虽然 “AI 艺术家” 具备创作素描画的能力,但在速度方面难以满足用户的需求,导致使用该特效的视频出现帧率下降的情况。

也就是说,用户在使用该特效拍摄视频时,无法享受到流畅的体验,从而降低了用户创作出优质作品的可能性。

据了解,该 AI 算法默认是在 CPU 上运行,而 CPU 是一个通用计算单元,并非运行AI工作负载的最佳选择。在这种情况下,App 提供商通常会选择在云端进行复杂的AI算法处理,然而云端又会受到网络覆盖的影响,导致时延以及其他不确定因素。

一个更高效的解决方案是,通过高通骁龙移动平台 Hexagon 处理器的强大性能和高能效,能够赋予AI算法更多处理空间,从而使具备特效的视频能够更流畅地呈现,且不牺牲电池的续航时间。

以高通的骁龙 765 移动平台为例,骁龙 765 平台释放了 CPU 的工作负载,并通过 Hexagon 处理器来完成相应工作,能够使这款手绘滤镜的帧率提升 56%,并降低32% 的功耗,带来无缝流畅的视频拍摄体验。而高通和快手针对量化开展的联合工作,也会发挥关键作用,在提升性能和能效的同时能够确保处理的精确度。

未来,快手对于移动平台将有更多方面的需求,如性能、功耗、扩展性和兼容性等。对此,高通骁龙移动平台均能通力应对,其神经网络处理 SDK 和 Hexagon 处理器将分别以软件和 AI 加速器的方式提供支持。

值得一提的是,高通最新一代的骁龙 778G 移动平台采用了第 6 代高通 AI 引擎,通过其 Hexagon 770 处理器和融合AI加速器,能够带来强大的特性支持,算力高达每秒12万亿次(12TOPS),性能较前代平台实现翻番,在不同的场景下均可实现最佳的 AI 处理效果。

此外,该平台采用的全新 Qualcomm Spectra ISP,能够拍摄出令人惊艳的高质量视频,并为其运行特效算法提供加持。

不仅如此,通过采用第二代高通传感器中枢集成的专用低功耗AI处理器,骁龙 778G 平台能够支持情境感知用例,其性能得以进一步增强。

总体来讲,在骁龙 778G 平台的支持下,智能手机能够拍摄并处理更高分辨率的视频,让用户可以在智能手机上创作媲美专业艺术家的作品。对于数百万的快手用户来说,使用搭载骁龙移动平台的智能手机将显著增强其使用体验。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | 骁龙 778G 平台(来源:高通)

事实上,在全新第 6 代高通 AI 引擎加持下,全新旗舰移动平台骁龙 888 Plus 的算力已经高达 32TOPS,与骁龙 888 平台的 26TOPS 相比,进一步提升了 20%。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | 骁龙 888 Plus(来源:高通)

扩大 AI 应用生态,高通赋能多领域

多年来,高通在移动领域积累了领先优势。目前,AI 已成为骁龙移动平台的核心组成部分。第 6 代高通 AI 引擎可以全面提升连接、影像、游戏等性能表现,通过与手机摄像头、调制解调器和骁龙移动平台的其他组件直接集成,来支持更快速、更高效的处理。

在高通 AI 引擎的支持下,虹软结合其计算机视觉和 AI 技术,能够支持强大的影像处理能力,可大幅提高照片和视频的画面质量;大象声科也高通 AI 引擎的支持自主研发了 AI 通话智能降噪技术,能够实时分离通话中的人声和背景噪声,做到不论身处多嘈杂的环境通话,通话者始终可以保持声音清晰自然。

据悉,高通已经持续投入 AI 领域超 10 年。除移动领域外,高通还将 AI 扩展至更多领域,不断提高人们日常生活的便捷度和丰富性。

以 PC 领域为例,高通面向骁龙计算平台的 Sophos 安全解决方案可以支持超快速的威胁检测。而在视频通话方面,AI 也为 PC 用户提供了更流畅的视频通话性能和质量。

此前,高通推出用于 PC 的骁龙 8cx 第二代 5G 计算平台,能够带来高品质的音频和拍摄效果,从而提升用户的远程办公和远程学习体验。一方面,利用 Qualcomm Aqstic 回声消除和噪声抑制(ECNS)技术,骁龙 8cx 第二代 5G 计算平台能够对来自 PC 和用户环境中的声音进行智能处理,提供清晰的音频体验;另一方面,在高通的人工智能引擎的作用下,该平台为 PC 设备带来突破性的 AI 性能,通过 AI 加速的眼神交流和虚拟头像等方式,用户可以享受更佳的视频会议交互体验。

AI 的出现,也带来了支持语音助手、沉浸式音频和视觉特效的数字座舱平台,使得汽车能够实现车辆和驾驶员之间的精准交互和情境感知。

今年,高通推出了第 4 代高通骁龙汽车数字座舱平台,在带来极佳用户体验的同时还提供了安全可靠性,已跻身为当前汽车行业中最全面的解决方案之一。利用先进的 AI 引擎,该平台支持驾乘者的个性化设置、车内虚拟助理、自然语音控制、驾驶员监测以及自适应人机界面等功能。在驾乘者的个性化设置方面,AI 引擎支持系统持续学习并适应驾乘者偏好,不仅覆盖媒体或信息影音内容,还包括座椅和后视镜位置、空调控制、不同座椅的温度个性化设置等汽车控制功能,为驾驶员提供符合喜好及车辆氛围的交互界面。

此外,XR 中所采用的感知技术也借助了 AI,使用户能够更好地观察、理解数字世界并与之交互。

作为 XR 产业链的上游技术公司,高通先后推出骁龙 XR1、XR2 平台,从 AI 算法、多路并行摄像头和 5G 角度全方位赋能 XR 终端,助力推出下一代完整的 XR 解决方案。

同时,AI 在无人机行业也展示了其强大实力。8 月 17 日,高通发布了 Qualcomm Flight RB5 5G 平台,将助力厂商推出下一代兼顾高性能和低功耗的 5G 无人机,以支持安全与应急救援、物流配送、防务和测绘等众多领域。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | Qualcomm Flight RB5 5G 平台(来源:高通官网)

作为全球首个由 5G 和 AI 共同赋能的无人机平台,该平台在 AI 方面采用的是第 5 代高通 AI 引擎,能够运行复杂的人工智能和深度学习。据悉,第 5 代高通 AI 引擎集成了 Hexagon 张量加速器,可提供边缘端的推理运算,并实现每秒 15 万亿次运算的 AI 性能。

此外,近期基于高通机器人 RB5 平台研制的庞伯特兵乓球机器人频频亮相,在各个场合不断吸引着众多目光。


热门滤镜背后的抓手:AI不断“出圈”,未来迎来全面智能化时代?

图 | 庞伯特兵乓球机器人(来源:高通)

据悉,庞伯特兵乓球机器人达到了与国手切磋而不相上下的水平,曾与乒乓球大满贯得主丁宁、乒乓球世界冠军、前国手王皓和中国乒乓球学院院长施之皓等"过招"。

作为全球首款AI乒乓球发球机器人,这款 5G 机器人集合高通在 5G 和 AI 领域的优势,同样具备每秒 15 万亿次的 AI 异构计算能力,能够实时捕捉人体动态并对其进行分析运算,实现对每一次轨迹的预测运算和迅速响应。

现在,庞伯特兵乓球机器人已被放到中国乒乓球的教学使用中,并深受国内很多乒乓球俱乐部和乒乓球爱好者的喜爱,正处于批量投放市场的阶段。

智能互联时代到来,高通按下快进键

随着 AI 生态版图的不断扩张,人工智能技术正在加速与各行业、各领域融合发展,向人们日常生活的方方面面渗透,智能互联时代即将到来。

对此,高通的高级副总裁兼移动、计算及基础设施业务总经理阿力克斯·卡图赞(lex?Katouzian)曾表示,除持续投入 AI 研发和推出最新第 6 代高通 AI 引擎之外,高通将不断从与生态伙伴的合作中汲取经验、提升算法能力,为终端消费者带来更加出色的用户体验。

在此次与快手的合作中,高通既充分发挥了其骁龙芯片的强大异构计算能力,又帮助快手突破了 AI 算法的性能边界,助力其提升用户体验。而在 PC、汽车、XR、无人机和机器人等领域,高通也发挥着举足轻重的作用,不断对其赋能的同时为社会带来了深刻变革。

毋庸置疑,作为 AI 技术领域的先行者,高通正为智能互联时代的到来按下快进键。


路过

雷人

握手

鲜花

鸡蛋

最新评论

联系我们 搜索

联系我们

对话产生契机,讨论收获惊喜, 只为成就无限创举

湖北省 武汉市
汉阳区龙阳大道龙阳大厦A座1419

欢迎来这里一起喝喝茶,
聊聊你的产品。

+86 139 9777 1122
(9:00AM-6:00PM)

代理合作请联系本号码
业务合作请点此处

洽谈合作
admin@vfuw.cn

共享万亿级市场
工作日24小时内回复

加入我们
jiangheng@vfuw.cn

我们欢迎每一个对设计怀
有疯狂激情的人。