目前最流行的移动应用程序是什么？我相信十分之九的人都会回答短视频。
随着5G网络的逐步落地，网络传输速度不再成为瓶颈，手机拍摄质量不断提升，大众越来越热衷于通过视频表达自我。
为了让用户更好地表达个性和审美，快手等短视频平台相继推出了多种滤镜和特效功能，让退伍军人无论在繁华的城市还是在田野，都能创作出有趣、充满生活气息的视频。短视频作品。
比如一秒变装的逃亡公主：
如果你热衷于看肥皂剧，你可以轻松变身为老板或玛丽苏女主角。更神奇的是，使用快手上的娃娃脸特效，你可以一键回到童年。当然，期待自己中老年的样子也不是问题。它可以轻松地帮助您在几秒钟内穿越我的生活。
滤镜背后的灵魂画师需要AI核心
然而，在这些好玩有趣的特效背后，AI技术的功劳和名气其实深藏不露，全球领先的移动平台制造商高通也对此非常关注。以快手广受好评的手绘滤镜为例，它可以不断地将用户视频的每一帧变成精美的手绘作品。
这个滤镜效果的实现大致可以分为几个步骤：首先，当用户拍摄视频时，ISP会对视频进行处理并发送给快手App。快手App会对视频的每一帧进行预处理，进行人脸检测、剪切等；然后将其发送到高度定制的、类似UNET 的神经处理网络（即机器学习算法）。该神经处理网络将生成与输入帧混合的手绘效果。之后，通过化妆和美容算法优化整体图像质量，并获得精美的特效预览。
上述每一个步骤都需要复杂而巧妙的算法来实现，其中最关键的是生成手绘特效的神经处理网络。作为人工智能算法的一种，它与传统软件中的算法最大的区别在于它可以通过不断学习来提高自身的能力。你不妨把它想象成一个尖子生，他可以通过不断回答问题来提高自己的成绩，而且回答的问题越多，他的成绩就会越好。 AI算法也热衷于解决问题。它自己训练的题库是海量的图像和视频数据。
作为短视频赛道的领军者，快手拥有庞大的用户基础。据快手大数据研究院发布的《2021快手内容生态半年报》数据显示，快手应用的月均活跃用户已达5.198亿。同时，快手不久前发布的《2021快手创作者生态报告》显示，2020年，快手应用平均月活跃用户中超过25%将是内容创作者。据此估算，快手平台上聚集的内容创作者数量已超过2亿，而这背后是数量更加惊人的视频数据。这些数据就像水一样，源源不断地浇灌着快手算法之花，让它越开越美丽。
对AI稍有了解的读者都知道，算法、数据和算力被称为驱动AI发展的三大引擎。没有他们中的任何一个，AI产业的巨轮就无法行驶。对于手绘滤镜等特定功能也是如此。尽管有优秀的算法和丰富的数据，但要让用户拥有完美、流畅的用户体验，仍然缺少一个必要的环节，那就是强大的AI算力。
快手发现，AI艺术家虽然可以创作出引人入胜的手绘作品，但在速度上却很难满足需求，实际使用过程中帧率会下降。
手绘过滤算法默认运行在CPU上，而CPU是通用计算单元，并不是运行AI工作负载的最佳选择。在这种情况下，App提供商通常会选择在云端进行复杂的AI处理。然而，云会受到网络覆盖的影响，导致额外的延迟和其他变化。经过多次探索，快手终于找到了完美的解决方案——搭载高通AIE的—— Snapdragon移动平台。
双手抓软硬件，双手都要有力
大家都熟悉高通的骁龙移动平台，比如最新的骁龙888、骁龙780G等，但是AIE是什么？高通AIE实际上是Artificial Intelligence Engine（人工智能引擎）的缩写，它并不是一款全新的芯片，而是一套涵盖完整软硬件、可内置于骁龙移动平台的AI解决方案。
那么，高通AIE具体包括哪些关键组件呢？首先在硬件方面，高通AIE采用异构计算，包含Hexagon处理器、Adreno GPU和Kryo CPU的人工智能优化组合。其中，Hexagon处理器擅长处理涉及向量数学的应用工作负载； Adreno GPU擅长处理更高精度的数据运算，例如图像、视频；而Kryo CPU更擅长计算和处理常规数据。
如果这些专业术语你不熟悉，也没关系。你可以把它们想象成一个工厂里的三条生产线，每条生产线专门生产不同的产品。在异构计算条件下，工厂接到生产任务后，首先会分析哪条生产线更擅长该任务并做出相应的分配，使整个工厂能够处于最高的生产效率。
同时，在软件层面，高通AIE包括Snapdragon神经处理SDK、Android NN和Hexagon NN。软件支撑组件的主要作用是让开发者和OEM厂商更容易应用高通AIE人工智能引擎，以便尽快在最短的产品开发周期内推出自己定制化、个性化的AI智能终端产品。对于开发者和OEM厂商来说，解决方案除了强大的功能外，最重要的是易用性。显然，高通AIE人工智能引擎很好地考虑到了这两点。
除了从产品设计之初就将易用性刻入高通AIE的DNA之外，高通还与下游厂商进行了大量的共创工作，帮助后者最大限度地发挥高通AIE的巨大潜力。例如，为了给快手的手绘滤镜功能提供算力支持，Qualcomm Technologies和快手自骁龙765移动平台推出以来就开始合作。骁龙765首次释放CPU的工作负载，通过Hexagon处理器完成相应的工作，使手绘滤镜的帧率（FPS）提升56%，功耗降低32%（降低显示功耗） ，从而带来无缝的视频拍摄体验。
此外，Qualcomm Technologies和快手工程师共同分析了快手对未来移动平台在性能、功耗、可扩展性和兼容性方面的需求。高通神经网络处理SDK可以以软件的形式提供支持，而Hexagon处理器则作为AI加速器提供支持。此外，量化方面的联合工作在此次合作的成功中发挥了关键作用，因为它在确保加工精度的同时提高了性能和能源效率。
基于此，高通也在推动双方的合作，进一步确保快手所需的各项功能能够针对最新一代骁龙778G平台及时优化，满足骁龙778G终端的商用需求。
高通AIE的发展史，也是手机AI的普及史
高通AIE首次被国内用户熟悉可以追溯到2018年3月，当时vivo发布了最新一代旗舰手机vivo X21，搭载骁龙660AIE。
如今，高通的骁龙845、骁龙835、骁龙820、骁龙821、骁龙700系列等均支持高通AIE人工智能引擎。此外，在物联网领域的高通视觉智能平台系统中，QCS605和QCS603还支持高通AIE人工智能引擎。
随着家族不断壮大，高通AIE的性能不断提升。在骁龙888移动平台上，高通近期推出了第六代高通AIE。作为一套完整的处理器协作系统，这一代AI引擎包括重新设计的Hexagon 780处理器，不仅使标量、张量和矢量加速器之间的物理距离几乎消失，而且还在这三种不同的加速器之间增加了额外的内存。创建共享内存，从而实现更快、更高效的数据移动和共享。在某些用例中，数据交互时效性提高了千倍。不仅如此，加速器本身也得到了改进。标量加速器性能提升50%，张量加速器矩阵处理速度提升2倍。基于全新的架构设计，Hexagon的每瓦性能比上一代平台提升了三倍之多，并实现了每秒26万亿次运算（26 TOPS）的惊人计算能力。
高通AIE凭借强大的算力，正在为越来越多的终端应用提供可靠的支持。除了前面提到的视频滤镜之外，还包括AI人脸识别、照片翻译、3D动话表情等。不过，对于绝大多数用户来说，AIE带来的最直观的变化还是摄影体验的提升。得益于独家的AI处理和加速，国产安卓旗舰可以通过软件算法实现更好的摄影效果，无需堆叠硬件传感器。
除了视觉应用之外，高通AIE还帮助手机中的虚拟助手不断提升语音交互能力。比如，vivo手机上的虚拟助手Jovi背后，高通AIE就充当了源源不断供血的心脏。
高通AIE能力不断提升的过程，也正是手机AI不断拓展应用边界的过程。毫不夸张地说，高通AIE的发展史也是手机AI的普及史。
