快手对外透露AI实力！短视频运营的四大环节大揭秘
智东西11月2日报道, 昨日快手在其总部召开了快手人工智能沙龙会议, 会上快手科技AI技术副总裁郑文与智东西等少数媒体详细分享了快手在AI领域的进展, 并就快手如何在产品中使用AI技术进行了深入交流。 快手由创始人兼CEO宿华于2011年成立, 目前定位为短视频社区平台。据了解, 目前快手的日活用户数量达到了1.3亿, 已总计产生了70亿条原创短视频内容。而从每天的使用情况来看, 快手用户会产生1500万条短视频内容, 每天的使用时长也超过了60分钟, 视频的日均播放量达150亿次。 巨大的视频流量和用户数量, 也从一方面决定了快手必须应用AI技术来进行平台运营和管理。智东西了解到, 目前快手在技术方面有四个团队, 分别负责前端引擎、特效设计、视频内容审核、视频内容理解, 总体来说快手技术人员的规模近几百人。 那么快手是如何利用AI技术对海量视频和3亿多的用户运营的呢?今天, 智东西将带你一探究竟。 一、 快手日常运营中的AI技术 在沟通会上, 快手科技AI技术副总裁郑文向智东西等媒体详细地介绍了快手科技在AI技术上的布局。 (郑文是清华大学软件学院 2001 级学生、斯坦福大学计算机系博士。他曾在硅谷多家知名大公司和创业企业从事计算机图形学、计算机视觉、深度学习等方向的研究。郑文现任快手AI技术副总裁, 带领快手在 AI、AR、CV、CG 等方向的研究。) 据郑文介绍, 由于快手的很大一部分用户使用的是中低端机型, 而现在先进的 AI 技术对设备的计算力要求极高。为了让普通用户体验到AI技术, 快手对底层平台进行定制化开发, 也就是快手自研的 YCNN 深度学习推理引擎。这一引擎可以让快手APP上的AI技术在大多数机型上都能高效运行, 并针对不同机型、不同硬件进行了适配和优化。 郑文说, YCNN深度学习推理引擎针对快手平台的特点, 进行了针对性的模型构建, 在快手平台上运行与市面上普适的引擎相比快了2~3倍。
快手APP的日常运营包括视频生产、视频理解、用户理解、视频分发四个环节, 据郑文介绍, AI技术已经应用于快手视频从生产到分发到每个环节。 1、利用AI给用户视频生成增加乐趣: 首先在视频记录和生成上, 快手运用了非常多的AI算法来让用户生成的视频更有趣。 其中, 郑文重点提到了8个方面: (1)、三维人脸技术:这项技术的应用主要包括两方面, 一是对人脸进行三位重建, 其中将会调用手机硬件进行3D打光, 对图片进行活化处理, 以及实现对人脸进行变脸;二是利用这项技术驱动表情, 利用算法在用户拍摄视频时将人脸替换成Animoji。 (2)、语义分割:这项技术在快手视频中的具体应用有两个, 一是对人像进行分割, 方便进行后续的特效处理;二是对头发的分割, 可以实现对头发的变色处理。 (3)、人体体态估计:这项技术可以实现对用户在视频中的肢体动作进行识别和定位。 (4)、手势识别和检测:这项技术主要用于识别用户视频中的各种手势, 再配合快手推出的各种虚拟动画, 为视频增加更多玩法和乐趣。 (5)、AR相机姿态估计:据了解这项技术是快手自研的, 在苹果推出AR Kit之前快手就已经开始应用了。这项技术将快手视频内的虚拟物体与用户真实场景进行融合。 (6)、智能视频编码:这项技术会分析视频的复杂度以及进行ROI分析(Region of Interest的缩写, 直译为感兴趣区域), 比如基于人脸进行QP调制(QuickPass, 快速通关系统 )。 (7)、智能暗光增强:该技术可以对视频内容进行暗光检测, 如果画面亮度过暗, 该技术还将对视频画面亮度进行增强。 (8)、图像质量检测:该技术可以进行迷糊检测和脏镜头检测, 对视频清晰度低, 或者镜头内有块状瑕疵的视频内容, 都可以进行检测, 系统则会对用户进行信息提示。 2、利用AI对视频内容进行理解: 而在视频上传后, 快手的AI技术还将要让机器学会看懂海量的视频内容。 在理解视频方面, 快手的AI技术需要做两项工作:给视频贴和语音识别与合成。 视频贴包括识别物体和场景两个方面, 物体方面则包括了人物和物体。在方面, 快手也建立了自己的树, 从不同的维度对物体进行区分。 语音识别与合成方面, 则包括了视频语音转文本和语音合成两个方面。 3、利用AI对用户进行理解: 快手APP定位是构建一个面向普通大众的社区, 目前日活用户数量达到了1.3亿, 用户群非常庞大。而从运营的角度来讲, 为了为用户进行精准的推荐, 快手需要利用AI对用户进行理解, 而理解的方式则是通过对视频内容和用户行为进行分析。
在理解用户方面, 快手会对视频内容进行理解, 并对用户行为进行分析, 包括理解用户所处的位置等。此外, 快手还构建了用户理解向量, 从用户兴趣、用户关系等不同维度理解用户。
- 发表于:
- 原文链接：https://kuaibao.qq.com/s/20181105A0183L00?refer=cp_1026
- 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号（企鹅号）传播渠道之一，根据《腾讯内容开放平台服务协议》转载发布内容。
- 如有侵权，请联系 cloudcommunity@tencent.com 删除。
相关快讯
扫码
添加站长 进交流群
领取专属 10元无门槛券
私享最新 技术干货
腾讯云开发者
