凭借独到的逻辑与过硬的AI技术 快手1.6亿日活、1500万+单日上传
2013年前后, 快手从从纯粹的工具应用逐步转型为短视频社区,日活跃用户一万。截至2018年12月,快手拥有超过1.6亿日活用户,3亿月活用户,每日上传短视频超过1500万条,库存短视频数量超过80亿条。快手之所以在短短时间拥有如此成绩,凭借的是独到的逻辑与过硬的AI技术。
快手短视频的逻辑很独到,把公平普惠、保护普通视频生产者、拍摄内容与观看需求的多样性这四部分巧妙的建设成一个闭环。
“萌面Kmoji“魔法表情背后的AI技术
据悉,自快手上线萌面魔法表情以来,受到广大用户的青睐。通过该功能,用户能够用相机拍摄生成自己的专属脸部AR虚拟形象,同时可以捕捉用户表情,眨眼、张嘴、抬眉毛、吐舌头等细微动作都能精准还原。
用户用萌面Kmoji制作的手工耿形象
“萌面Kmoji” 背后是快手技术团队大量的研发工作。首先,基于人脸关键点、图像特征提取等AI技术,“萌面Kmoji”不需要iPhoneX等设备才支持的3D结构光信息,仅凭2D视觉信息即可识别用户的发型、脸型、五官形状、肤色、口红颜色、胡须等面部属性信息,构建用户专属的3D AR形象,并通过表情参数驱动3D形象做出各种细微表情,例如微笑、闭眼、张嘴、吐舌头等50余种表情,是多模态技术的成功应用。
此外,“萌面Kmoji”采用了基于物理的真实感渲染算法,金属、皮革等模型材质更加真实更具质感,大大提升模型的表现力。同时,快手技术团队通过对算法的优化,大大降低了运行“萌面Kmoji”对CPU、GPU资源的占用,提升了运行效率,普通千元手机也可顺利运行。
AI技术在在快手内容生产上的应用
快手通过人脸关键点、人体关键点识别、手势识别、视觉惯性里程计、头发分割、背景分割等人工智能技术,实现美妆装饰特效、跳舞机游戏、控雨特效、AR特效、染发特效、背景替换等魔法表情,带给用户新奇的记录体验。
快手还自主研发了手部关键点技术,能够识别出图片或视频中出现的任意手的位置、以及21个主要关节点位置。该技术方案支持任意手势的关键点预测;同时采用创新的网络设计,极大减小了模型计算量,在iPhone和安卓手机上都能够实时监测,在业界尚无其他软件平台有类似能力。
AI技术内容生产环节的应用难点在于,快手用户覆盖面非常广。据不完全统计,快手用户手机型号超过5万种,很大一部分手机性能相对有限,而先进的 AI 技术对设备的计算量的要求极高,为了让更多用户体验先进技术,快手对底层平台进行了定制化开发,自研了YCNN深度推理学习引擎。解决了AI技术运行受限于用户设备计算量的问题。根据评测,快手YCNN运行速度比已知的引擎高出50%。