当前位置:首页 > 短视频综合 > 正文

让“秒拍”更精彩,华为云助力客户数据平滑迁移

2020-06-30 18:54:42 暂无评论 短视频综合


2016年,有个自称“一个集美貌与才华于一身的女子”,将3分钟短视频的价值变现成为了2200万人民币。从此,这名女子的一笑一颦都被万千网友争相模仿,她也成为了中国真正意义上短视频网红第一人。她的名字叫做姜逸磊,还有个大家都熟悉的名字——Papi酱。

 


自Papi酱开始,中国短视频市场一发而不可收,无论是层出不穷的短视频平台还是络绎不绝的网红男女,都代表了这一领域在最近几年的火爆。如今,以抖音、快手为代表的社交媒体类、以西瓜、秒拍为代表的资讯以及以B站、A站为代表的BBS类短视频平台争奇斗艳,频频出招,也让市场进一步走向繁荣。

 

短视频的竞争不仅仅表现在表面的“网红争夺战”上,其实在技术层面也同样面临着竞争。一方面,短视频平台需要借助于AR、美颜等技术手段提升用户体验和人气,另一方面,后端的数据中心或者云端保障,更能够让主播和网友用起来得心应手。



其实提到“秒拍”,经常玩短视频的朋友可能是非常熟悉了。作为短视频行业最大的聚合分发平台,秒拍日均覆盖用户达7000万,日均视频上传220万条,用户日均使用时长40分钟,日均视频播放总量30亿次。可想而知,在秒拍不断发展的7年时间里,已经积累了多少用户及多大的数据。而如今,一个难题就摆在了所有技术人员的面前——秒拍希望将部分数据迁移到华为云平台上。

 

大家知道,虽然我们常说云平台是开放性的架构,具备弹性扩展和秒级相应等诸多特性,但是“迁移”两个字,对于任何平台来说都是一样的沉重。最初,秒拍与华为云接触的时候,并没有对华为云有足够的信心。尽管“华为”的品牌在IT领域首屈一指,但是在云计算应用中特别是公有云平台中,华为云还是新晋者。

 

最初我们听到华为云这个名字的时候还是很惊讶:华为也开始做云了?后来通过慢慢的接触,了解到华为有很多前沿算法,刚好符合了我们数据的差异化推送需求。基于双方开放、合作的共识,我们一步一步有了很多的业务上的结合,一步一步相信彼此,最终选择了彼此,秒拍架构师李东辉表示。

 

虽然都是x86平台,虽然在理论上不存在之前RISC那种“绑定”的架构,但是每家平台都是一个复杂的系统,从底层的硬件到中间层的若干OS再到上层的各种应用平台,想实现整体的迁移无异于痴人说梦。具体到秒拍来说,它原本的业务运行在某大型公有云平台上,但是对于短视频应用来说,可能某个瞬间或者某段时间的“爆款视频会带来流量高潮,而原有的基于虚机的云平台很难在这个时候实现弹性扩展,进而有可能影响用户体验。经过慎重考虑,秒拍最终决定从原有平台迁移到华为云提供的容器服务上,以确保业务能够快速无缝地进行切换,实现随时随地的弹性扩展,为用户带来最佳的应用体验。

 


在解决这个问题的过程中,华为云很大程度上就扮演了“圆梦者的角色。对于秒拍的迁移,华为云给出了分步的策略,即在保证迁移能力的同时,实现业务的稳定运行。具体说来,包括mc\mq\redis\db\ES迁移等多个部分,同时也包括了迁移之后的架构优化和负载均衡等等,并非是一蹴而就的。事实上就整个迁移过程来说,也可谓是“惊心动魄”。



当时预计的迁移时间是零点之后,因为凌晨的业务体量是比较低的,影响也非常小。但是到凌晨一两点的时候,数据库同步验证出现了问题,老数据库到新数据库复制断掉了。当时所有人都特别紧张,甚至有人准备放弃迁移;好在华为云及时组织技术专家,在第一时间解决问题、排除了故障,迁移得以继续运行。大概是到四五点左右的时候,整个数据量已经开始进入华为云平台,持续到八点左右的时候,整个迁移工作初步完成。虽然在迁移过程中有些小的业务问题,但秒拍系统的整体已经与华为与非常匹配了,后续就是业务的细化问题”,李东辉如是说。

 


应该说,在云趋势的大潮下,互联网企业把大多数业务部署在云服务器上,但更多是在传统的云主机上。如果企业要过渡到下一代虚拟技术容器,会涉及到各类资源迁移和技术架构优化,整个过程是必须短暂而痛苦的。

 

但如果没有相应规模的技术团队来操作,再加上云厂商没有完善的技术支持团队,这个过程会更加痛苦。如何减少企业业务升级的痛苦,这就非常考验企业技术决策者的选择智慧。秒拍这次迁移,可以看作是短视频网站云平台过渡的一个样本,也凸显出华为云在解决客户痛点上的能力。

 

解决了数据迁移的问题,接下来就是如何判断这些海量的数据以及如何将数据精准的推送到各人。很显然,如此巨大的视频数据流量,对于带宽及后端的服务器都带来了前所未有的压力。而面对爆发性增长的业务量,想要仅仅凭借人工审核肯定能以满足每日巨大的数据需求,而如何将热门内容推送给每一个用户,而又要保证不同用户的精准化与差异化,一直是整个业界面临的共同问题。对此,秒拍在不断的探索之后,选择了智能算法+人工推荐相结合的形式。

 


这样的选择也是业技术发展的必然。正如我们之前提到的,一方面在短视频平台,高热度的内容无疑能得到充分曝光,但另一方面并非每个人都关注热门事件,事实上大多数UGC用户依然保持着个性化的内容需求。就好比,微博热门经常被明星八卦内容所占据,但是在实际生活中,明星八卦只能作为茶余饭后的小小谈资而已。

 

为此,视频平台要将大量优质的内容推荐给真正感兴趣的用户,就必须基于人工智能+大数据技术。我们可以想象一下,按照秒拍的用户量,事实上每天它都会产生海量的数据,这些数据可能是五花八门,而且大多是非结构化的数据,不能通过传统的数据库进行区分,只能借助于人工智能的方式,利用深度学习算法实现分类。

 

这无疑技术提出了更高的要求。一方面,秒拍希望能够为客户提供精准的、差异化视频,另一方面想要在每天产生的海量数据中找到这些视频,无疑中大海捞针般的困难,非深厚的技术几点与完善的解决方案不能实现。但是这个问题,在华为云EI的面前,却能够迎刃而解。

 


凭借多年在大数据和AI领域的技术积累,华为云EI为“秒拍”提供了诸多业界领先的技术并搭建了一系列成熟的技术架构,使“秒拍”能够实时地把握用户兴趣爱好,并基于AI技术对内容进行分析,进而将视频匹配给用户,使推荐真正做到千人千面。

 


具体说来,华为云EI通过对海量用户行为以及视频数据进行训练、分析、建模等操作,为一下科技等移动互联网企业打造了多场景下的23000多个不同维度的内容标签,对内容进行标签化处理,有助于全方位加深后台对视频内容的理解,并通过实时构建的用户画像,以及基于深度学习的CTR预估排序,有针对性地把内容推送给真正感兴趣的用户。

 

虽然在公有云领域出现的时间还不长,但凭借多年来华为在CT和IT领域的丰富经验与基础储备,华为云从“天生”就具备了强大的技术基因,可以为用户提供完善的海量数据分析+智能推送的精准方案,也能帮助客户从原有的虚拟机顺利迁移到更符合趋势的容器平台。

文章转载自微信公众号IT大嘴巴

博客主人破茧短视频培训
破茧短视频为你分享抖音、快手等短视频平台的视频拍摄、剪辑和运营技巧,另有短视频培训学习教程,海量干货助你玩转短视频运营!。
  • 51952 文章总数
  • 4875893访问次数
  • 2205建站天数