双十一大考:云基础服务功不可没

亿邦动力网
佚名
一年一度的全球购物狂欢节“双十一”已经完美收官,天猫、京东等电商厂家都赚的盆钵满载,双十一的战绩又刷新去年的记录。那么大家想下,双十一期间那么多消费者下单,流量爆增,为什么网络没有瘫痪?&ldq...

一年一度的全球购物狂欢节“双十一”已经完美收官,天猫、京东等电商厂家都赚的盆钵满载,双十一的战绩又刷新去年的记录。那么大家想下,双十一期间那么多消费者下单,流量爆增,为什么网络没有瘫痪?“网易能够做到成功应对网易严选、网易考拉海购双11大促期间的海量流量,云基础服务功不可没。”陈谔说道双十一是全民消费的狂欢,也是电商行业的一次大考。前台的策划和运营、后台的计算能力和响应能力等都直接关系着这场考试的成败。

双十一当天,电商瞬间涌入的流量是平时状态的数百倍甚至千倍。

网易云基础服务(蜂巢)总经理陈谔对亿邦动力网说,双十一对爆发性流量的支撑,看起来是怎么去扩资源,实则对于电商企业的IT基础架构、软件架构和运维等综合能力都是严峻的考验——后台系统不但要保证在压力下不会瘫痪,还要保证高并发下抢购逻辑的正确性。

“网易云基础服务针对电商业务峰值频发的特点,配置了容器集群、负载均衡、缓存Redis集群、CDN、弹性伸缩等功能,优化提升了数据查询性能。”陈谔介绍道,“网易能够做到成功应对网易严选、网易考拉海购双11大促期间的海量流量,云基础服务功不可没。”他说道。

双十一是对电商后台能力的综合考验。但电商大促,究竟需要哪些基础能力?带着疑问,亿邦动力网与网易云基础服务、网易七鱼云客服、考拉反作弊运营各自的负责人进行了深入的交流,探讨了网易云和网易七鱼都运用了哪些技术和服务来保障此次双十一。

一、通信可助力社交电商

在技术的推动下,电商步入多元化创新的新阶段。场景化、社区化的购物模式已成趋势,移动社交、短视频等功能为电商模式创新带来了新的机遇。

在网易云通信与视频解决方案总监刘兵看来,社交电商如要发掘更大潜力,需要更具互动性的功能加持。短视频作为新型的沟通和展示方式,为电商带来了想象空间。直播方面,网易云研发的频解决方案可提供短视频拍摄和编辑、参数自定义、云服务、自动化鉴黄、音视频编解码技术和解决方案等。

二、反作弊

在电商的营销计划中,企业为了拉新、促销、宣传等商业目标,会发起各种面向消费者的优惠活动。但除了正常消费者得到了这些优惠之外,还有一群专业的薅羊毛组织、职业“地下党”,专门选择互联网公司的优惠营销活动集中参与,导致本属于消费者的优惠落入羊毛党的口袋。

考拉反作弊运营负责人赵红程阐述了这些职业“羊毛党”给电商公司带来的危害:既会导致电商公司的巨额营销费用被一部分人攫取,也会由于不好的用户体验导致用户流失。为了保障商家和消费者的共同利益,不少电商平台都已经采取了有效的反作弊及云安全产品。

“目前考拉海购的反作弊系统对于风险订单的识别主要基于规则引擎,同时结合用户画像评分、关联网络模型和业务名单库等检测手段”,网易云安全CTO朱浩齐介绍到,“网易云安全的反作弊系统通过构建规则引擎,并结合用户画像、关联网络模型以及各业务的名单库,可以做到对羊毛党囤货行为的识别,帮助电商公司合理减损。”

三、智能客服

客服领域的智能回复和智能管理在今年双十一扮演了重要角色。

据介绍,网易七鱼(智能云客服)的“一触即达”服务可基于人工智能、机器学习等技术,能够猜测问题、智能提醒、主动提问,也能够根据用户的使用习惯、行为轨迹等提前做好准备,做到“猜你想问”。

四、电商大数据

据悉,考拉海购在双11期间有一块有数大屏幕实时展示当前最新的销售总额、每个商品品类的销售比例、订单增长趋势、活跃用户地理位置等多维信息。每个用户每笔订单所产生的影响都会实时更新到大屏上。

谈及数据计算,无外乎数据输入→计算→数据输出。传统的计算模型,以数据库为例,是先将数据存储在一个数据表中,用户通过执行查询语句触发数据库的计算操作,最后数据库完成计算后输出结果。网易方面表示,这种“先存后算”的模型在大数据实时计算场景下是行不通的。所要计算的数据很“大”,一个计算结果所涉及的源数据可能是涵盖过往一天的数据,可能是上千亿条数据记录。如果每增加一些新数据,都把所有数据都重新计算一遍,这样的开销是非常大的,最终的效果会是很“慢”,达不到实时的效果。比较合理的做法是“边算边存”,数据进入实时计算系统后,不一定需要先存储起来,可以直接参与计算,而且这里的计算是把当前新增的数据在之前历史数据的计算结果上做“增量计算”,同一条数据不重复参与计算,计算完成之后,再把计算结果保存起来,供业务使用,这时数据存储的压力也小了很多。同时“大”意味着数据并发很高,每秒可能需要计算上千万条新数据,这样的计算量不是单机能承受的,所以大数据实时计算要解决好的是分布式系统架构下的一系列技术问题。

而分布式实时计算面临的挑战包括很多方面。数据从采集、到计算、到输出整个过程必须做到低延迟,除了计算节点本身采用“增量计算”的模型,还要求上游数据传输模块具有很高的吞吐能力,并且具备数据缓存的能力,在大流量场景下可以起到缓冲的作用,下游输出模块也需要做数据压缩、批量输出等优化,以保证输出结果的实时性。低延迟这个大前提对实时计算系统的其他特性提出了更高的要求。

双11凌晨0点的时候,大量消费者在同一时刻下单支付,这是涌进实时计算系统的瞬时数据量是巨大的,系统需要有强大的并行处理数据的能力,将大量瞬时流量合理分配到成百上千个计算节点,并将这些节点的计算结果汇聚到一起计算出一个总体的结果,在高吞吐的情况下仍保证低延迟。

考拉海购的大屏显示只是大数据实时流计算的一种应用场景,未来会有越来越多的实时计算场景,比如除了文本计算实时化,图像、语音计算也可以实时化,在线机器学习,物联网实时计算等。实时数据以及实时流计算场景的类型都是指数增长的,实时计算引擎会面临不小的挑战。

艾媒咨询分析师Liz曾指出:“人工智能、机器人、大数据、反作弊等技术的加入,只是商业智能化的一个缩影,它不会止于电商,未来这些技术还会在我们的生活中更广更深入的应用和发展,双11也将会变成巨头们的科技。

据了解,截至今年7月,网易云已经服务了35万企业客户,覆盖金融、电商、社交、教育、游戏、文化娱乐、医疗生物等互联网企业以及传统企业,并推出了通信与视频、全智能云客服(七鱼)、云计算基础服务(蜂巢)、云安全(易盾)等一系列场景化云服务,和大数据管理与应用开发平台(网易猛犸)、企业级大数据可视化分析平台(网易有数)等大数据产品。

THEEND

最新评论(评论仅代表用户观点)

更多
暂无评论