数据处理更敏捷 金山云为当当网IT升级注入新动能
当当网是全球知名的综合性网上购物商城,开通至今,当当网已从早期的网上卖书拓展到网上卖各品类百货,包括图书音像、美妆、家居、母婴、服装和3C数码等几十个大类,数百万种商品。近日,当当网的公有云业务正式在金山云上线,实现了当当网在保护投资、弹性部署、快速响应、轻松运维、大数据平台、(7*24)持续保障等方面的业务需求。而由此体现的专业服务水平,则更加提升了金山云在构建垂直电商平台领域中的地位!
“新技术”突飞猛进 当当网IT建设受阻
在“大数据”与“云计算”等新技术快速发展的背景下,电商行业迎来了新的发展机遇。包括当当网在内的一些电子商务巨头,正加紧建设基于大数据等新技术的电商云平台与数据库,进而提升其核心竞争力,但大多企业在自建电商平台过程中会遇到很多问题。
比如,随着当当网业务的持续增长,IT设备运维面临的压力和成本在不断攀升。一方面,在促销活动时(每年数次,每次持续1到2周左右),客户流量难以准确预测并且具备实时性,因此通过继续购买硬件设施来承载这样的波动业务流量,会给投资决策带来很大的风险;另一方面,自建平台过程中,采购和部署周期长,难以满足快速变化的业务需求,并且每年多次促销活动高峰的访问量和数据量,对IT基础设施快速、强大的计算能力提出了极高要求。
此外,在互联网各种技术不断升级和用户行为可追踪的情况下,当当网也在进行着内部业务创新,除了承载不停涌现的新业务需求外,当当网期望利用大数据平台实时收集客户的(脱敏)购物行为,并以此数据为基础,进行商业智能计算,用来提供未来商业策略建议、优化促销方案、指导智能调价等等。显然,这些需求都是当当网现有自建平台很难满足的。
打通原有部署环境 创新性IT升级添活力
对当当网而言,实现电商平台的良好运行是保证业务能力的基础,但提高数据处理和运营效率则对提高行业竞争力至关重要。 因此,在提高业务需求敏捷性、降低投资风险(包括IT资产利旧)、提高运维质量和效率方面,当当网提出了更高要求。 此时,基于对电商业务的充分理解,金山云提出了混合云的IT模式,满足了当当网的上述需求。
首先,金山云为当当网设计了“专线 + VPN”的方式,在保证现有IT基础设施建设投资不浪费的情况下,帮其安全有效地打通了原有IT基础设施环境和公有云(金山云)环境,在保证原有IT服务的持续稳定性的同时,又为其注入了新的活力。
例如,在当当网平日的电商服务中,主要利用原有IT资源(IDC物理机 + 私有云)进行承载。促销期间,以当当网一次常见的促销活动为例,在促销前夕通过自动化大规模迅速部署网站承载服务实例(虚拟机近千台),并且在促销期间,实时监控随着业务量波动的虚拟机的CPU、内存使用情况,由此增加或减少服务实例数量。这样既保证了服务支撑,又不会造成过度投资浪费,促销完成后,可迅速释放闲置实例。
其次,在用户行为数据实时处理方面, 金山云为当当网提供了完整的数据处理流程。 首先,当当网IT团队在数据中心自建了Kafka集群,用于实时收集大量的业务数据,随后通过混合云环境中的专线将数据发送给金山云KMR(Kingsoft Map-Reduce),在KMR中进行实时计算处理,并将计算结果保存到金山云MongoDB 中,然后将数据同步到数据中心内部的MongoDB服务中,最终提供给展现层做BI展示。
当当网大数据实时分析平台架构图
整体而言,金山云为当当网提供的云服务解决方案,是一次基于已有IT设施再升级的创新性解决方案。通过该云服务方案,金山云帮助当当网提高了整个IT基础设施的弹性,使其获得了快速应对不断变化的业务需求的能力,能在数分钟内完成数百台云服务器的快速提供和释放,从容应对因促销而导致的短期访问高峰,避免IT资源闲置,减少基础设施管理和运营成本。而在内部业务创新方面,当当网采用金山云的公有云服务后,可以在新业务系统从开发、测试、上线、迭代的整个生命周期中,获得迅速响应并满足需求的能力,让公司的运维部门变得游刃有余。
对于本次金山云提供的云服务解决方案,当当网运维总监徐莹表示:“互联网讲究小步快跑,快速试错,对新业务尝试,可优先使用公有云的服务,如果项目ROI高,可长期使用,如果ROI低,可快速回收资源,不用投入大量固定投资;应对内部采购周期长,流程繁琐的项目,公有云可快速上线新项目;面对电商促销活动时,金山云充分展示了高弹性的计算,高峰增容,低峰减量,为当当网提高效率,降低成本。”