架构案例丨苏宁易购:商品详情系统架构设计

商品详情系统是一个展示商品基本信息、参数等详情的系统,是商品购买的入口。它是电商平台中访问量最大的系统之一,苏宁易购大促期间PV量和UV量很大,这么大的访问量对系统的并发能力要求高。在业务上它与周边系统的关系是高耦合。依赖商品详情系统的的系统特别多,比如:促销系统、推荐系统、大聚惠、等众多营销系统、还有主数据系统、购物车、收藏夹等,业务复杂度高对系统设计提出更多的要求。

重点在于数据展示

页面信息丰富,如:商品详情、商家列表、推荐、排行榜等

部分数据时效要求高,如:价格、库存等

业务上依赖的系统多

1.展示

产品上需要设计好页面区分展示的内容

技术上主要是页面缓存设计、前端页面模版和JAVA程序的解耦

2.数据处理

基本数据,外部系统传过来直接就可以使用的数据

聚合数据,需要加工才能使用的数据

3.服务依赖

通过MQ解耦,异构数据

解决好以上三个问题就解决了此系统核心问题。

商品详情系统在设计上分成前、中、后三层结构

前台负责展示,做为VIEW层不处理业务逻辑,负责渲染。

中台负责业务逻辑处理,提供数据给前台,同时还会对外部系统提供服务

后台负责主数据管理,做为数据管理层处理商品主数据、参数、品牌、供应商等,同时部分内容开放给运营进行维护、管理和异常处理等。

页面设计:

1.动静分离

JavaScript、CSS统一放到公共的静态服务器上,完全独立的子域名,防止脏Cookie问题和动态域名中无用Cookie问题,通过文件版本号解决系统新版和旧版本之间冲突问题。

所有图片由独立的分布式图片系统管理,对原图进行不同规格的无损裁减和压缩。

2.异步加载和懒加载

商品价格、营销活动信息、库存等动态数据通过异步加载

3.多级缓存策略

a.浏览器本地缓存

协商缓存,对于某些时效要求较高的资源通过Last-modified控制数据。做到StatusCode=304

b.CDN缓存

CDN分两条线有自营CDN和合作商的CDN,图片、静态资源与伪静态数据分

别放在不到的CDN上

c.Varnish缓存

d.精准缓存

精准缓存失效用于促销活动准时展示的场景,基于Varnish缓存,通过精准控制缓存有效期实现缓存精准失效保证促销活动准时切换。

组件逻辑设计:

商品详情系统中的购买按钮和加入购物车会因商品不同走不同的流程。如:大聚惠商品、定金团商品、预售商品等因促销方式不同,走不同的业务处理流程。促销模式变化多端,可能每个月都会有变化,通常的面向接口编程和加上工厂方法或者依赖管理框架Spring也很难做到真正的解耦,虽然这样做已经符合开闭原则。我们通过观察者模式很好的解决了这个问题。让前端的页面模版和JAVA应用程序之间真正的解耦。

后台设计

商品数据统一处理设计

接受MQ消息并持久化通过Listener

解析报文

业务处理上简化为add、update、delete三个动作

异常组件以观察者模式实现,记录处理失败的MQ消息并对消息进行截取,并供下次再反向执行(一条MQ消息中会有一到多条参数、品牌,所以这里用截取)

解耦分两块,系统交互间的解耦和商品详情系统组件间的解耦以及业务流程的解耦

系统间的解耦通过SOA服务治理来解决,但是由于业务的特殊性在服务治理和性能以及一些其它因素的权衡中,我们还选择了一种共享Redis的方式来解决解耦

商品详情系统组件间解耦以及业务流程的解耦。

我们使用中规中矩的部署方式VarnishApacheJBoss。

这种架构在针对中小系统没有什么问题,但像商品详情系统这种访问量巨大的系统会显的有点吃力。移动端对性能的要求更高。

a.服务分离与服务合并

PC和移动端的服务分离,以前是同一个接口支持多端,现在是每端都有独立的应用层服务,原子层服务共享。

移动端处理器和内存性能上的限制,采用服务的合并,且移动端用NginxLua。

b.公共服务

提出了一个公共服务,公共服务用来接受PC、WAP、APP公共的异步请求的服务。

c.分布式文件系统

商品详情页在回源过程中压力很大,基于其不可降级,我们提出了把商品详情页做为一个静态页放到分布式文件系统,当DB和Redis压力过大,直接调取分布式文件系统中数据

多端都使用NginxLua,Nginx的异步非阻塞型事件处理机制资源消耗少,并发能力高。

用NginxLua做为整体的接入层

在Nginx接入层加入三层缓存

只有聚合信息才会调用服务层,减少依赖关系

服务层数据通过Worker推送和刷新缓存,这亲服务层完全和DB隔离

移动端连接复用、链路复用、防劫持SDK开发等

上面介绍了商品详情系统前、中、后三层逻辑架构以及各层的设计方法,还介绍了部署架构演变,下面是商品详情系统数据流程结构的

1.0版本:

这个结构有两个问题:

数据异构结果没有和前端展示关联起来,数据变更不能在前端及时展示

还是没有解决前端接口依赖问题。

2.0版本:

把前端分成了三部分:

基础信息组件不需要加工的消息、聚合信息组件(需要组合消息或者计算才能提供服务的)、实时数据组件处理对外部的依赖

数据异构后会以MQ形式通知基础服务,并会刷新缓存,这种结构后前端与数据层无直接依赖。

回源是缓存中最头痛的问题,随着系统业务复杂度的上升,很难从整体上把控各种业务数据在回源时给一个系统带来的压力,如果回源处理不端在极端情况下会导致DB压力瞬间上升,DB不可用或者连接数满了等问题,会发生以前类似JVMGC回收时的“stop-the-world”问题。我们回源从被动更新缓存数据更改为主动推送缓存数据从根本上解决这问题。

数据变更通过listener推送缓存至varnish

原来PC端、移动端、TV端产品、开发、测试是分中心分部门,为真正做到多端融合,进行组织架构融合,产品、开发、测试合并到一个中心,统一协调。合并后工作效率变高,产品质量提升,进行小团队做战。

展示分离是指在结合公司业务特性、产品自身特性以及降耦合指导思想进行PC、WAP、APP端(IOS、ANDROID)、TV端的展示端进行分离处理。

逻辑融合分离是指在原子服务层进行融合共享,从服务单一职责原则出发在不同端分别提供独立的服务并加上各自特性,做到接口可扩展性和服务隔离。真正做到一包部署多端使用互不影响,在业务可扩展性和可维护性上做到成本最低。

在物理层为了避免多端进行资源竞争、相互干扰进行独立部署

商品详情系统数据库用Mysql,采用主从加读写分离结构,注意:主从不在同一个物理机上,也不在同一组路由器中。应用层中业务上对时效性要求高的数据在写库中操作,业务上对于时效性要求不高数据在读库中操作。主从结构保证在主库出现故障比如岩机自动切换到从库。读库通过LVS做负载均衡做到高可用。

DalClient组件支持对数据库的分库分表,同时支持横向扩展。

应用层逻辑优先从Reids中获取业务数据,如果Redis中没有,再从DB中获取。Redis采用sharding方案,每个sharding由一个master和一个salve组成,再通过sentinel保证高可用。当master出现不故障,比如网络跳动,sentinel会自动把salve切换为master,这个切换是毫秒级的。master和salve通过主动和被动两种方式来同步,做到最终一致性,符合CAP理论演变过的BASE理论。

借鉴JAVAGC中对内存分代思路解决Redis缓存过期产生的惊群现象。

THE END
1.javajsp课程设计报告(网络购物车的实现)(22页)java-jsp课程设计报告(网络购物车的实现).doc,课程设计 课程设计名称: java课程设计 专业班级:学生姓名:学号:指导教师: 课程设计时间: 2011.12.12-2011.12.23 计算机科学与技术 专业课程设计任务书 学生姓名 专业班级 学号 题目 网络购物车 课题https://max.book118.com/html/2021/0515/8134030123003101.shtm
1.Java网上购物系统源码详解与实践指南简介:Java购物源码是一个完整的网上购物系统实现,集成了用户管理、商品浏览、购物车、订单处理、支付接口等电商核心功能。本项目详细介绍了如何使用Java技术栈构建各关键模块,包括使用Spring Security进行用户权限控制,Spring MVC处理HTTP请求,以及集成支付平台的支付模块等。同时,文中还讨论了数据库设计、系统安全性和性能...https://blog.csdn.net/weixin_29025501/article/details/143495113
2.java程序购物车防超卖解决方案java购物车类java程序购物车防超卖解决方案 java购物车类 小组成员 小组分工: 前期调查: 系统功能结构图: 流程图: UML类图: 运行结果: 1.按类别查找商品: 2.显示商城中所有商品: 3.将选定的商品加入购物车: 4.增加购物车中指定商品的数目: 5.减少购物车中指定商品的数目:...https://blog.51cto.com/u_16213622/11586634
3.用javajavaBean做的购物车的源代码和电子商城系统码农集市专业...网上书店的相关信息和购物车的详细代码jsp 和javaBean 的详细使用https://www.coder100.com/index/index/content/id/165179
4.图灵课堂Java就业培训教程视频课程大纲16-1 单点登录系统CAS基本介绍 16-2 SpringSecurity与CAS集成 16-3 品优购系统用户名显示 第十七章: 就业课-购物车解决方案 17-1 Cookie实现购物车 17-2 购物车前端 17-3 远程购物车存取 17-4 合并购物车 第十八章: 就业课-跨域解决方案与订单管理 ...https://www.tulingxueyuan.cn/tlzx/tljc/796.html
5.Java项目实践,订单管理与购物车的实现思路腾讯云开发者社区Java项目实践,订单管理与购物车的实现思路 1、订单管理 首先是订单表的设计,主要包括订单表和订单详情表,订单表主要包含订单的主要信息,比如订单的编号、总额、数量、状态、收货人信息等。其中收货人信息必须要冗余到订单表中,不能简单用Id进行管理。 订单详情表和订单表是多对一关系,订单详情表主要计量订单中的商品...https://cloud.tencent.com/developer/article/1748296
6.java商城项目实战之购物车功能实现java这篇文章主要为大家详细介绍了java商城项目实战之购物车功能实现,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下本文实例为大家分享了java实现购物车功能的具体代码,供大家参考,具体内容如下1 需要实现1、实现淘淘商城的购物车功能...https://www.jb51.net/article/138392.htm