目前litemall基础系统主要由litemall数据库、litemall-core模块、litemall-db模块、 litemall-os-api模块和litemall-all模块组成。
实际上,属于litemall真正的基础系统是litemall-core模块和litemall-db模块。 litemall-os-api模块只是为了减少开发中对第三方图片存储服务依赖而实现的简单图像存储服务, 建议开发者最终部署时切换到第三方图片存储服务。litemall-all模块只是一个包裹模块, 没有任何代码,其作用是融合三个spring boot模块和litemall-adminm模块静态文件到 一个单独spring boot应用中,并最终打包成war格式的项目安装包。
目前存在的问题:
严重数据库采用git,每次跟新都是5MB数据,影响项目下载速度改善 litemall-db的一些CRUD操作可以基于开源库重构功能可以参考一些云存储服务的API加强一些功能litemall.sql数据库基于nideshop中的nideshop.sql数据库,然后在实际开发过程中进行了调整和修改:
具体不同可以比较litemall-db模块下sql文件夹中nideshop.sql和litemall.sql。
以下讨论一些关键性设计
注意:
以下设计基于个人理解,很可能存在不合理或者与实际系统不符合的地方。
这里商品存在商品,商品属性,商品规格,货品四种表
商品表是一种商品的基本信息,主要包括商品介绍,商品图片,商品所属类目,商品品牌商等;
商品参数表其实也是商品的基本信息,但是由于是一对多关系,因此不能直接保存在商品表中(虽然采用JSON也可以但是不合理), 因此采用独立的商品参数表,通常是商品的一些公共基本商品参数;
商品规格表是商品进一步区分货品的标识,例如同样一款衣服,基本信息一致,基本属性一致,但是在尺寸这个属性上可以 把衣服区分成多个货品,而且造成对应的数量和价格不一致。商品规格可以看着是商品属性,但具有特殊特征。
商品规格和规格值存在以下几种关系:
货品则是最终面向开发者购买的商品标识,存在多个规格值、数量和价格。
因此这里一个商品表项,存在(至少0个)多个商品属性表项目,存在(至少一个)多个商品规格表项, 存在(至少一个)多个货品表项。
举例如下:
以下是一些细节的讨论:
M*N个货品,但是有些货品可能天然不存在。
那么,此时数据库如何来设计,是允许少于M*N个项,还是必须等于M*N个,而不存在货品的数量设置为0?
注意:
这里的设计可能与实际项目设计不一致,但是目前是可行的。 商品的中文用语“商品”和英语用语“goods”,货品的中文用语“货品”和英语用语“product”可能是不正确的。
目前准备支持用户普通账号登录和微信登录两种方式,两种登录方式仅仅采用一个litemall-user表可能不是很合适。此外,如果进一步支持其他多种第三方登录,那么这里需要重新设计。
原nideship.sql中存在region数据,但是litemall.sql的region数据则来自 Administrative-divisions-of-China项目。
从该项目中导入数据到litemall.sql的litemall-province、litemall-city、litemall-area和litemall-street四个临时表; 然后按照项目的要求采用一定的代码重新生成一个新的litemall-region表; 最后删除四个临时表。
订单信息主要由基本信息、商品信息、地址信息、费用信息、快递信息、支付信息和其他信息组成。
基本信息 订单创建时的一些基本信息。
商品信息 由于订单可以存在多个商品,因此订单的商品信息是由独立的订单商品表记录(可能更应该称为货品)。
费用信息
快递信息 目前快递信息仅仅记录快递公司、快递单号、快递发出时间、快递接收时间。 而如果快递过程中如果存在一些异常,例如物品丢失,则目前系统难以处理。
关于快递费的计算,目前采取简单方式,即满88元则免费,否则10元。
支付信息
其他信息
订单分成几种基本的状态:
状态码101,此时订单生成,记录订单编号、收货地址信息、订单商品信息和订单相关费用信息;
状态码201,此时用户微信支付付款,系统记录微信支付订单号、支付时间、支付状态;
状态码301,此时商场已经发货,系统记录快递公司、快递单号、快递发送时间。 当快递公司反馈用户签收后,系统记录快递到达时间。
状态码401,当用户收到货以后点击确认收货,系统记录确认时间。
以上是一个订单成功完成的基本流程,但实际中还存在其他情况。
状态码102,用户下单后未付款之前,点击取消按钮,系统记录结束时间
状态码103,用户下单后半小时未付款则系统自动取消,系统记录结束时间
状态码202,用户付款以后未发货前,点击退款按钮,系统进行设置退款状态,等待管理员退款操作
状态码203,管理员在管理后台看到用户的退款申请,则登录微信官方支付平台退款,然后回到 管理后台点击成功退款操作。
状态码402,用户已签收却不点击确认收货,超期7天以后,则系统自动确认收货。 用户不能再点击确认收货按钮,但是可以评价订单商品。
此外,当订单状态码是102、103、203、401和402时,订单可以执行删除操作。 目前的设计是不执行物理删除,而是逻辑删除,因此用户查看自己订单时将看不到这些“已删除”的订单。
注意:
- 目前退款相关功能未完成。
- 在上图中可以看到
101到101的状态变化,这里只是小商场用户的操作,不会影响订单状态码。
- 用户点击付款时,后台服务会生成预支付会话id,但是不会影响订单状态。
- 而用户支付过程中,放弃支付,例如没有
小商场用户在小商场点击下单按钮,此时小商城后台服务会生产商户订单。
所对应的后台服务方法是litemall-wx-api模块的WxOrderController.submit
这里开发者可能会奇怪,这里存在101->101的变化,这里表明后台没有响应
小程序端的请求,但是这里的响应没有导致订单状态实际的变化。这里所指的
响应小程序端请求是指下单成功以后小程序端自动请求付款或者用户在订单页面中
点击付款所导致的对后台服务的预支付请求。
关于微信支付流程,可以参看官方文档的小程序支付业务流程 也就是说这里小商城后台服务会返回付支付信息。
所对应的后台服务方法是litemall-wx-api模块的WxOrderController.prepay
小商城接收返回的预支付信息后,会在小程序端出现支付页面。 如果用户放弃支付,则不会出现任何效果,不会向小商场后台服务发送任何信息。 如果用户支付,则会导致微信支付平台向小商场后台服务推送支付结果。
如果用户没有支付,那么此时用户可以点击取消订单按钮来放弃当前订单。
所对应的后台服务方法是litemall-wx-api模块的WxOrderController.cancel
如果用户没有支付,也没有点击取消订单按钮,那么系统会定时查询数据库的订单信息。
如果发现存在订单未支付状态超时半小时,此时系统会自动取消订单,来释放商品资源。
所对应的后台服务方法是litemall-admin-api模块的AdminOrderController.checkOrderUnpaid
如果用户支付,微信支付平台会向小商场后台服务推送支付结果。 而响应结果表示支付成功,则订单状态信息设置201,表示支付成功。
所对应的后台服务方法是litemall-wx-api模块的WxOrderController.payNotify
当用户支付以后,管理员未发货前,用户可以点击退款申请退款取消订单。
通常用户点击退款以后系统可以基于微信支付平台的退款接口实现自动退款,
但是这里考虑到安全原因,不支持系统自动退款操作。
相应地,这里小商场后台服务只是设置订单状态,表示退款申请中。
所对应的后台服务方法是litemall-wx-api模块的WxOrderController.refund
这里退款操作是由管理员在微信支付平台手动退款,然后在本项目的
管理平台里面点击退款确认按钮,此时订单状态会设置成203,表明
退款已经成功,同时系统会自动恢复订单商品数量。
所对应的后台服务方法是litemall-admin-api模块的AdminOrderController.refundConfirm
当订单支付以后,管理员进行订单发货,然后在管理平台点击发货,填写快递信息,
设置订单状态是301,表示管理员已发货状态。
所对应的后台服务方法是litemall-admin-api模块的AdminOrderController.ship
当用户收到商品以后,用户点击收货确认按钮,设置订单状态401,表示用户成功收货。
所对应的后台服务方法是litemall-wx-api模块的WxOrderController.confirm
当管理员发货以后,用户一直没有确认收货,系统定时检测订单状态,如果发现发货以后 七天用户都没有收货,此时系统自动确认用户收货,设置订单状态402。
所对应的后台服务方法是litemall-admin-api模块的AdminOrderController.checkOrderUnpaid
注意:
上述订单状态变化中具体的逻辑处理可以参考相应模块文档和模块代码。
状态码标识了订单的状态,但是对于用户而言,真正关心的只是他们能够进行的操作, 也就是在小商场的小程序端用户可以进行点击的按钮操作,目前支持:
支付,如果下单后未立即支付,则订单详情页面会出现支付按钮;取消,如果用户未支付,则订单详情页面会出现取消按钮;退款,如果用户支付后但是管理员未发货,则订单详情页面会出现退款按钮;确认收货,如果管理员已发货,则订单详情页面会出现确认收货按钮;申请退货,如果用户已经确认收货同时未超过一段时间,则订单详情页面会出现申请退货按钮;
注意,这里如果是系统超时自动确认收货,则不会出现;去评价,如果用户确认收货以后,则订单详情页面会出现去评价按钮;
注意,这里如果是系统超时自动确认收货,则也会出现;再次购买,如果用户确认收货以后,则订单详情页面会出现再次购买按钮;
注意,这里如果是系统超时自动确认收货,则也会出现;删除,如果当前订单状态码是102、103、203、401和402时,则订单详情页面会出现删除订单按钮;
注意,这里的删除操作是逻辑删除,即设置订单的删除状态deleted。
因此订单状态码和小商场用户操作之间存在映射关系:
用户可以支付、取消
用户可以删除
用户可以删除
用户可以退款
用户可以删除
用户可以确认收货
401
用户可以退货、删除、去评价、再次购买
402
用户可以删除、去评价、再次购买
开发者可以参考litemall-db模块的OrderUtil类。
虽然这里用户有退款操作,但是目前不支持退货相关业务。
从一些资料看,如果用户订单多次取消,应该加入黑名单。 目前不支持。
以下是一些表设计中无具体业务意义可通用的字段。
除极少数表,其他所有表都存在deleted字段,支持逻辑删除。
因此目前删除数据时,不会直接删除数据,而是修改deleted字段。
当然,数据库管理员可以连接到数据库直接删除数据,或者开发者
可以修改这里的逻辑采用物理删除。
除极少数表,其他所有表都存在add_time字段,记录数据创建时间。
如果开发者需要在访问表时采用乐观锁机制,则需要在表中设置version字段,
这个字段开发者不需要管理,而是由程序自动使用,来提高乐观锁机制。
具体使用方法可以参考2.2.8 乐观锁
litemall-db模块是一个普通的Spring Boot应用,基于mybatis技术提供开发者 访问数据库的功能。
此外,litemall-db最终是作为一个类库被其他模块所依赖使用,因此并不对外 直接服务,没有使用Spring MVC技术。
技术:
这里litemall-db模块可以分成以下几种代码:
如上图所示,双击mybatis-generator:generate,则mybatis generator插件会:
mybatis-generator文件夹下的generatorConfig.xml文件jdbcConnection访问数据库table, 自动生成三种代码:
org.linlinjava.litemall.db.domain 包内的Java代码org.linlinjava.litemall.db.domain 包内的Java代码org.linlinjava.litemall.db.domain.dao 内的XML文件以上三种代码即可封装对数据库的操作,开发者无需直接操作sql代码, 而是直接操作Java代码来完成对数据库的访问处理。
关于如何基于mybatis的Example代码来访问数据库,请查阅相关资料,
或者参考本模块org.linlinjava.litemall.db.dservice 包内的Java代码。
当然,为了达到数据库访问效率,开发者也可以手动自定义mapper文件和对应的Java代码,但目前这里不采用或者不建议采用。 例如,当需要访问两个表的数据时,这里是在业务层通过Java代码遍历的形式来访问两个表。
这里,以litemall_brand表举例说明:
mybatis generator插件会根据数据库table标签
<generatorConfiguration>
<table tableName="litemall_brand">
<generatedKey column="id" sqlStatement="MySql" identity="true" />
<columnOverride javaType="java.time.LocalDateTime" column="add_time"/>
</table>
</generatorConfiguration>
自动生产src文件夹下domain包内的LitemallBrand.java类、LitemallBrandExample.java类、 dao包内的LitemallBrandMapper.java接口和resources文件夹下dao包内的LitemallBrandMapper.xml文件。
手动在service包内创建LitemallBrandService.java来对外提供具体的服务。 例如,为了得到Brand列表,那么创建list方法,基于前面创建的三个Java来来实现。
@Service
public class LitemallBrandService {
@Resource
private LitemallBrandMapper brandMapper;
public List<LitemallBrand> query(int offset, int limit) {
LitemallBrandExample example = new LitemallBrandExample();
example.or().andDeletedEqualTo(false);
PageHelper.startPage(offset, limit);
return brandMapper.selectByExample(example);
}
}
如果基于一个新表创建新访问组件,请阅读下面章节2.2.6
关于mybatis generator的用法,可以参考: https://blog.csdn.net/isea533/article/details/42102297
基于2.2.1的代码,业务代码处理一些具体业务相关的操作,对其他模块提供具体的服务。
采用Java注解的方式来完成一些特定的配置操作。
本节介绍如果基于一个表创建新的服务组件。
在数据库里面创建一个表,例如litemall_demo:
CREATE TABLE `litemall`.`litemall_demo` (
`id` INT NOT NULL AUTO_INCREMENT,
`name` VARCHAR(45) NULL,
`address` VARCHAR(45) NULL,
PRIMARY KEY (`id`));
INSERT INTO `litemall`.`litemall_demo` (`id`, `name`, `address`)
VALUES ('1', 'hello', 'world');
在generatorConfig.xml中增加一个新的table标签
<generatorConfiguration>
<table tableName="litemall_demo">
<generatedKey column="id" sqlStatement="MySql" identity="true" />
</table>
</generatorConfiguration>
双击mybatis generator插件,检查LitemallDemo.java类、LitemallDemoExample.java类、 LitemallDemoMapper.java接口和LitemallDemoMapper.xml是否生产。
在service里面新建LitemallDemoService.java类,
@Service
public class LitemallDemoService {
@Resource
private LitemallDemoMapper demoMapper;
public List<LitemallDemo> list() {
LitemallDemoExample example = new LitemallDemoExample();
return demoMapper.selectByExample(example);
}
}
可以在src/test/java/org.linlinjava.litemall.db包里面创建LitemallDemoTest.java类,
使用Junit进行测试。
@WebAppConfiguration
@RunWith(SpringJUnit4ClassRunner.class)
@SpringBootTest
public class LitemallDemoTest {
@Autowired
private LitemallDemoService demoService;
@Test
public void test() {
List<LitemallDemo> litemallDemoList = demoService.list();
Assert.assertTrue(litemallDemoList.size() != 0);
}
}
同样地,可以在Controller中使用LitemallDemoService来对外提供服务。
@RestController
@RequestMapping("/demo")
public class DemoController {
@Autowired
private LitemallDemoService demoService;
@RequestMapping("/list")
public Object list(){
List<LitemallDemo> demoList = demoService.list();
return demoList;
}
}
数据删除可以直接使用delete方法进行物理删除,也可以采用设置删除字段进行逻辑删除。 根据具体业务,也有可能部分数据可以物理删除,部分数据只能逻辑删除。
目前所有删除操作是逻辑删除,除了极少数表外,其他所有表的设置了`deleted 字段。
开发者可以自行修改代码进行真正的物理删除。
由于服务是多线程并发的,因此这带来了多线程同时操作数据库中同一数据的问题。 由于数据极少删除或者是逻辑删除,因此操作数据,可以简化成更新数据。 也就是说,需要解决多线程更新数据库同一数据的并发问题。
例如,下单操作中,用户A购买商品G的数量是1个,而用户B同一时间也购买商品G的 数量也是1个,那么如果没有很好地并发控制,有可能商品G的数量仅仅是减1,而不是 设想的2。
通常采用悲观锁或者乐观锁来处理并发更新问题,
本项目目前采用基于version字段的乐观锁机制。
原理是:
当然,这里好像也存在一个漏洞,3中所比较的数据库当前version字段的值有可能修改过 但是恰巧没有变。例如version加1再减1,那么查询时该值并没有变化。当然,如果version 是单调自增,则应该不存在这个问题。
具体技术细节如下:
当然,由于采用乐观锁,这里也会带来另外一个问题: 数据库有可能更新失败,那么如何处理更新失败的情况?
目前的方法是在业务层多次尝试。
例如: 由于用户A和B同时更新同一商品数量,而用户A成功,B则失败。 此时B失败后会再次进行商品购买逻辑。
当然逻辑上这里仍然会存在再次和其他用户同时购买而失败的情况。 不过考虑到本项目设想的场景,因此可以采用。
开发者需要注意这个问题,可能需要采用其他技术来解决或避免。
通过mybatis-generator已经自动生成了很多代码,而且具有一定的功能, 但是开发者仍然需要基于生成的代码写一些固定的CRUD代码。
目前发现已经有两个mybatis增强的框架可以进一步简化代码和功能增强:
目前没有采用,以后可能会基于其中之一重构数据库访问代码。 开发者感兴趣的可以自行研究使用。
litemall-core模块是spring boot应用通用的代码,包括配置代码和util代码。
目前开发过程中,CORS配置是允许所有请求。
真正部署时,开发者需要做一些调整,来保证当前的服务只接受来自所设置域名的请求。
如果系统内部产生了异常而开发者没有catch,那么异常的内容会发送到前端。 这里通过提供全局异常处理器,来处理所有开发者没有处理的异常,返回 “系统内部错误”之类的信息给前端从而达到保护系统的效果。
Jackson做一些设置。
注意
这里的util代码不会涉及具体业务,例如litemall-db模块中存在一个 OrderUtil类处理数据库中litemall_order表的一些转换工作。
这里是用于设置response中body的内容格式。
如果是成功则是 :
{
errno: 0,
errmsg: '成功',
data: XXX
}
如果失败则是:
{
errno: 非0的XXX,
errmsg: XXX
}
当请求时POST时,请求的json内容在body。 通常存在存在两种方式取出数据:
这里JacksonUtil简化解析工作。这里代码有局限性,开发者请谨慎使用,或者熟悉Jackson 使用的开发者欢迎优化代码。
生成固定长度的随机字母字符串或者随机数字字符串。
这里是用于对用户密码或者管理员密码加密存储。
bcypt代码本质上是spring里面的代码。
对象存储服务目前的目标是支持图片的上传下载。
作为后台模块之一,litemall-os-api并没有对应的前端模块,而只是在litemall-admin模块 的对象存储页面中允许管理员修改。
注意:
这个模块是可选的,或者说不建议最终部署时所使用。 最终部署时建议采用第三方云存储方案。
支持服务:
警告
目前这里没有任何安全机制,这意味着任何人如果知道对象存储服务的地址,都可以直接存储访问对象数据。
这样简化的目的是对象存储服务建议最终采用云服务,因此这里仅仅实现一个简单的服务面向测试开发。
如果开发者需要局域网部署,那么这里需要加入一定的安全机制。
每一个上传的文件都会采用一个随机值key,作为当前文件的网络访问链接的一部分。
以后可能需要进一步支持自定义Key,例如采用原文件名字作为key。
在章节1.5中讨论的部署方案中设计了一种单主机单服务方案, 也就是说三个后台服务和静态文件都部署在一个Spring Boot应用中。
注意:
这个模块也是可选的,或者说不是非常建议的,应该仅用在主机内存资源紧张的情况下。 最终部署,仍然建议部署多个服务更为安全和稳定。
查看litemall-all模块,代码仅仅只有一个Application类。
实际的原理是litemall-all模块内的pom.xml文件:
声明打包方式是war,因此最后会打包war格式
设置spring-boot-starter-tomcat包是provided,因此最终不会打包
申明依赖litemall-os-api、litemall-wx-api和litemall-admin-api,
因此最终会打包;
在Application类里面通过scanBasePackages即可把三个后台服务模块
的服务启动。此外在tomcat中启动,需要采用继承SpringBootServletInitializer类
的Application。
注意,这里只是简单的复制。因此开发者需要保证litemall-all打包前,litemall-admin 模块内dist目录下静态文件已经生成。
最终打包以后则是一个war格式的项目包,包含了三个后台服务和静态文件。