库存事务数据抽取方法与流程.pdfVIP

《089_库存数据的事务从哪里抽取？》

我们现在想要知道的是一个商品在仓库里的各种事务，供应商把一批商品运送到你的商品

里去，这个事务你是怎么知道的？这个事情会在你的仓储系统里会发生，会有一个进货单一

样的东西，完成一个更新

区里去进行检验，在仓储系统里本身就会有

不通过的商品退回，通过的商品正式入库，这些事情行为在仓储系统里都会有一定

的体现的，WMS系统里都是会有体现的

仓储系统里一系列的行为，都是去更新他自己的表数据，不一定能让你直接抽取到库存的事

务数据的，一般都需要进行日志，也就是说，你需要专门跟后端工程师约定好，他们开

发WMS系统的

发生一件事情的时候，约定好，让他们发送一条消息到MQ里去，你说自己的一批商品

到仓库了，这种方式不太靠谱

基于canal仓储系统的表binlog的变更，根据每个表的binlog来判定是否发生了

某件事情，一批商品到仓库了，会对应着仓储系统里的一个进货单，此时仓库管理员就应该

在仓储系统里对这批商品的进货单，点击一个按钮，标识他是商品到仓库

此时必然对应仓储系统对他底层的表结构进行一定的更新，就有mysqlbinlog，你到这

条binlog，就把这条binlog给写入到hive表里去，通过flume去做一个，在ods层面