原创力文档- 2
- 0
- 约1.45万字
- 约 12页
- 2023-07-05 发布于四川
- 举报
本发明提供一种数据流量控制方法，包括：接收模块接收Kafka队列发送的Binlog数据，并将Binlog数据发送至限流模块；限流模块按预设流量向Kafka下游装置发送Binlog数据，并将超出预设流量的Binlog数据发送至等待队列；监听模块周期性地将等待队列中的Binlog数据提取至限流模块进行重新发送。本发明通过延长突发流量在Kakfa队列中的传输路径长度及等待时间的方式实现对突发流量的缓冲，有效避免突发流量对Kafka队列的阻塞，进而提升了数据处理系统整体的数据处理效率。本发明还提供一种数
(19)中华人民共和国国家知识产权局
(12)发明专利申请
(10)申请公布号 CN 113810307 A
(43)申请公布日 2021.12.17
(21)申请号 202111182206.7
(22)申请日 2021.10.11
(71)申请人 上海微盟企业发展有限公司
文档评论（0）