首页 > 其他 > 详细

elasticsearch使用BulkProcessor批量入库数据

时间:2019-10-10 22:44:03      阅读:283      评论:0      收藏:0      [点我收藏+]

在解决es入库问题上,之前使用过rest方式,经过一段时间的测试发现千万级别的数据会存在10至上百条数据的丢失问题,

在需要保证数据的准确性的场景下,rest方式并不能保证结果的准确性,因此采用了elasticsearch的BulkProcessor方式来进行数据入库,

实际上采用es客户端不同,rest方式采用的是restClient,基于http协议,BulkProcessor使用的是TransportClient,基于Tcp协议。

 

 



原文链接:https://blog.csdn.net/wslyk606/article/details/79413980

elasticsearch使用BulkProcessor批量入库数据

原文:https://www.cnblogs.com/Allen-rg/p/11650770.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!