mysql5.6倒入elasticsearch7.10真慢

妖言惑众 · 发表于 2021-5-21 20:51:52

每秒连1万都玄乎，请问神仙们，是我哪里姿势不对吗？

wgetrc · 发表于 2021-5-21 21:06:25

go-mysql-elasticsearch

妖言惑众 · 发表于 2021-5-21 21:20:21

wgetrc 发表于 2021-5-21 21:06
go-mysql-elasticsearch

恰巧我用的就是这个叼毛东西，刚刚算了下3000条/秒，这方面我发现不如solr，solr最差也得7、8k，稍微快点3、4w，再快7、8w

wgetrc · 发表于 2021-5-22 08:46:20

调整 bulk_size 试试

妖言惑众 · 发表于 2021-5-22 12:56:37

wgetrc 发表于 2021-5-22 08:46
调整 bulk_size 试试

大佬是thread_pool配置吗，目前我降低刷新关闭副本速度可以到2w。thread_pool需要重启es还没试。

wgetrc · 发表于 2021-5-27 10:04:10

这里
https://github.com/go-mysql-org/go-mysql-elasticsearch/blob/fe261969558bf79dffa46d37d2b95f62d65502a1/etc/river.toml#L40

妖言惑众 · 发表于 2021-5-27 21:30:15

wgetrc 发表于 2021-5-27 10:04
这里
https://github.com/go-mysql-org/go-mysql-elasticsearch/blob/fe261969558bf79dffa46d37d2b95f62d65 ...

多谢大佬，我改为了php+bulk了，嘿嘿，速度保持在2-3w，主要是这样控制性比较强。

		自动登录	找回密码
密码			注册