如题:
现在在做一个商城的搜索引擎,项目中引入了es,然后具体搜索流程是
1.先把热数据所在表中需要进行搜索的字段单独存储到了es,这里是使用了定时任务来把数据同步到了es库中,但是只同步了需要进行搜索的字段,而不是整张表的数据
2.页面调用搜索功能时,直接使用es搜索并进行分页,获取到数据之后,遍历获取到的数据的id并将其返回mysql进行查询,并拿到完整数据,再将该数据返回到页面进行使用
缺点:
1.数据查询多了一个返回mysql数据库的步骤
2.页面在进行数据修改的时候,需要对mysql数据库和es数据进行同步操作,在调用列表接口,此时会出现es数据与mysql数据不同步的问题,导致页面数据出现幻读
问题:
1.通过es查询到的数据有必要返回mysql再查一遍吗?是不是直接将热数据整张表都存储到es,然后查询的时候直接用从es拿到的数据,更新数据时只更新es数据,将mysql与es的数据同步分离出来好一点?因为感觉这样在页面调用更新数据功能时,就不必进行数据同步操作,也叫不会出现数据幻读情况;但是感觉这样的话,es需要存储更多的数据
有没有合适的改进方案呢,还是说使用这套方案,通过其他方式来解决幻读问题(例如中间件或线程锁)