ACC-5595 GE 反射内存交换机

ACC-5595 GE  

根据以上三种方法的描述，工单系统适合采用定期扫描数据库的方法进行冷热分离。如何区分冷热数据是否已经有了区分冷热数据的方法解决方案解决了，所以在本节中，我们来看看如何区分冷热。冷热分离的基本流程如下:识别冷热数据;将colddata插入冷库;删除热存储中的冷数据。结束这三个基本原则在这个过程中，我们需要考虑以下几点:在前三个过程中，我们不能100%确定不会出现问题，所以我们必须使用代码来保证数据的最终一致性。为了达到事实的一致性，我们可以在工作订单表中添加一个新列

冷数据(是，否，默认值:否)。

首先，冷热数据分离服务将所有周围的冷数据标记为冷数据。业务将冷数据迁移到冷存储中，迁移完成后在热存储中删除对应的数据。假定在移动或删除数据时如果发生异常，那么我们需要在事务代码中添加重定位和删除数据的重试机制(这里通常使用主流的重试库，如Polly inNET、Java中的quava-retry等)。如果重试几次后仍然不成功，则代码可以停止数据冷热分离并发出警告，或跳过不成功的数据，继续进行后续的数据迁移。在删除和跳过失败的情况下，很有可能在下次分离冷热数据时，将重复的数据插入冷库然后我们需要在insertinq之前确定冷库中是否存在数据，或者使用数据库的幂等操作来完成插入操作(如thensert…MySQL数据库的Duplicate Key Update语句)。这里，我们考虑a问题是工单系统有大量的数据。如果一次性将所有的冷数据都插入到冷库中，速度会很慢，可能需要几十分钟甚至更长时间甚至几个小时。有两种绑定方法可以解决这个问题:一种是批处理，另一种是多线程处理。