【Azure Redis 快取】如何得知Azure Redis服務有更新行為？

問題描述

Azure Redis作為微軟雲提供的一種PaaS服務，由於PaaS的特性，服務端的安裝和維護、修補、升級等操作均由平台放負責。雖然最終用戶只需要關注當前服務的使用，但是後台的升級和修補程式行為，總會對使用Redis服務產生影響。如：Azure Redis的「故障轉移 Failover」就是專為此類行為設計的功能。 

故障轉移的說明

當Redis的副本節點將其自身提升為主節點，且舊主節點關閉現有連接時，將發生故障轉移。 主節點重新啟動後，它將自身降級為副本節點。 故障轉移可以是計劃性的，也可以是非計劃的。

計劃性故障轉移發生在系統更新（例如 Redis 修補或 OS 升級）和管理操作（例如縮放和重啟）過程中。 由於節點會提前收到更新通知，因此它們可以協作交換角色，並在更改後快速更新負載均衡器。 計劃性故障轉移通常可在 1 秒內完成。

發生非計劃性故障轉移的可能原因是硬體故障、網路故障或主節點的其他意外中斷。 副本節點可將自身提升為主節點，但該過程需要更長時間。 副本節點必須先檢測到其主節點不可用，然後才能啟動故障轉移過程。 副本節點還必須驗證此非計劃性故障不是暫時性的或局部性的，以避免不必要的故障轉移。 檢測時出現的這種延遲意味著非計劃性故障轉移通常要在 10 到 15 秒內完成。

所以在Redis發生故障，升級時，在前端使用Redis時，雖然受影響的時間非常的短，但是還是會有所影響。所以當前端Redis收到異常消息時候，如何快速的定位是否Redis由升級行為呢？

 

解決辦法

使用Redis的「事件(Events)」功能頁面，配置Event Grid，發送修補程式完成事件到接收端，如Webhook， Azure Storage Queue， Function等，方式非常的多。

當前，Redis Events支援四種事件：

  1. ExportRDBCompleted ：導出快取數據時觸發
  2. ImportRDBCompleted ：導入快取數據時觸發
  3. PatchingCompleted ：修補完成時觸發
  4. ScalingCompleted ：縮放完成後觸發

使用PatchingCompleted事件，則可以在更新，升級完成後，收到來自Redis服務端的消息。此外，也需要針對快取設置「計劃更新」。 告知Redis管理服務在指定的每周時段應用 Redis 運行時修補程式。 通常，這些時段是客戶端應用程式流量較低的時段，目的是避免潛在的事件。

 

操作步驟 

因本文在測時並無法得知何時有升級事件發生，所以以下操作步驟中，以ScallingCompleted事件做為結果演示。並且在演示中使用的存儲隊列方式來接收事件消息，這裡也可以使用其他方式，此處只作為一個演示。

一：創建Redis的Event Grid訂閱，並配置存儲隊列作為接收端

  • 需要提前準備好在配置中需要的 存儲帳號 和 隊列 資訊，如示例中使用的為：backuptest01 和redisupdatequeue01
  • 自定義訂閱事件的名稱
  • 選擇訂閱Redis的事件，如這裡全部選擇了Redis的四個事件
  • 選擇終結點類型。

二：觸發Scalling 操作。在存儲隊列中查看結果

 

補充說明

一：在Redis發生故障轉移，對客戶端的影響和如何減少影響?

Redis客戶端遇到的錯誤數目取決於故障轉移時該連接上掛起的操作數目。  在連接中斷時，許多客戶端庫可能會引發不同類型的錯誤，包括超時異常、連接異常或套接字異常。  例如，在發生故障轉移時發送了請求但未收到響應的操作可能會收到超時異常。 對關閉的連接對象發出的新請求將收到連接異常，直到重新連接成功為止。

由於故障轉移不可完全避免，因此，客戶端應用程式需要使用重試機制，大多數的Redis客戶端都支援重試機制。在 Microsoft.NET 和其他面向對象的語言中，可以使用 Lazy<T> 模式來重新創建連接，而無需重啟應用程式。

    private static Lazy<ConnectionMultiplexer> CreateMultiplexer()
    {
        return new Lazy<ConnectionMultiplexer>(() => ConnectionMultiplexer.Connect(connectionString));
    }

    private static void CloseMultiplexer(Lazy<ConnectionMultiplexer> oldMultiplexer)
    {
        if (oldMultiplexer != null)
        {
            try
            {
                oldMultiplexer.Value.Close();
            }
            catch (Exception)
            {
                // Example error condition: if accessing old.Value causes a connection attempt and that fails.
            }
        }
    }

更多消息，請查看Redis故障轉移和修補文檔：//docs.azure.cn/zh-cn/azure-cache-for-redis/cache-failover

二：如何設置Redis的計劃更新功能？

使用「計劃更新」邊欄選項卡可以為快取實例指定維護時段。 藉助維護時段，可以控制在一周中的哪一天和哪個時間點更新託管快取的 VM。 Azure Cache for Redis 將盡最大努力在定義的指定時間範圍內啟動和完成 Redis 伺服器軟體的更新。詳見：//docs.azure.cn/zh-cn/azure-cache-for-redis/cache-administration#schedule-updates

 

三：Redis Event Grid事件中消息體內容格式

PatchingCompleted 事件

[{
"id":"9b87886d-21a5-4af5-8e3e-10c4b8dac73b",
"eventType":"Microsoft.Cache.PatchingCompleted",
"topic":"/subscriptions/{subscription_id}/resourceGroups/{resource_group_name}/providers/Microsoft.Cache/Redis/{cache_name}",
"data":{
    "name":"PatchingCompleted",
    "timestamp":"2020-12-09T21:50:19.9995668+00:00",
    "status":"Succeeded"},
"subject":"PatchingCompleted",
"dataversion":"1.0",
"metadataVersion":"1",
"eventTime":"2020-12-09T21:50:19.9995668+00:00"}]

ScalingCompleted 事件

[{
"id":"9b87886d-21a5-4af5-8e3e-10c4b8dac73b",
"eventType":"Microsoft.Cache.ScalingCompleted",
"topic":"/subscriptions/{subscription_id}/resourceGroups/{resource_group_name}/providers/Microsoft.Cache/Redis/{cache_name}",
"data":{
    "name":"ScalingCompleted",
    "timestamp":"2020-12-09T21:50:19.9995668+00:00",
    "status":"Succeeded"},
"subject":"ScalingCompleted",
"dataversion":"1.0",
"metadataVersion":"1",
"eventTime":"2020-12-09T21:50:19.9995668+00:00"}]

跟多全面的事件消息體，請參考 Azure Redis事件網格源: //docs.microsoft.com/zh-cn/azure/event-grid/event-schema-azure-cache#the-contents-of-an-event-response

 

參考資料

Redis 的故障轉移和修補：//docs.azure.cn/zh-cn/azure-cache-for-redis/cache-failover

Redis計劃更新：//docs.azure.cn/zh-cn/azure-cache-for-redis/cache-administration#schedule-updates

什麼是事件網格(Event Grid)：//docs.microsoft.com/zh-cn/azure/event-grid/overview?WT.mc_id=Portal-HubsExtension

Redis 事件網格源：//docs.microsoft.com/zh-cn/azure/event-grid/event-schema-azure-cache#the-contents-of-an-event-response

 

Tags:

VirMach 便宜 VPS

QNews

QNews